规则名叫:产品评论1,做的模拟点击,是跟产品评论2一起的。
滚频参数是3、2
勾选了定时器触发

如果设置滚频次数为0,那就滑不到 模拟点击的地方,一设置滚屏次数就觉得很多余,因为只要滚一下就滑到 模拟点击的地方了。。。。还有就是第二级界面有时候会报错是为什么啊。。。

以下是一些测试网址:
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8
https://detail.tmall.com/item.ht ... 15c0&abbucket=8

举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-12-17 10:14

沙发
Fuller 管理员 发表于 2016-12-17 10:14:13 | 只看该作者
我测试了4个网址,前三个都很好,也没有出现提示“爬虫参数还有优化空间”,第四个失败了,但是激活失败以后再次抓取,又成功了,根据我的观察,第一次是没有把评论显示出来。遇到这种网络不稳定的情况,可以重新激活线索再抓取一遍。

我是这样设置爬虫参数的
1)选择DS打数机菜单  配置-〉滚屏参数,滚屏次数设置成1,尽量少滚屏
2)勾选 配置-〉定时器触发,可以尽量减少提示“爬虫参数还有优化空间”
3)勾选 配置-〉全屏显示,一定要把窗口放到最大。
然后运行 单搜 或者 集搜

如果使用爬虫群,这些参数要在规则管理那里设置调度参数。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-5-8 12:39