任务名:Brain1.1
问题1:设置的相对线索翻页为什么不能翻到最后一页?
问题2:按照一页一个xml文件,爬下来的内容和网页对不上

举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2020-5-3 07:53

沙发
maomao 论坛元老 发表于 2020-4-30 22:58:11 | 只看该作者
本帖最后由 maomao 于 2020-4-30 23:03 编辑

加载你的规则看了,现在已经跑到53页,跑的很好,没有问题。这个网页加载有些慢。把打数机的延迟抓取时间和滚屏次数设置一下。
延迟抓取时间:10s
滚屏次数:2
滚屏速度2 



举报 使用道具
板凳
1996zrq 初级会员 发表于 2020-5-1 01:17:17 | 只看该作者
应该设置成多少呀
举报 使用道具
地板
Fuller 管理员 发表于 2020-5-1 08:30:29 | 只看该作者
1996zrq 发表于 2020-5-1 01:17
应该设置成多少呀

按照上一楼说的设置参数
举报 使用道具
5#
1996zrq 初级会员 发表于 2020-5-1 10:46:41 | 只看该作者
我之前一直都是你说的那个参数,但是就是一直中断
举报 使用道具
6#
Fuller 管理员 发表于 2020-5-1 12:13:05 | 只看该作者
1996zrq 发表于 2020-5-1 10:46
我之前一直都是你说的那个参数,但是就是一直中断

你说的中断是什么样子?DS打数机最下面的日志窗口,显示了什么内容? 如果重复翻页采集,说是重复内容中断,那么选择DS打数机的菜单 高级-》中断标志-〉重复内容,不要勾
举报 使用道具
7#
1996zrq 初级会员 发表于 2020-5-2 19:27:51 | 只看该作者
Fuller 发表于 2020-5-1 12:13
你说的中断是什么样子?DS打数机最下面的日志窗口,显示了什么内容? 如果重复翻页采集,说是重复内容中 ...

日志窗口什么都没有
举报 使用道具
8#
Fuller 管理员 发表于 2020-5-3 07:53:01 | 只看该作者
根据你的截图来看,买家的头像都没有显示出来。要么网络速度太慢,要么你修改了集搜客浏览器的参数。在DS打数机菜单上,选择 配置-》配置浏览器-》加载插件,加载图片,加载JS都要勾上
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-25 13:03