1、创建规则,并测试通过


2、设置连续动作


3、打数机页面,设置好滚次数为0

虽然从打数机上,可以看到百度图片的网页在自动往下滚,但是检查下载路径发现,每次下载的内容都只包含首个页面的内容。

可以看到xls也没增加

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2017-12-19 15:09

沙发
bowieD 金牌会员 发表于 2017-12-19 15:08:39 | 只看该作者
把滚屏动作的总滚屏次数设置为-1,就会无限滚屏。如果每次下载的内容都只包含首个页面的内容,似乎是图片还没有加载出来就已经抓取了。要把打数机中超时时长和延迟抓取设置的尽量大一些,避免图片加载慢而导致下载不到。
举报 使用道具
板凳
Fuller 管理员 发表于 2017-12-19 15:09:50 | 只看该作者
做规则的时候,把屏幕往下滚,用测试按钮,看看能否采集到其它屏的内容,我估计是规则不合适,没有采集到其它内容
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-7-22 07:48