快捷导航
规则名:豆瓣_影视剧信息
规则在测试时以及单独抓取一条是没有问题


但在使用爬虫群抓取时,出现了三分之二以上的数据抓取失败

求解 谢谢~
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2020-10-26 18:00

wangyong 版主 发表于 2020-10-26 17:54:17 | 显示全部楼层
和你发的虎扑的帖子是同样的原因,得做上定位标志映射:https://www.gooseeker.com/doc/article-344-1.html
举报 使用道具
Beausu 中级会员 发表于 2020-10-26 17:58:01 | 显示全部楼层
好的 感谢您~
举报 使用道具
Thematic 中级会员 发表于 2020-10-26 18:00:48 | 显示全部楼层
和爬虫群没有关系,在爬取不同网页时,规则的适应性不够。1. 尽量给抓取内容做上定制标志映射,提高规则适应性。
2. 网页上抓取的内容比较多,有些内容可能不是每个网页都有,在工作台对这些内容取消勾选关键内容。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 定位映射提高网页采集精度——以B站视频采
  • 如何管理网络爬虫的线索
  • 网络爬虫生成的XML格式结果文件
  • 打包下载excel格式的数据
  • 爬网址做层级采集——以京东商品爬虫为例

热门用户

GMT+8, 2020-12-2 09:01