点击下一页会出现筛选条件太多未找到相关宝贝的内容,无法爬取,需要重新加载才能显示,请问如何处理?

举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2020-11-10 09:27

沙发
玲玲lllll 金牌会员 发表于 2020-11-9 15:51:03 | 只看该作者
如图

微信截图_20201109154905.png (31.49 KB, 下载次数: 577)

微信截图_20201109154905.png
举报 使用道具
板凳
Fuller 管理员 发表于 2020-11-9 16:07:15 | 只看该作者

回帖奖励 +1

关键词只有 江南布衣 ? 我估计是遇到反爬了。翻页多少次出现的?
举报 使用道具
地板
玲玲lllll 金牌会员 发表于 2020-11-10 09:11:04 | 只看该作者
Fuller 发表于 2020-11-9 16:07
关键词只有 江南布衣 ? 我估计是遇到反爬了。翻页多少次出现的?

几页的都有,一般4页之后经常出现,有什么方式避免吗?
举报 使用道具
5#
Fuller 管理员 发表于 2020-11-10 09:27:22 | 只看该作者
玲玲lllll 发表于 2020-11-10 09:11
几页的都有,一般4页之后经常出现,有什么方式避免吗?

现在淘宝和天猫封锁爬虫太厉害了,很难采集数据,可能双十一的时候封锁更厉害
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-27 05:46