11#
yangwenge 金牌会员 发表于 2018-4-23 15:39:49 | 只看该作者
bsh331400 发表于 2018-4-23 14:47
谢谢你哈,我又发现一个问题:有的商品点击最后一个规格是跳到首页,这样的链接我可以采取什么办法不采集 ...

可以做一个采集首页的规则适应,主题名与现在的主题名相同,规则编号不一样。
参考《怎么采集同一网站不同页面结构信息》
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-7-22 01:52