为什么不能一直循环爬下去

Easec888

任务名：Easec-证券公司详细信息公司-第1级；Easec-证券公司详细信息公司-第2级-基本信息

maomao · 发表于 2020-11-4 14:55:26

没有这个名字的规则，是不是把名字弄错了？

maomao · 发表于 2020-11-4 15:51:40

本帖最后由 maomao 于 2020-11-4 18:11 编辑

因为你要重复回到第一个规则，在同一个页面抓取数据，所以爬虫可能会判定为重复页面。重复3次，爬虫就中断跳出了。所以在打数机，把高级-终点标志-重复内容取消掉。

共 2 个关于本帖的回复最后回复于 2020-11-4 15:51

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页