“加载更多”如何设置抓取页面范围？

wendyqiqi

“加载更多”如何设置抓取页面范围？

wendyqiqi · 发表于 2017-4-8 16:53:29

上游新闻

wendyqiqi · 发表于 2017-4-8 17:47:35

Fuller 发表于 2017-4-8 16:48
那个网页？把你的主题名帖出来，我帮你诊断一下

上游新闻

Fuller · 发表于 2017-4-8 16:48:06

那个网页？把你的主题名帖出来，我帮你诊断一下

shenzhenwan10 · 发表于 2017-4-8 17:04:42

你就把这个“加载更多”看成是一个翻页按钮，按普通的翻页来做就可以了
不同的是，普通翻页每次只采当前页的，这个“加载更多”页面每次都是采集页面上所有的
可以以最后最大的那个结果文件为准
如果把所有结果文件入库，需要去重

共 4 个关于本帖的回复最后回复于 2017-4-8 17:47

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页