我采集南京行政许可信息中断，如何继续采集

jiayuqin

我要采集http://app.nanjing.gov.cn/cxnj/xkcf/xkcf_bm_gq.jsp?n=GONGSHANG这样的网站信息，页数很多，但是我采集到1000页左右中断，我看下每页的网址都是一样的，请我我如何才能从1000页往后去采集

Fuller · 发表于 2017-6-9 09:12:04

定义连续动作规则，需要两个动作，一个是输入页码，一个是点击确定。这两个动作放在新做的规则中，它的目标主题指向你现在采集数据的主题。定义连续动作的方法，可以参看教程《自动搜索关键词采集信息》

jiangsuxincheng · 发表于 2017-6-9 10:18:53

为何我做连续动作规则做好后然后回到网页翻到1134页然后做规则，测试的内容是1134页的内容，可是翻页爬取又从第一页开始爬取这是什么原因了

jiangsuxincheng · 发表于 2017-6-9 10:21:53

我明白了要我在打数机平台手动输入页码后才能指定往后爬取

Fuller · 发表于 2017-6-9 10:52:56

jiangsuxincheng 发表于 2017-6-9 10:18
为何我做连续动作规则做好后然后回到网页翻到1134页然后做规则，测试的内容是1134页的内容，可是翻页爬取又 ...

如果规则是这样的
第一级：连续动作输入1000，并且点击提交，目标主题名指向第二级
第二级：采集数据，不管你用哪一页做样本页面，都不影响

这样就能自动跳到1000页

Fuller · 发表于 2017-6-9 10:53:10

jiangsuxincheng 发表于 2017-6-9 10:21
我明白了要我在打数机平台手动输入页码后才能指定往后爬取

在DS打数机上手工输入也可以

共 5 个关于本帖的回复最后回复于 2017-6-9 10:53

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页