采网址做层级采集——以大众点评为例

评论 Fuller 2017-1-16 20:47: 晴时有风阴有时雨: 抓取数据的步骤不是很明确，还是有点搞不懂，分别保存两个规则后该怎么运行，明明在第一个规则里面设置了翻页，抓取数据的时候还是显示的待抓取规则数为1，第二 ...
第一个规则负责采集网址，为第二级生成线索，同时也翻页；第二个规则是一页页采集。这两个规则分开执行。如果想让他们同时运行，设置爬虫群模式，在教程首页搜索“爬虫群”这个关键词，就能看到一些教程。http://www.gooseeker.com/tuto/tutorial.html

评论晴时有风阴有时雨 2017-1-16 11:13: 抓取数据的步骤不是很明确，还是有点搞不懂，分别保存两个规则后该怎么运行，明明在第一个规则里面设置了翻页，抓取数据的时候还是显示的待抓取规则数为1，第二级规则又怎么翻页呢？最后第二级规则爬取的数据只有一条.....有人解答一下吗？谢谢了~

12 / 2 页