网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	7689 对于嵌套的样例复制，在进行数据数据抓取时，遇到只有一个样例信息的页面会报错。这时候该怎么做啊，从而对于页面无论单个样例还是多个样例都可以正常抓取？ 1 bowieD 于 2017-8-30 发表最后回复 2017-8-30 11:29
	6933 一个主题2个规则，抓取了两个网页的内容，我输出了两个XML，我能否实现这两个网页的内容能再一个XML里体现？ 1 w228258549 于 2017-8-30 发表最后回复 2017-8-30 10:14
	7449 求助帖！！！在线等，连续抓到5页就中断 2 CherryVx 于 2017-8-29 发表最后回复 2017-8-29 18:46
	7990 规则正确只能爬下2条数据 6 Shuquan 于 2017-8-29 发表最后回复 2017-8-29 17:05
	7805 出现提示要设置关键内容在哪里设置？ 1 追逐阳光的单车于 2017-8-29 发表最后回复 2017-8-29 15:46
	7062 采集后的数据在什么地方啊？ 1 a798234780 于 2017-8-29 发表最后回复 2017-8-29 15:27
	7835 我想问下，现在我们制定的规则，可以让爬虫每小时自动抓取一次数据吗？ 1 a798234780 于 2017-8-29 发表最后回复 2017-8-29 15:19
	6820 需要采集内容的网页和需要输入验证码的网页不同怎么办？ 1 w228258549 于 2017-8-29 发表最后回复 2017-8-29 15:10
	8599 多个div结构如何做 3 Shuquan 于 2017-8-29 发表最后回复 2017-8-29 15:09
	8681 测试的时候都能取到可以启动抓取全是匹配失败。怎么回事啊？？ 2 umsung 于 2017-8-29 发表最后回复 2017-8-29 09:27
	10872 采集这种标注了答案的，我能只把正确答案采集下来吗？ 2 曾经也是小何于 2017-8-28 发表最后回复 2017-8-28 18:52
	7551 如何将一个规则中的线索清除掉？ 1 redskywh 于 2017-8-28 发表最后回复 2017-8-28 16:14
	10327 火狐浏览器点击翻页无效 5 ovna123 于 2017-8-28 发表最后回复 2017-8-28 16:06
	7008 我怎么点开这个更多介绍，然后抓取里面的内容？ 2 曾经也是小何于 2017-8-28 发表最后回复 2017-8-28 15:22
	7589 怎么修改我已经保存的规则？ 2 王秋菊的春天于 2017-8-28 发表最后回复 2017-8-28 15:01
	7154 抓取内容生成的xml我可以自定义里面的结构？ 2 追逐阳光的单车于 2017-8-28 发表最后回复 2017-8-28 14:42
	8655 网页上的文件怎么用爬虫下载下来？ 2 追逐阳光的单车于 2017-8-28 发表最后回复 2017-8-28 14:38
	8129 怎么指定从某一页开始翻页采集，然后到某一页终止？ 1 umsung 于 2017-8-28 发表最后回复 2017-8-28 14:28
	7008 匹配失败，在日志中找线索编号，这个日志在哪里？ 1 a798234780 于 2017-8-28 发表最后回复 2017-8-28 12:01
	11357 抓取多页网页数据，如何避免最后重复抓取？？ 1 baizhu123 于 2017-8-27 发表最后回复 2017-8-27 20:24