网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	9871 请问通过写xpath可以判断抓取的数值大于某一值时或者等于某一个值时再执行抓取吗？比如说只抓样例复制中判断数值大于5000的，再执行抓取，否则跳过。 2 huzhongshun11 于 2017-8-17 发表最后回复 2017-8-17 17:11
	8168 这软件能抓取链家网房源吗？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 17:09
	9630 详情页结构不一样是不是不能套用规则爬数据？ 3 rainbow7525 于 2017-8-17 发表最后回复 2017-8-17 17:03
	10730 显示没有线索了 3 a798234780 于 2017-8-17 发表最后回复 2017-8-17 16:45
	7981 数据无法导出？？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 16:34
	10870 抓取数据部分缺失 5 collar 于 2017-8-17 发表最后回复 2017-8-17 15:04
	7752 详细资料不是同一个页面怎么办？ 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 14:33
	7739 加载的页面已经发生变化，工作台操作没有意义? 1 ywg932435 于 2017-8-17 发表最后回复 2017-8-17 14:22
	7890 翻页抓取无效 1 collar 于 2017-8-16 发表最后回复 2017-8-16 22:05
	8070 对于定时爬取数据，比如每天一次，有没有方法对历史爬过的线索不再爬去，只爬取新增的线索？ 1 a798234780 于 2017-8-16 发表最后回复 2017-8-16 18:26
	8809 百度地图里我想搜索某点附近1000米内商家，标注不固定，我用采集列表和翻页的方式做不了，这种该怎么处理？ 1 oliver7629837 于 2017-8-16 发表最后回复 2017-8-16 18:04
	8209 调度的滚屏这样设置对吗？ 1 umsung 于 2017-8-16 发表最后回复 2017-8-16 17:25
	8651 对于定时爬取数据，比如每天一次，有没有方法对历史爬过的线索不再爬去，只爬取新增的线索？ 1 bowieD 于 2017-8-16 发表最后回复 2017-8-16 17:18
	9550 设置class偏好后，报错Cannot find theParent，这个要怎么处理呢 2 umsung 于 2017-8-16 发表最后回复 2017-8-16 17:16
	10409 怎么拆分嵌套整理箱 5 Shuquan 于 2017-8-16 发表最后回复 2017-8-16 17:12
	10232 翻页设置不成功，DS不滚动 2 collar 于 2017-8-16 发表最后回复 2017-8-16 16:16
	8877 翻页数据抓取不到 5 李小姐于 2017-8-16 发表最后回复 2017-8-16 15:31
	9070 求助抓取内容偏移和列表不统一，如何样式复例 3 wql963cs 于 2017-8-15 发表最后回复 2017-8-15 23:30
	7853 同一页面需要点选的标签信息采集 2 yoyo_zyxx 于 2017-8-15 发表最后回复 2017-8-15 22:53
	8967 我遇到一个嵌套结构的列表网页，这样网页需要怎么采集？无法用样例复制实现爬取。 1 umsung 于 2017-8-15 发表最后回复 2017-8-15 17:58