网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	8164 主题名“社会组织备案”，翻页不成功，只能采集第一页数据 6 ahhlive 于 2017-10-9 发表最后回复 2017-10-10 11:24
	7818 使用微博工具，新建任务添加线索后点击启动采集，为何运行在打数机的采集任务不是我添加的任务？ 1 umsung 于 2017-10-10 发表最后回复 2017-10-10 11:12
	6823 采集的网站需要登录后才能看到数据 1 w228258549 于 2017-10-10 发表最后回复 2017-10-10 11:04
	7541 有偿服务，跪求大神 3 辰光熹微于 2017-10-10 发表最后回复 2017-10-10 09:14
	11725 "先在整理箱中选中容器节点，再做样例复制映射"的容器节点在哪里找 3 白天大笑于 2017-10-9 发表最后回复 2017-10-9 20:57
	9584 为什么我的规则换个网址就不能用了........ 1 杨帆fancy 于 2017-10-8 发表最后回复 2017-10-9 08:47
	7033 微博工具箱数据整理 0 chengyiling 于 2017-10-9 发表最后回复 2017-10-9 00:01
	10099 手机论坛类APP上的信息抓取怎么办呢？ 1 simonylan 于 2017-10-8 发表最后回复 2017-10-8 15:39
	8712 这种网页怎么采集有偿 2 寒冬数码于 2017-10-7 发表最后回复 2017-10-7 17:43
	14061 添加”定位映射“后规则改变 8 chengyiling 于 2017-10-6 发表最后回复 2017-10-7 11:38
	8755 为什么我点样例启用时，提示“先选择容器节点，再做样例复制”？ 3 bowieD 于 2017-8-10 发表最后回复 2017-10-5 17:33
	7435 付费请采集--采集1688网站某一店铺的标题，主图，详情页 2 williamhilldawn 于 2017-9-9 发表最后回复 2017-10-5 14:28
	9294 请问可以把自己做的规则下载保存到本地吗，因为想要到另外一台电脑也能操作 3 whusim 于 2017-10-3 发表最后回复 2017-10-3 17:30
	12126 在DS打数机里面单搜，然后又调度了爬虫群，然后调度的两个爬虫群都不动，只有单搜的界面在爬，这是怎么回事，而且爬虫速度好慢 4 whusim 于 2017-10-2 发表最后回复 2017-10-3 10:32
	10354 为什么自定义xpath，可以通过这个xpath找到要抓取的东西，但是填到这里的时反而测试出不来结果了 4 whusim 于 2017-10-1 发表最后回复 2017-10-3 10:09
	10149 爬虫群在自动调度我不需要爬的规则，这是怎么回事，规则名 b高血压医生列表_个人_咨询 5 whusim 于 2017-10-1 发表最后回复 2017-10-3 10:05
	8881 层级抓取相关——为什么我的一个规则成了3个规则的上级？ 1 simonylan 于 2017-10-2 发表最后回复 2017-10-2 22:01
	11329 科室、职称和累计帮助患者、近两周帮助患者都无class值，网页位置都固定不变，用过绝对定位不行，像这种无class值，自定义xpath该怎么写，写不出来呀，现在就是这四个值老是丢失 6 whusim 于 2017-10-2 发表最后回复 2017-10-2 21:58
	14228 层级抓取，需第一级模拟点击，再到二级抓数据，这种情况需要把“全程模拟点击”和“高仿模拟点击”改为是吗 7 whusim 于 2017-10-1 发表最后回复 2017-10-1 21:29
	9317 样例复制相关——从第二个开始做的样例，怎么抓取第一个样例啊？ 1 simonylan 于 2017-10-1 发表最后回复 2017-10-1 21:24