网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	12579 【已解决，结贴】某网站爬取碰到（翻页或双爬虫线路问题），求指导 2 maxno100 于 2016-8-31 发表最后回复 2016-8-31 18:27
	14728 附件的个数不同怎么办 3 有正事的小青年于 2016-8-31 发表最后回复 2016-8-31 18:26
	12866 同一个主题名，想再建立一个规则，采集不同结构网页，结果提示我找不到页面结构 4 有正事的小青年于 2016-8-31 发表最后回复 2016-8-31 17:59
	12782 新增评论 1 2445406817 于 2016-8-31 发表最后回复 2016-8-31 15:12
	11371 求助：怎么同时抓取多列数据 3 mumian 于 2016-8-31 发表最后回复 2016-8-31 12:09
	11069 同一级节点内能作样例复制吗 4 guxinyue 于 2016-8-31 发表最后回复 2016-8-31 11:00
	15592 怎么抓取类似爱奇艺这种视频网站的信息？ 2 AnswerDSL 于 2016-8-30 发表最后回复 2016-8-30 18:43
	26627 翻頁中斷、爬蟲路線、連續點擊、同時有頁數(1,2,3,...)和下一頁(Next)兩種形式, 並且Next是以image方式呈現 5 ShelleyWu 于 2016-8-30 发表最后回复 2016-8-30 17:33
	8164 想要采集聚美优品网站上商品的信息，但是需要连续的滚动才能加载出内容，怎么采集？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 17:25
	9001 需要登录才能采集怎么解决？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 16:57
	13610 翻页，只能翻一页的问题 2 famelove 于 2016-8-30 发表最后回复 2016-8-30 16:31
	10704 在抓取雪球网页内容时，有个更多选项，点开才能看见完整的内容，请问应该怎么做？ 1 gooseeker_info 于 2016-8-30 发表最后回复 2016-8-30 16:15
	7921 想要采集网页信息，只有一个网页，需要不断下拉滚动条才能使信息加载出来，要如何设置信息采集？ 1 AnswerDSL 于 2016-8-30 发表最后回复 2016-8-30 11:14
	12011 请问在层级抓取中对层级页面做连续动作是做几个规则？ 2 何波波于 2016-8-30 发表最后回复 2016-8-30 10:56
	8226 淘宝网的商品评论怎么抓取，有没有什么比较稳定的方法？ 1 何波波于 2016-8-29 发表最后回复 2016-8-29 18:02
	9606 这个需要点击来切换图片的网站怎么采集？ 2 AnswerDSL 于 2016-8-29 发表最后回复 2016-8-29 16:09
	12726 MS数据规则保存后的文件如何调用呢？ 3 jyy1082 于 2016-8-29 发表最后回复 2016-8-29 10:49
	11505 是不是要写xpath啊，怎么分析呢？ 2 小绿毛毛于 2016-8-27 发表最后回复 2016-8-27 17:59
	15504 反馈两个问题～ 4 knight100 于 2016-8-26 发表最后回复 2016-8-26 17:42
	9982 在什么情况要用到自定义xpath? 2 何波波于 2016-8-26 发表最后回复 2016-8-26 16:58