网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	26157 翻頁中斷、爬蟲路線、連續點擊、同時有頁數(1,2,3,...)和下一頁(Next)兩種形式, 並且Next是以image方式呈現 5 ShelleyWu 于 2016-8-30 发表最后回复 2016-8-30 17:33
	8047 想要采集聚美优品网站上商品的信息，但是需要连续的滚动才能加载出内容，怎么采集？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 17:25
	8784 需要登录才能采集怎么解决？ 1 何波波于 2016-8-30 发表最后回复 2016-8-30 16:57
	13077 翻页，只能翻一页的问题 2 famelove 于 2016-8-30 发表最后回复 2016-8-30 16:31
	10363 在抓取雪球网页内容时，有个更多选项，点开才能看见完整的内容，请问应该怎么做？ 1 gooseeker_info 于 2016-8-30 发表最后回复 2016-8-30 16:15
	7789 想要采集网页信息，只有一个网页，需要不断下拉滚动条才能使信息加载出来，要如何设置信息采集？ 1 AnswerDSL 于 2016-8-30 发表最后回复 2016-8-30 11:14
	11828 请问在层级抓取中对层级页面做连续动作是做几个规则？ 2 何波波于 2016-8-30 发表最后回复 2016-8-30 10:56
	8116 淘宝网的商品评论怎么抓取，有没有什么比较稳定的方法？ 1 何波波于 2016-8-29 发表最后回复 2016-8-29 18:02
	9387 这个需要点击来切换图片的网站怎么采集？ 2 AnswerDSL 于 2016-8-29 发表最后回复 2016-8-29 16:09
	12507 MS数据规则保存后的文件如何调用呢？ 3 jyy1082 于 2016-8-29 发表最后回复 2016-8-29 10:49
	11257 是不是要写xpath啊，怎么分析呢？ 2 小绿毛毛于 2016-8-27 发表最后回复 2016-8-27 17:59
	14337 反馈两个问题～ 4 knight100 于 2016-8-26 发表最后回复 2016-8-26 17:42
	9798 在什么情况要用到自定义xpath? 2 何波波于 2016-8-26 发表最后回复 2016-8-26 16:58
	22722 很多网址并且需要每天更新怎么采集 10 scraper 于 2016-8-26 发表最后回复 2016-8-26 16:53
	8196 怎么快速对比测试结果和页面的数据是否一致 0 AnswerDSL 于 2016-8-26 发表最后回复 2016-8-26 16:53
	8077 网站页面信息不完整，无法定义内容映射，怎么解决？ 1 何波波于 2016-8-26 发表最后回复 2016-8-26 16:24
	58302 网站数据与抓取到的数据不符合是怎么回事？ 20 877994752 于 2016-8-24 发表最后回复 2016-8-26 16:07
	9591 在会员中心导入数据时，找不到压缩包？ 1 何波波于 2016-8-26 发表最后回复 2016-8-26 15:07
	9104 做了定位标志，再次加载规则定位标志一栏怎么显示空的了？ 6 lyh123 于 2016-8-26 发表最后回复 2016-8-26 12:50
	7957 集搜客能抓取APP的内容吗？ 0 AnswerDSL 于 2016-8-26 发表最后回复 2016-8-26 11:14