网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	8563 这个xpath div改成h4就可以定位到，用div就定位不到 1 丁道师于 2019-11-6 发表最后回复 2019-11-6 12:07
	7985 采集这个网页，用相对翻页和@class翻页都只是翻了一页？http://opac.nju.edu.cn/#/readRange 1 coentene 于 2019-11-6 发表最后回复 2019-11-6 09:25
	8711 京东商品评论抓取，，感觉抓取速度比较慢？ 1 月球漫步于 2019-11-5 发表最后回复 2019-11-5 18:55
	8500 智联招聘的采集，怎么采不到邮箱，怎么设置？ 1 拯救地球于 2019-11-5 发表最后回复 2019-11-5 18:40
	10488 关于模拟点击失败和爬虫群限制翻页失败 4 soo_soo067 于 2019-11-5 发表最后回复 2019-11-5 15:32
	10866 使用连续动作出现大量数据重复 2 viperliu 于 2019-11-5 发表最后回复 2019-11-5 15:18
	11234 第二层规则为何只采集到了一个信息 1 chi111111 于 2019-11-5 发表最后回复 2019-11-5 15:05
	7740 两个网址列表页的结构一样，用和规则网址结构一样的，另一个网页加载规则，存规则后，两个网址的数据都采集到了？？ 1 肥胖君于 2019-11-5 发表最后回复 2019-11-5 12:09
	9754 如何将列表页抓取的时间，合并到详情页的表里？ 2 挺你海陆于 2019-11-5 发表最后回复 2019-11-5 10:25
	11255 设置的爬虫路线只对一级规则采集到的第一个链接有效，这是为什么 3 soo_soo067 于 2019-11-4 发表最后回复 2019-11-5 09:20
	7260 请教个问题。我再爬大众点评的数据时，点击翻页那行，定位到的节点和教程不同，请问是什么原因? 0 shenzhenuser1 于 2019-11-4 发表最后回复 2019-11-4 18:21
	7454 采集政府网站时没有“下一页”但是翻页位置有的title的值是“下页”,这种情况该样做映射 1 studdt 于 2019-11-4 发表最后回复 2019-11-4 16:44
	11366 请问，采集的页面做截屏该怎么做？ 3 make_you_happy 于 2019-11-4 发表最后回复 2019-11-4 15:32
	8024 有人知道跳转是javascript的怎样采集吗？ 1 studdt 于 2019-11-4 发表最后回复 2019-11-4 14:33
	10061 请问微博博主主页采集，可以采集到博文中的图片和视频吗 1 studdt 于 2019-11-4 发表最后回复 2019-11-4 09:16
	17375 请教常见的下拉选择采集问题 8 Thinking2019 于 2019-11-1 发表最后回复 2019-11-1 21:21
	9249 搜狗微信在那里登录？ 1 洪城县令于 2019-11-1 发表最后回复 2019-11-1 18:26
	11071 这种数据用什么方法抓取呢？ 2 小安河于 2019-11-1 发表最后回复 2019-11-1 16:24
	98246 为啥连接不上服务器？？？ 41 ym 于 2015-8-20 发表最后回复 2019-11-1 16:10
	90900 【新功能】可以和你的小伙伴共享采集规则啦~~ 4 xandy 于 2017-10-23 发表最后回复 2019-11-1 16:03