集搜客GooSeeker网络爬虫

标题: 当当数据采集攻略 [打印本页]

作者: shenzhenwan10    时间: 2016-12-29 16:23
标题: 当当数据采集攻略
当当页面的组合采集攻略如下(绿框是页面名称,橙色字体是采集结果表中的网址字段):

1、从“当当图书分类列表”展开采集更多页面信息
[attach]4202[/attach]
方法:

2、从“当当图书最新上架列表”展开采集更多页面信息
[attach]4205[/attach]
方法:
从“当当图书最新上架列表”的数据表中,把“图书详情链接”这列的内容拷贝出来,然后点击“当当商品评论”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。

3、从“当当图书畅销榜”展开采集更多页面信息
[attach]4206[/attach]
方法:
从“当当图书畅销榜”的数据表中,把“图书详情链接”这列的内容拷贝出来,然后点击“当当商品评论”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。

【附注】
数据DIY上可以找到很多网站下不同页面的采集入口,只要与样例网址是相同级别的网页,就可以用该页面的采集入口采集数据。因此,如果从数据DIY某个页面采集到网址,那么就可以找到该网址对应页面的采集入口,把批量网址添加进去,这也是数据DIY的出发点,让用户可以组合任意页面进行批量采集。
作者: Qiheye    时间: 2022-11-7 16:36
采集当当商品评价显示无法翻页,只能采集11条评价
作者: gz51837844    时间: 2022-11-7 19:12
Qiheye 发表于 2022-11-7 16:36
采集当当商品评价显示无法翻页,只能采集11条评价

你采集的是哪个网址,发出来我们测试下





欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2