快捷导航
2 5457

当当数据采集攻略

shenzhenwan10 于 2016-12-29 16:23 发表 [复制链接]
当当页面的组合采集攻略如下(绿框是页面名称,橙色字体是采集结果表中的网址字段):

1、从“当当图书分类列表”展开采集更多页面信息
方法:
  • 从“当当图书分类列表”的数据表中,把“图书详情链接”这列的内容拷贝出来,然后点击“当当商品评论”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。

2、从“当当图书最新上架列表”展开采集更多页面信息
方法:
从“当当图书最新上架列表”的数据表中,把“图书详情链接”这列的内容拷贝出来,然后点击“当当商品评论”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。

3、从“当当图书畅销榜”展开采集更多页面信息
方法:
从“当当图书畅销榜”的数据表中,把“图书详情链接”这列的内容拷贝出来,然后点击“当当商品评论”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。

【附注】
数据DIY上可以找到很多网站下不同页面的采集入口,只要与样例网址是相同级别的网页,就可以用该页面的采集入口采集数据。因此,如果从数据DIY某个页面采集到网址,那么就可以找到该网址对应页面的采集入口,把批量网址添加进去,这也是数据DIY的出发点,让用户可以组合任意页面进行批量采集。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2022-11-7 19:12

Qiheye 新手上路 发表于 2022-11-7 16:36:11 | 显示全部楼层
采集当当商品评价显示无法翻页,只能采集11条评价
举报 使用道具
gz51837844 管理员 发表于 2022-11-7 19:12:36 | 显示全部楼层
Qiheye 发表于 2022-11-7 16:36
采集当当商品评价显示无法翻页,只能采集11条评价

你采集的是哪个网址,发出来我们测试下
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 对共词关系求协方差矩阵后再用Girvan-Newma
  • 社区发现算法Girvan-Newman(GN)是否能应用
  • 使用GooSeeker分词和Gephi进行中文文本分析
  • Gephi社会网络分析-网络图的统计
  • 范文:亚运短视频对杭州城市形象的建构研究

热门用户

GMT+8, 2023-2-8 14:25