22 20791

京东数据采集攻略

shenzhenwan10 于 2016-12-29 15:40 发表 [复制链接]
本帖最后由 shenzhenwan10 于 2016-12-29 15:44 编辑

京东页面的组合采集攻略如下(绿框是页面名称,橙色字体是采集结果表中的网址字段):

1、从“京东-列表页采集”展开采集更多页面信息
方法:
  • 从“京东-列表页采集”的数据表中,把“商品详情网址”这列的内容拷贝出来,然后点击“京东商品评论采集”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品评论批量数据采集。其它页面类似。
  • 从“京东-列表页采集”的数据表中,把“商品详情网址”这列的内容拷贝出来,然后点击“京东-商品详情”的“输入多条网址”按钮,粘贴网址,就可以用后者实现商品详情信息批量采集。其它页面类似。

【附注】
数据DIY上可以找到很多网站下不同页面的采集入口,只要与样例网址是相同级别的网页,就可以用该页面的采集入口采集数据。因此,如果从数据DIY某个页面采集到网址,那么就可以找到该网址对应页面的采集入口,把批量网址添加进去,这也是数据DIY的出发点,让用户可以组合任意页面进行批量采集。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 22 个关于本帖的回复 最后回复于 2024-3-19 16:38

sally99999 新手上路 发表于 2022-7-11 07:19:34 | 显示全部楼层
垃圾,导数据慢就算了,还导不出来
举报 使用道具
gz51837844 管理员 发表于 2022-7-11 09:07:09 | 显示全部楼层
sally99999 发表于 2022-7-11 07:19
垃圾,导数据慢就算了,还导不出来

你是使用的哪个快捷采集? 你看看任务的采集状态是不是已完成。
可以把网址发出来,我们技术测试下
举报 使用道具
Becky_ 新手上路 发表于 2022-11-3 22:25:22 | 显示全部楼层
呜呜呜为什么都是捕获失败呀
举报 使用道具
Fuller 管理员 发表于 2022-11-4 00:10:58 | 显示全部楼层
Becky_ 发表于 2022-11-3 22:25
呜呜呜为什么都是捕获失败呀

你用的快捷采集工具是哪个?要采集的网址是什么?
举报 使用道具
wangyudan123 初级会员 发表于 2022-12-4 12:50:27 | 显示全部楼层
采集评论的时候怎么翻页?
举报 使用道具
Fuller 管理员 发表于 2022-12-4 17:26:47 | 显示全部楼层
wangyudan123 发表于 2022-12-4 12:50
采集评论的时候怎么翻页?

使用快捷采集工具的时候,加入要采集的网址,选择要翻页的页码数量,如果不选择,就只采集第一页
举报 使用道具
wangyudan123 初级会员 发表于 2022-12-9 09:09:12 | 显示全部楼层
Fuller 发表于 2022-12-4 17:26
使用快捷采集工具的时候,加入要采集的网址,选择要翻页的页码数量,如果不选择,就只采集第一页
...

我采集京东评论的时候  默认显示的是所有商品的评价 界面上可以选择只显示当前商品评价   我也只想采集当前商品的评价  快捷采集怎么实现啊
举报 使用道具
Fuller 管理员 发表于 2022-12-9 09:55:06 | 显示全部楼层
wangyudan123 发表于 2022-12-9 09:09
我采集京东评论的时候  默认显示的是所有商品的评价 界面上可以选择只显示当前商品评价   我也只想采集当 ...

每个快捷采集都有特定目的,我看了一下京东的,没有采集当前商品评论的快捷采集,需要开发人员做一个,我通知开发人员。
如果是自己定义规则的话,可以在普通的商品评论采集规则之前再做一级规则,用来点击那个当前商品选择框,这是高级教程中连续动作做的事情。动作做完了再进行普通的采集评论
举报 使用道具
gz51837844 管理员 发表于 2022-12-9 10:44:17 | 显示全部楼层
wangyudan123 发表于 2022-12-9 09:09
我采集京东评论的时候  默认显示的是所有商品的评价 界面上可以选择只显示当前商品评价   我也只想采集当 ...

如果只需要采集当前商品的评论,可以使用这个新上架的快捷采集:京东商品评论_只看当前商品
这个快捷采集会自动点击勾选“只看当前商品评价”
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 利用AI阅读和分析文本:扣子COZE记录用户反
  • 在网页片段内直观标注——以B站评论采集为
  • 利用AI阅读和分析文本:使用COZE建设游记文
  • 使用AI工具Kimi生成python代码为文本分析结
  • 苹果mac电脑安装集搜客网络爬虫软件失败的

热门用户

GMT+8, 2024-12-5 05:48