快捷导航
Fuller 管理员 发表于 2020-4-12 12:07:08 | 显示全部楼层
baffleyyo 发表于 2020-4-12 11:50
请问京东采集一个几千条评论的商品采集不全怎么办?比如我想要这个商品的全部评论共6000条,但软件采集到10 ...

网站限制了翻页数量,只能翻100页,采集不全的。如果想要全的评论内容,需要从现在开始定期采集最新发生的评论,不要等超过100页,超过了就采集不到了
举报 使用道具
lucychen 新手上路 发表于 2020-4-25 20:09:50 | 显示全部楼层
你好,请问如何国内外邮件抓取?比如在google里输入产品关键词,比如fabric,搜索出来的公司,点开公司网站,再点击contact,再找到email, 以此方式收集网站的邮箱。这样的流程是否能完成。
举报 使用道具
Fuller 管理员 发表于 2020-4-25 22:55:21 | 显示全部楼层
lucychen 发表于 2020-4-25 20:09
你好,请问如何国内外邮件抓取?比如在google里输入产品关键词,比如fabric,搜索出来的公司,点开公司网站 ...

集搜客软件不是做邮件抓取的
举报 使用道具
lucychen 新手上路 发表于 2020-4-26 09:23:05 | 显示全部楼层
Fuller 发表于 2020-4-25 22:55
集搜客软件不是做邮件抓取的

谢谢回复
举报 使用道具
leelihezai 新手上路 发表于 2020-5-22 03:45:13 | 显示全部楼层
快捷采集微博评论和回复,为什么只能采集第一天的留言(发帖当天),之后的都没采集到喃?
举报 使用道具
Fuller 管理员 发表于 2020-5-22 07:25:22 | 显示全部楼层
leelihezai 发表于 2020-5-22 03:45
快捷采集微博评论和回复,为什么只能采集第一天的留言(发帖当天),之后的都没采集到喃? ...

在集搜客浏览器中登录了微博没有?
举报 使用道具
leelihezai 新手上路 发表于 2020-5-23 05:22:44 | 显示全部楼层
Fuller 发表于 2020-5-22 07:25
在集搜客浏览器中登录了微博没有?

登录了的。发现只采集到了头两天留言,后面都没有了
举报 使用道具
Fuller 管理员 发表于 2020-5-23 09:20:55 | 显示全部楼层
leelihezai 发表于 2020-5-23 05:22
登录了的。发现只采集到了头两天留言,后面都没有了

可以把网址发出来我试一下,微博网站有时候快有时候慢,而且不同微博的速度也不一样,最近微博又是比较忙的时候
举报 使用道具
leelihezai 新手上路 发表于 2020-5-23 17:06:59 | 显示全部楼层
Fuller 发表于 2020-5-23 09:20
可以把网址发出来我试一下,微博网站有时候快有时候慢,而且不同微博的速度也不一样,最近微博又是比较忙 ...

https://www.weibo.com/1974576991/IyQ219h7J?type=comment#_rnd1590224730843
麻烦帮忙看一下,我采集的是评论和回复,没转发

举报 使用道具
Fuller 管理员 发表于 2020-5-23 18:54:39 | 显示全部楼层
leelihezai 发表于 2020-5-23 17:06
https://www.weibo.com/1974576991/IyQ219h7J?type=comment#_rnd1590224730843
麻烦帮忙看一下,我采集的 ...

你用的是这个微博采集工具吗? https://www.gooseeker.com/res/softdetail_6.html

我这里采集的挺好。运行爬虫的时候,一定要把DS打数机窗口放大到最大
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 网络爬虫软件翻页采集列表数据
  • 定义爬虫规则采集网页数据
  • 网络爬虫采集列表数据
  • 集搜客网络爬虫的核心名词
  • 网络爬虫软件(增强版)的界面布局介绍

热门用户

GMT+8, 2020-11-27 13:51