在集搜客爬虫软件里打不开这个网页https://www.dianping.com/node/un ... id=H3V4hXsCsIk60g9S

据说可以用集搜客数据管家打开这个网页,请问数据管家怎么做规则爬数据?

举报 使用道具
| 回复

共 4 个关于本帖的回复 最后回复于 2020-9-4 10:10

沙发
maomao 论坛元老 发表于 2020-9-3 18:50:07 | 只看该作者
注意:下面的介绍已经过时了集搜客数据管家V10版本已经正式发布了,不需要再下载集搜客爬虫软件了,因为数据管家有自己独立的定义规则能力,不需要爬虫软件的配合。

首先,下载安装集搜客数据管家集搜客爬虫软件

运行集搜客数据管家,在数据管家中打开要爬的网页,然后点击侧边栏的绿色“+”。




数据管家会自动启动爬虫软件,在爬虫软件里做好规则后,点击保存。(注意,只保存,不要在爬虫软件采集数据

        


然后再回到数据管家,点击右边栏的任务管理,点击“启动采集”
               


数据管家会弹出一个采集窗口,采集数据,采集完成后,选择导出Excel



自动跳到数据管理页面,点击打包数据,下载数据





举报 使用道具
板凳
马涌河畔 金牌会员 发表于 2020-9-3 18:51:56 | 只看该作者
举报 使用道具
地板
maomao 论坛元老 发表于 2020-9-4 08:54:59 | 只看该作者
目前,一般能在Gooseeker爬虫软件里打开的网页,尽量在爬虫软件里做采集规则。只有对那些在爬虫浏览器不能正常打开的网页,才会用数据管家去打开网页。在数据管家里,做采集规则的步骤是:
1.  数据管家打开网页——新建任务
2.  自动跳转到爬虫软件做采集规则,并保存
3.  再回到数据管家运行规则,采集数据,并导出数据。
举报 使用道具
5#
Fuller 管理员 发表于 2020-9-4 10:10:58 | 只看该作者
具有定义规则能力的数据管家很快就要发布了,到时候可以不用爬虫软件进行配合了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-19 15:50