快捷导航
本帖最后由 离离原上草 于 2019-5-30 17:51 编辑

我是旗舰版用户,可以同时开5台电脑采集微博,现在已经在1台电脑上开始采集了,怎样把其余4台电脑跑起来爬数据?
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2020-4-2 20:39

maomao 金牌会员 发表于 2019-5-30 17:46:27 | 显示全部楼层
一、首先在其余四台电脑下载安装集搜客爬虫软件。用同一个集搜客账号登录爬虫,并登录会员中心。然后在集搜客浏览器打开https://www.weibo.com,并且登录一个微博账号。 登录用户.png

二、打开DS打数机
打数机按钮.png

三、运行爬虫群
爬虫群配置.png

运行所有.png




举报 使用道具
Fuller 管理员 发表于 2019-5-30 22:10:00 | 显示全部楼层
要注意一下,每台电脑应该用不同的微博账号,爬数据太快小心被封号。在同一台电脑上,最多开两个爬虫群窗口,也是同样道理,太多窗口同时爬也有封号风险
举报 使用道具
Fuller 管理员 发表于 2020-4-2 20:39:27 | 显示全部楼层
另外,还要注意一点,如果5台电脑是在同一个局域网中,爬虫调度的时候会区分不出来他们,就要给每台爬虫电脑起上不同的名字
用这个菜单设置爬虫名字

爬虫名字20200402203854.png
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 如何使用集搜客分词平台做社会网络图分析?
  • 关于食品安全的美国联邦法规文件的网络爬虫
  • 怎样更有效率地搜索互联网和整理知识—使用
  • 阿里巴巴外包询价网站用集搜客网络爬虫能采
  • 在限定论域的时候,为什么“任何一个”表示

热门用户

GMT+8, 2020-6-2 10:02