集搜客GooSeeker网络爬虫

标题: 旗舰版用户，怎么同时登陆5台电脑采集微博？ [打印本页]

作者: 离离原上草 时间: 2019-5-30 17:20
标题: 旗舰版用户，怎么同时登陆5台电脑采集微博？
本帖最后由离离原上草于 2019-5-30 17:51 编辑

我是旗舰版用户，可以同时开5台电脑采集微博，现在已经在1台电脑上开始采集了，怎样把其余4台电脑跑起来爬数据？

作者: maomao 时间: 2019-5-30 17:46
如果在用老版的爬虫，这样运行5台电脑：

一、首先在其余四台电脑下载安装集搜客爬虫软件。用同一个集搜客账号登录爬虫，并登录会员中心。然后在集搜客浏览器打开https://www.weibo.com，并且登录一个微博账号。[attach]11037[/attach]

二、打开DS打数机
[attach]11038[/attach]

三、运行爬虫群
[attach]11039[/attach]

[attach]11040[/attach]

作者: Fuller 时间: 2019-5-30 22:10
要注意一下，每台电脑应该用不同的微博账号，爬数据太快小心被封号。在同一台电脑上，最多开两个爬虫群窗口，也是同样道理，太多窗口同时爬也有封号风险

作者: Fuller 时间: 2020-4-2 20:39
另外，还要注意一点，如果5台电脑是在同一个局域网中，爬虫调度的时候会区分不出来他们，就要给每台爬虫电脑起上不同的名字
用这个菜单设置爬虫名字

[attach]12212[/attach]

作者: maomao 时间: 2020-9-18 19:07
本帖最后由 maomao 于 2020-10-9 18:16 编辑

现在集搜客又推出了功能更强大的数据管家[attach]13008[/attach]，爬取数据。数据管家怎样开启其它4台电脑并行爬微博数据？

1. 在其它4台电脑下载安装数据管家，并登陆同一个集搜客账号。（会员中心和数据管家左下角的账号要一致。)
[attach]13087[/attach]

2. 在4台电脑的数据管家分别打开微博网站，登陆不同的微博账号。

3. 在4台电脑打开微博工具箱，点击启动采集，会自动弹出两个采集窗口（爬虫窗口），开始采集数据。

作者: Fuller 时间: 2020-9-18 23:23

maomao 发表于 2020-9-18 19:07
现在集搜客又推出了功能更强大的数据管家，爬取数据。在数据管家里，在这里设置爬虫群

用数据管家采集微博数据，使用微博采集工具箱中的所有工具，都不用专门配置爬虫群。在每个微博采集工具箱的界面上都有“启动采集”按钮，设置好采集任务以后，点击“启动采集”按钮，就会自动运行起来2个爬虫群窗口。

使用快捷采集工具也是类似的启动方法。

作者: laiyongling2017 时间: 2020-10-9 19:00
你好，在数据管家里那怎么能看到是三台电脑同时在采呢？

作者: Fuller 时间: 2020-10-9 23:37

laiyongling2017 发表于 2020-10-9 19:00
你好，在数据管家里那怎么能看到是三台电脑同时在采呢？

如果同时运行了数据管家和爬虫软件，各占一个配额

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)