调动了三个爬虫群，但是只有一个DS打数机在运行，一个在等待分配，另一个没动静

whusim

bowieD · 发表于 2017-9-30 15:24:04

whusim · 发表于 2017-10-1 14:17:15

只用一台电脑，写的6个爬虫，也把一轮线索数调成100了，可是还是只有两个爬虫在工作

Fuller · 发表于 2017-10-1 15:57:55

whusim 发表于 2017-10-1 14:17
只用一台电脑，写的6个爬虫，也把一轮线索数调成100了，可是还是只有两个爬虫在工作 ...

在会员中心给这个规则设置调度参数的时候，设置了几个并行爬虫？

whusim · 发表于 2017-10-1 16:03:01

设了6个啊

Fuller · 发表于 2017-10-1 16:25:04

whusim 发表于 2017-10-1 16:03
设了6个啊

在一台电脑上，运行了6个DS打数机爬虫群窗口，只有3个有任务。是这样的吗？规则名是什么？

whusim · 发表于 2017-10-1 16:43:09

点击启动爬虫群，自动启动两个，只有两个在爬，规则名是 b高血压医生列表_个人_咨询

Fuller · 发表于 2017-10-1 16:57:44

whusim 发表于 2017-10-1 16:43
点击启动爬虫群，自动启动两个，只有两个在爬，规则名是 b高血压医生列表_个人_咨询 ...

在GS浏览器的工具条上有个按钮“DS打数机”，点击打开DS打数机管理窗口，选择菜单爬虫群-》配置，可以增加很多爬虫窗口，让后把他们运行起来

whusim · 发表于 2017-10-1 17:10:23

本来就有6个啊

Fuller · 发表于 2017-10-1 17:41:59

whusim 发表于 2017-10-1 17:10
本来就有6个啊

把他们都运行起来，还是有空闲的？今天服务器调度挺空闲的，没有很严重的任务排队现象

共 9 个关于本帖的回复最后回复于 2017-10-1 17:41

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页