爬虫群配置里的线程跟调度的规则之间有什么关系吗
请大神指点一下  谢谢!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2016-3-16 09:29

沙发
Fuller 管理员 发表于 2016-3-15 21:55:22 | 只看该作者
在DS上配置,那是在物理上启动实实在在的程序。启动以后,他们就等着了,等着调度中心给他发任务。

你在调度中心设置了调度参数后,就产生了任务,就能发给第一个来要任务的爬虫

线索抓完了注意要添加线索
举报 使用道具
板凳
Wadechosen 初级会员 发表于 2016-3-16 09:29:49 | 只看该作者
Fuller 发表于 2016-3-15 21:55
在DS上配置,那是在物理上启动实实在在的程序。启动以后,他们就等着了,等着调度中心给他发任务。

你在调 ...

谢谢!
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参
  • 为什么BERTopic话题缩减后特征词出现大量没

热门用户

GMT+8, 2026-6-18 23:08