我做了两个主题,怎样让他们运行起来?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-10-22 10:10

沙发
Fuller 管理员 发表于 2016-10-22 10:10:04 | 只看该作者
根据你的描述,我估计你做了一个层级抓取,两个层级可以同时运行抓取(用“集搜”),或者手工运行第一个后运行第二个(用“单搜”),具体参看:http://www.gooseeker.com/doc/article-343-1.html

数据数据量特别大,可以用爬虫群模式,在会员中心设置好调度参数,在DS上运行两个爬虫群窗口,他们就会同事进行抓取。具体参看:http://www.gooseeker.com/doc/article-197-1.html
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-11-7 03:50