可以简单明了地说说具体实际操作吗?什么爬虫群、crontab 看了整天都实在看得云里雾里的,这么个简单常用功能至于弄得那么复杂吗?
说说我遇到的场景:我需要采集一个以分钟为单位刷新的彩票网站的数据,想统计一下里面的数据。
有个条件:网站不是自动刷新的,要手动键盘f5或者单击右键刷新的,所以不知道怎么弄。规则我已经弄好了,就差定期更新步骤的设定了,求看到的高人指点一下~谢谢~~
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2016-10-15 23:46

沙发
Fuller 管理员 发表于 2016-10-15 23:46:52 | 只看该作者
无法自动刷新的话,需要定时激活线索,这个文章的3.2节讲解怎样激活线索,http://www.gooseeker.com/doc/article-200-1.html。

要用爬虫群模式,在会员中心设置调度参数,但是开放的这个功能只允许每天激活一次,高频激活必须定制。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-11-7 03:47