一般用于AJAX网页内容的提取。AJAX网页的DOM持续变化,误导DS打数机以为网页内容没有加载完成,以至于一直等待到超时抓取失败,勾了定时器触发,相当于设置一个定时器,到达超时时间就立刻执行抓取,但是网页较大的情况,加载网页耗时较长,如果超时时长过短,就会造成网页还没加载完就执行采集,这样就会抓漏数据,所以,要根据实际情况使用。

举报 使用道具
| 回复

共 0 个关于本帖的回复 最后回复于 2017-1-13 15:40

您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-7-1 14:13