集搜客GooSeeker网络爬虫

标题: 要抓取的内容在网页的上部。但是爬虫搜索整个网页，效率很低，DS提示爬虫参数还有优化空间 [打印本页]

作者: xinke 时间: 2016-11-29 21:57
标题: 要抓取的内容在网页的上部。但是爬虫搜索整个网页，效率很低，DS提示爬虫参数还有优化空间
要抓取的内容在网页的上部。但是爬虫搜索整个网页，效率很低，DS提示爬虫参数还有优化空间
主题名：五八实木家具4_城市列表_lj_lj
样式网址：http://bj.58.com/ershoujiaju/28209106422444x.shtml?psid=132300925194037023561732339&entinfo=28209106422444_0

只抓取一些手机号，但是爬虫爬了整个网页，效率很低。怎么优化？

作者: HJLing 时间: 2016-11-29 22:03
可以关掉滚屏在DS的配置-滚屏参数把滚屏次数设为0 这样就不会往下滚屏了

作者: xinke 时间: 2016-11-29 22:05
谢谢效率提高不少

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)