快捷导航
5 2770

数据抓取失败

Kellyj103 于 2018-5-21 21:07 发表 [复制链接]
主题名是:baiduly_1,但是页面拉倒最底下不会返回爬数据了,就直接显示采集完成,其实并没有,这是怎么回事呢?求大佬解救
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2018-5-22 14:12

shenzhenwan10 金牌会员 发表于 2018-5-22 08:02:53 | 显示全部楼层
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2
举报 使用道具
Kellyj103 初级会员 发表于 2018-5-22 12:04:18 | 显示全部楼层
shenzhenwan10 发表于 2018-5-22 08:02
我测试了你的规则, 抓取和翻页都没有问题
你可以把DS打数机的菜单项参数: 滚屏次数 设置成2 ...

设置了还是不行
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:10:04 | 显示全部楼层
你需要自己检查和测试:
1. 你说的不行,是爬取做规则的那条样本网址就不行,还是样本网址可以,添加的其它网址不行?如果是添加的不行,请检查网址有没有误
2. DS打数机爬取数据有几种方式:爬虫群,单搜,集搜。你目前用哪种方式?可以试试其它方式
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:02 | 显示全部楼层

另外爬取的时候,你观察一下DS打数机的窗口有没有加载出来你要爬取的网页,如果没有,请检查网址是否正确及网络是否正常
举报 使用道具
shenzhenwan10 金牌会员 发表于 2018-5-22 14:12:58 | 显示全部楼层

可以点开DS打数机下面的日志窗口,看看有没有什么错误信息
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 实验Jupyter Notebook的code cell的输出结
  • 用Jupyter notebook写文档的常用格式
  • 用Jupyter Notebook的模板管理数据分析过程
  • Jupyter Notebook在机器学习领域的项目目录
  • 统计学中的二项分布、负二项分布、几何分布

热门用户

GMT+8, 2021-3-1 23:54