爬取图片的问题

按教程定义好规则后，在谋数台测试了一下，图片网址都是可以显示的，我在映射网址时也选了“下载图片”，但最后打数机爬数据时，图片文件夹是空的，爬的xml文件中图片网址也没有显示，并不像测试的时候看到的那样，为什么？另外发现在谋数台对网址进行定位映射时，测试不显示网址，去掉定位就能在测试时显示网址了，这又是为什么？

做规则的时候页面已经加载好了, 相当于静态的
实际抓取的时候, 不同的参数决定了页面是否加载完全, 爬虫什么时候进行抓取

如果需要技术分析你的规则, 你需要提供你的主题名

下载图片一定要打开DS打数机的滚屏功能，滚屏次数适当设置大一些

gz51837844 发表于 2017-1-16 20:50
如果需要技术分析你的规则, 你需要提供你的主题名

我的主题名是 “途牛旅行图片”，谢谢

晴时有风阴有时雨 发表于 2017-1-16 21:02
我的主题名是 “途牛旅行图片”，谢谢

你的规则我看了, 需要修改一下:
1. 把首选定位改成"偏好class"
2. 把名称, 价格都加上定位标志
3. 实际抓取的时候, 把滚屏次数设置大一些, 比如30

晴时有风阴有时雨 发表于 2017-1-16 21:02
我的主题名是 “途牛旅行图片”，谢谢

规则看不出什么问题来，你设置的滚屏次数是多少？

Fuller 发表于 2017-1-16 21:10
规则看不出什么问题来，你设置的滚屏次数是多少？

原来默认的是2 2，后来我看到一篇教程，说最好的搭配是5 -2，我就改成5 -2了~

我另存了一份, 抓取和图片下载都没有问题

我测试了一遍，5张小图都能采集下来，我估计跟滚屏关系不太大，除非你的网速很慢。因为这5张图位于第一屏的位置，即使不滚屏，也能显示出来。你是不是把DS打数机窗口缩的很小？要是满屏的话，第一屏就有这5张小图