采集天猫详情页

你好，主题：天猫国际A2奶粉0523-商品详情，促销价/价格/月销量/库存 只能采集完成后，只有一部分数据可以采集得到，之前把店铺（旺旺ID也添加到列表），抓取数据的时候总是显示超时，现在已经把这个信息去掉，麻烦可以帮忙看一下是什么问题吗？谢谢！

哪些字段抓不到？我估计是你没有打开DS打数机的滚屏功能，DS打数机菜单：配置-》滚屏参数，滚屏次数设置成>0的数字，就会看到自动滚屏，就能把采集速度放慢，有些延迟加载的内容就不会漏掉

滚屏功能有开了（滚屏次数跟滚屏速度均设为2），促销价/价格/月销量/库存 这些都会有一部分的缺失，而且抓取需要很长的时间。

carmen 发表于 2017-5-23 17:06
滚屏功能有开了（滚屏次数跟滚屏速度均设为2），促销价/价格/月销量/库存 这些都会有一部分的缺失，而且抓 ...

给一个有缺失字段的网址我试试

https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
https://detail.tmall.hk/item.htm ... a078d7b38c473037afc
这是一部分，我后来把延迟抓取设置为60秒后，除了库存，其它的基本上能抓得到。不过抓取花得时间挺长。

shengchengx 发表于 2017-5-23 17:36
给一个有缺失字段的网址我试试

https://detail.tmall.hk/item.htm ... a078d7b38c473037afc https://detail.tmall.hk/item.htm ... a078d7b38c473037afc https://detail.tmall.hk/item.htm ... a078d7b38c473037afc https://detail.tmall.hk/item.htm ... a078d7b38c473037afc https://detail.tmall.hk/item.htm ... a078d7b38c473037afc https://detail.tmall.hk/item.htm ... a078d7b38c473037afc 这是一部分，我后来把延迟抓取设置为60秒后，除了库存，其它的基本上能抓得到。不过抓取花得时间挺长。

carmen 发表于 2017-5-23 17:45
https://detail.tmall.hk/item.htm?id=520039254772&user_id=2555064063&cat_id=52792006&is_b=1&rn=93d340 ...

把促销价和库存这两做一下定位标志映射就好了

定位标志映射的教程是《定位标志精确采集范围》

定位映射后可以了。感谢!!!
可以再麻烦一下吗？Taobao有下面这几种网页结构，是把左上角的logo设为关键内容，设置一个规则不同的编号吗？看到27/28期的视频中有提到Xpath,但是看不清表达示，可以告诉我一下是怎么样做的吗
https://item.taobao.com/item.htm ... p;abbucket=3#detail
https://item.taobao.com/item.htm ... p;abbucket=3#detail
https://detail.tmall.hk/hk/item. ... e27b&abbucket=3
https://detail.tmall.com/item.ht ... e27b&abbucket=3
谢谢

shengchengx 发表于 2017-5-23 17:52
把促销价和库存这两做一下定位标志映射就好了

可以了，感谢！
可以问一下需要区分Taobao跟Tmall，具体是怎样实现的吗