https://www.aihuishou.com/product/23422.html这个页面里选项都选择之后 点击询价会进入一个网页 我在采集的时候怎么才能采集到这个网址。这个页面和教程里的京东页面不一样 这个页面需要手动点击价格 跳转到下一页


举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-8-21 17:52

umsung 高级会员 发表于 2017-8-21 17:52:51 | 显示全部楼层
本帖最后由 umsung 于 2017-8-22 15:01 编辑

像这种需要选择完后才能点击跳转到一下页的按钮,需要做连续点击动作,fullpath会自动记录链接。因为每一个选项有多种选择,因此需要分别制作规则
1,设置第一个规则循环点击不同型号目标主题名对应下一级主题名,然后传到下一个规则中。
2, 第二级规则就循环点击不同的存储容量,然后传到第三级规则。就这样每一层规则都做循环点击。
3,传到最后一个规则,就能采集点击询价之后页面上的价格。
因为抓取的页面fullpath和realpath会记录,每一个动作写一个定位xpath就能够定位到所有的点击位置,这样DS打数机运行的时候,就会挨个点击所定位的位置,最后就能点击下一页按钮,采集下一页的数据。连续动作请参考《连续点击动作》


举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-16 20:08