https://www.aihuishou.com/product/23422.html这个页面里选项都选择之后 点击询价会进入一个网页 我在采集的时候怎么才能采集到这个网址。这个页面和教程里的京东页面不一样 这个页面需要手动点击价格 跳转到下一页


举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-8-21 17:52

沙发
umsung 高级会员 发表于 2017-8-21 17:52:51 | 只看该作者
本帖最后由 umsung 于 2017-8-22 15:01 编辑

像这种需要选择完后才能点击跳转到一下页的按钮,需要做连续点击动作,fullpath会自动记录链接。因为每一个选项有多种选择,因此需要分别制作规则
1,设置第一个规则循环点击不同型号目标主题名对应下一级主题名,然后传到下一个规则中。
2, 第二级规则就循环点击不同的存储容量,然后传到第三级规则。就这样每一层规则都做循环点击。
3,传到最后一个规则,就能采集点击询价之后页面上的价格。
因为抓取的页面fullpath和realpath会记录,每一个动作写一个定位xpath就能够定位到所有的点击位置,这样DS打数机运行的时候,就会挨个点击所定位的位置,最后就能点击下一页按钮,采集下一页的数据。连续动作请参考《连续点击动作》


举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反

热门用户

GMT+8, 2025-5-11 03:49