主题:安溪项目*

主题:安溪项目1的翻页失败,  麻烦帮我看一下安溪项目1  安溪项目2  安溪项目3  的衔接有问题啊
举报 使用道具
| 回复

共 10 个关于本帖的回复 最后回复于 2017-2-9 12:02

沙发
Fuller 管理员 发表于 2017-2-4 10:03:45 | 只看该作者
生成的翻页规则是
  1. //*[@class='textDiv']/a[count(./span/text())>0 and count(following-sibling::a[position()=1]/strong/text())>0 and string-length(./span/text())>0]
复制代码
无法区分当前位置和下一位置,理想的是
  1. //*[@class='textDiv']/a[count(.//*[@class='STYLE15']/text())>0 and count(following-sibling::a[position()=1]/strong/text())>0 and string-length(.//*[@class='STYLE15']/text())>0]
复制代码

这是程序的处理能力还不够。春节期间,我们把爬虫软件做了升级,这个问题就解决了,新版本周二发布





举报 使用道具
板凳
Fuller 管理员 发表于 2017-2-4 10:53:40 | 只看该作者
翻页可以用那个“下一页”橙色按钮
举报 使用道具
地板
zhuohui1987 金牌会员 发表于 2017-2-4 23:37:17 | 只看该作者
Fuller 发表于 2017-2-4 10:53
翻页可以用那个“下一页”橙色按钮

翻页可以用那个“下一页”橙色按钮  还是走不下去  您看一下吧
举报 使用道具
5#
scraper 论坛元老 发表于 2017-2-5 08:34:22 | 只看该作者
zhuohui1987 发表于 2017-2-4 23:37
翻页可以用那个“下一页”橙色按钮  还是走不下去  您看一下吧

安溪项目1里的连续动作,你定义的是“悬浮”,是不是弄错了?

举报 使用道具
6#
zhuohui1987 金牌会员 发表于 2017-2-8 19:15:27 | 只看该作者
Fuller 发表于 2017-2-4 10:03
生成的翻页规则是无法区分当前位置和下一位置,理想的是
这是程序的处理能力还不够。春节期间,我们把爬虫 ...

已经是周二,下一页还是走不下去,看一下
举报 使用道具
7#
Fuller 管理员 发表于 2017-2-8 21:38:46 | 只看该作者
zhuohui1987 发表于 2017-2-8 19:15
已经是周二,下一页还是走不下去,看一下

1,新版本8.1.3在周二已经发布了,你只需重新下载就行。但是,你现在用的是记号线索,升级这个版本的必要性不大。
2,规则一,翻页规则不太合适,会影响规则的适应性。

你用了红框的TD做线索的定位映射,这个TD就是下一页按钮。通常线索的定位映射要划定一个翻页区,应该是蓝框的那个TR,你划的这个区域太小,观察上图红框中生成的规则,对比我用TR做定位映射生成的规则
  1. //*[@class='main']/table[position()=2]/tbody/tr//a[.//@src="/axjsj_web/dynamic/img/buton03.gif"]
复制代码
如果你理解XPath的语法的话,就能发现区别,后者没有明确规定第三个TD就是翻页按钮,没有明确规定就增加了灵活性。
3,影响失败的最关键问题是规则一的连续动作。执行点击以后进入到了详情页进入规则二,规则二又点击进入规则三,而规则三没有定义,连续动作不可能执行

4,规则二的点击动作,你勾选了飞掠模式,而实际上是在现有窗口加载新网页,不应该用飞掠模式

5,假设 规则一 -〉 二 -〉 三 顺利执行完了,你现在所处的网页是规则三的网页,连续动作做完后会开始规则一的翻页,你在这个网页上根本翻不了页



本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
8#
zhuohui1987 金牌会员 发表于 2017-2-9 11:30:27 | 只看该作者
1.规则一又点击进入规则二,连续动作不可能执行,这个快要怎么去?
2.一直显示无法定位,要节点
举报 使用道具
9#
zhuohui1987 金牌会员 发表于 2017-2-9 11:30:47 | 只看该作者
zhuohui1987 发表于 2017-2-9 11:30
1.规则一又点击进入规则二,连续动作不可能执行,这个快要怎么去?
2.一直显示无法定位,要节点 ...

安溪项目1
举报 使用道具
10#
zhuohui1987 金牌会员 发表于 2017-2-9 11:34:16 | 只看该作者
1.规则一又点击进入规则二,连续动作不可能执行,这个要怎么走?
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 360或火绒等杀毒软件导致GooSeeker爬虫软件
  • 话题分析(NMF模型和LDA模型)软件的安装和
  • 运行Apple无法验证的程序的方法
  • 文本聚类分析软件的安装和使用方法
  • 利用AI阅读和分析文本:扣子COZE记录用户反

热门用户

GMT+8, 2025-5-3 21:41