用连续动作实现翻页点击

常见问题 > 制作规则—常见问题导航 > 翻页 > 用连续动作实现翻页点击

如果要采集的页面有很多页，并且经常翻页到中间就断掉了，可以修改一下规则，设置连续动作实现翻页点击/跳转。下面举例介绍几种常见设置方法

• 通过页码输入框跳到中断的那页继续往下翻页采集
• 如果爬虫路线的翻页设置都执行失败的话，可以设置连续动作，实现翻页点击
• 用连续动作点击悬浮页码窗口来实现跳转翻页
  

一、通过页码输入框跳到中断的那页继续往下翻页采集
如果每一页的网址都是一样的，无法通过构造页码网址来单独采集每一页，并且很容易翻页到中间就断掉，这种情况就要看看是否存在页码输入框，如果有的话，就可以在规则里设置连续动作（输入+点击），让爬虫跳转到断掉的那一页，继续往下翻页采集，连续动作的设置如下：

1.1、在原来规则的基础上，再设置连续动作就可以了，首先是把规则加载出来
1.2、点击“页码输入框”定位，再点击左侧的“显示xpath”按钮，选择一种模式（常用class/id定位）后就会自动生成xpath，点击一下右侧的“搜索”按钮，检验一下是否只定位到一个节点。
1.3、在连续动作窗口里，输入当前的主题名，建立“输入”动作，在“输入关键词”方框里填上要跳转的页码数值，再拷贝上一步里得到的xpath，粘贴到“定位表达式”方框里，最后给动作名称起个名字，就完成了“输入”动作的设置。


1.4、与上面操作一样，先定位并生成“跳转”按钮的xpath，再建立第二个动作“点击”，把xpath填上就可以了。
1.5、保存规则，然后试抓一遍，检验一下是否执行成功，如果DS打数机的日志提示“定位不到节点***”，就说明xpath不合适，就要修改连续动作里的xpath了。

二、如果爬虫路线的翻页设置都执行失败的话，可以设置连续动作，实现翻页点击
如果在爬虫路线里试过了记号线索、相对线索、定点线索，但是都翻页失败了，可以删掉爬虫路线的翻页设置，改成用连续动作来实现翻页点击。设置方法如下：
2.1、在原来规则的基础上，在连续动作里输入当前的主题名，然后建立“点击”动作
2.2、点击“第1页”按钮进行定位，用“显示xpath”功能生成它的xpath，但是这个xpath只能定位到一个页码节点，而我们要的是能定位到每一个页码按钮的xpath，所以，要人工修改xpath，通常是修改成position>** ，但是请大家掌握xpath语法后，根据实际网页结构来写。


2.3、把修改后的xpath粘贴到xpath显示框里，然后点击“搜索”按钮，检验定位到的节点数，最后把xpath填到“定位表达式”方框里。
2.4、保存规则，然后试抓数据，看看是否执行成功。如果出现“定位不到节点**”，就是xpath的问题了，要修改连续动作的xpath。

三、用连续动作点击悬浮页码窗口来实现跳转翻页
如果翻页区是要把鼠标移动到那里，然后弹出页码选择窗口的话，就要用悬浮动作+点击动作来实现跳转翻页。操作如下：

3.1、在原来规则的基础上，删掉爬虫路线的翻页设置，然后在连续动作里输入当前主题名，建立“悬浮”动作
3.2、点击翻页区进行定位，用“显示xpath”功能生成xpath，再点击“搜索”按钮检验一下是否定位到唯一的节点
3.3、在“定位表达式”方框里填上xpath，就完成了悬浮动作的设置


3.4、建立“点击”动作，用来点击浮窗中的页码
3.5、弹出浮窗后，按快捷键Ctrl+H冻结浮窗，然后点击浮窗中的页码来定位，用“显示xpath”功能生成它的xpath，此时只能定位到一个页码节点，但我们是要定位到每一个页码节点，所以，掌握xpath语法再来手工编写xpath，把自己写的xpath输入到xpath搜索框里，检查一下是否定位到所有页码节点。
3.6、把xpath填到“定位表达式”方框里，完成“点击”动作的设置
3.7、保存规则，然后试抓数据，看看是否执行成功。如果出现“定位不到节点**”，就是xpath的问题了，要修改连续动作的xpath。

ym 发表于 2016-12-22 18:24
一、通过页码输入框跳到中断的那页继续往下翻页采集
如果每一页的网址都是一样的，无法通过构造页码网址来 ...

这种情况在翻页中断之前是怎么去翻页的啊？

ym 发表于 2016-12-22 18:24
一、通过页码输入框跳到中断的那页继续往下翻页采集
如果每一页的网址都是一样的，无法通过构造页码网址来 ...

没有页码框怎么操作

niniliya 发表于 2018-8-26 15:08
没有页码框怎么操作

既没有页码输入框，每个分页有没有独立网站，那么中断以后只能从头开始翻页了

第二条如果设置position>n，是不是就可以从第n页开始采集了

15189823636 发表于 2018-11-19 20:40
第二条如果设置position>n，是不是就可以从第n页开始采集了

翻页不要用这个连续动作，很不好控制的，用翻页采集：https://www.gooseeker.com/doc/article-334-1.html
翻页采集有两种：
1，根据翻页记号，比如“下一页”这样的记号
2，相对翻页：比如，只有 1，2，3，4这样的页码
这两种情况几乎覆盖了所有翻页情况。

用连续动作的话，你要写xpath，这个xpath刚好定位到“下一页”那个按钮上。在高级选项那里设置点击次数为-1，就是无数次，但是为了让爬虫停下来，就要设置重复内容中断，是在DS打数机菜单 高级-》终点标志-》重复内容 上设置