集搜客GooSeeker网络爬虫

标题: 我想抓取这个网页2月份的数据是得怎么设置呢我直接用这个界面定义规则但是DS打数机抓取的时候一直跳到最新日期抓数据而且一直匹配失败没有抓取成功 [打印本页]

作者: hongzx 时间: 2017-2-5 17:34
标题: 我想抓取这个网页2月份的数据是得怎么设置呢我直接用这个界面定义规则但是DS打数机抓取的时候一直跳到最新日期抓数据而且一直匹配失败没有抓取成功
file:///C:\Users\Cart\Documents\Tencent Files\312737674\Image\C2C\P1XH9(6VJP95U2HL5BY~IHG.pngfile:///C:\Users\Cart\Documents\Tencent Files\312737674\Image\C2C\P1XH9(6VJP95U2HL5BY~IHG.pngfile:///C:\Users\Cart\Documents\Tencent Files\312737674\Image\C2C\P1XH9(6VJP95U2HL5BY~IHG.png

作者: Fuller 时间: 2017-2-5 19:53
浏览器第一次加载网页的时候可能就是最新时间，所以，需要做一次选择时间的动作。

你的主题名是什么？可以帮你诊断一下。

作者: Fuller 时间: 2017-2-5 19:54
如果要定义动作，请看高级教程的连续动作一章，教程首页左栏有目录，找到高级教程。

作者: hongzx 时间: 2017-2-5 19:58

Fuller 发表于 2017-2-5 19:53
浏览器第一次加载网页的时候可能就是最新时间，所以，需要做一次选择时间的动作。

你的主题名是什么？可以 ...

主题名？

作者: hongzx 时间: 2017-2-5 19:59

Fuller 发表于 2017-2-5 19:53
浏览器第一次加载网页的时候可能就是最新时间，所以，需要做一次选择时间的动作。

你的主题名是什么？可以 ...

主题名？

作者: Fuller 时间: 2017-2-5 20:01

hongzx 发表于 2017-2-5 19:59
主题名？

规则的名字？

作者: hongzx 时间: 2017-2-5 20:22

Fuller 发表于 2017-2-5 20:01
规则的名字？

饿了么2月份腾讯舆情

作者: Fuller 时间: 2017-2-5 20:29

hongzx 发表于 2017-2-5 20:22
饿了么2月份腾讯舆情

[attach]4883[/attach]

这个网页是很规整的，“评价”这个抓取内容想存什么内容？如果像上图那样要存评论内容，可以用上定位标志映射，让定位更加精准一些。

作者: hongzx 时间: 2017-2-5 22:11

Fuller 发表于 2017-2-5 20:29
这个网页是很规整的，“评价”这个抓取内容想存什么内容？如果像上图那样要存评论内容，可以用上定位标 ...

就是要存评论内容只是要存2016年2月1日到2016.2月29日的评论内容，不知道怎么设置

作者: Fuller 时间: 2017-2-5 22:23

hongzx 发表于 2017-2-5 22:11
就是要存评论内容只是要存2016年2月1日到2016.2月29日的评论内容，不知道怎么设置 ...

看连续动作教程：http://www.gooseeker.com/doc/article-370-1.html ，定义一系列动作，像人一样点击日历选择时间。

有一整套连续动作的教程，看教程首页左栏目录，在高级教程里面：http://www.gooseeker.com/tuto/tutorial.html

作者: hongzx 时间: 2017-2-8 11:42

Fuller 发表于 2017-2-5 22:23
看连续动作教程：http://www.gooseeker.com/doc/article-370-1.html ，定义一系列动作，像人一样点击日历 ...

这里说的定位表达式必须写到select节点，但是我没有找到select节点

作者: Fuller 时间: 2017-2-8 12:12

hongzx 发表于 2017-2-8 11:42
这里说的定位表达式必须写到select节点，但是我没有找到select节点

这种看起来是一个下拉选择框，其实不是的，要全部用点击动作模拟，点开日历-》选择月份-》选择日期，如果有必要，还要点击确认以便关闭日历选择窗

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)