集搜客GooSeeker网络爬虫

标题: 豆瓣详情总是跳着爬,要怎么办 [打印本页]

作者: amaz_4    时间: 2022-4-4 21:35
标题: 豆瓣详情总是跳着爬,要怎么办
电影链接是相邻的,但是就是会跳着爬,第一层爬url可以正常爬,到第二层就开始跳着爬,爬完的数据比本来要爬的差很多能不能帮忙看看是什么问题,任务名是uuuu1

作者: gz51837844    时间: 2022-4-5 08:54
加载你这个任务名:uuuu1, 系统提示"任务不存在"
你确认下是不是这个名字

作者: amaz_4    时间: 2022-4-5 12:28
不好意思,昨晚爬到后面总是出各种问题,我一生气就删掉了,忘记了发的帖子,现在又建了一个任务,还是同样的名字,和昨晚的步骤也一样,但是它现在连爬都不爬了,可以麻烦再帮忙看看是不是有问题嘛
作者: amaz_4    时间: 2022-4-5 12:29
gz51837844 发表于 2022-4-5 08:54
加载你这个任务名:uuuu1, 系统提示"任务不存在"
你确认下是不是这个名字
...

不好意思,昨晚爬到后面出现了各种各样的问题,我一生气就删掉了,忘记了发的帖子,现在又建了一个任务,还是uuuu1,和昨晚的任务是一样的,但是它现在连爬都不爬了,可以帮忙再看看吗?

作者: Fuller    时间: 2022-4-5 17:00
没有必要做点击动作,按照层级采集的教程,在整理箱中双击url这个抓取内容,如图勾上下级网址,填上下级任务名。具体参看层级采集教程:https://www.gooseeker.com/doc/article-523-1.html

[attach]15414[/attach]

作者: amaz_4    时间: 2022-4-5 17:27
Fuller 发表于 2022-4-5 17:00
没有必要做点击动作,按照层级采集的教程,在整理箱中双击url这个抓取内容,如图勾上下级网址,填上下级任 ...

好像不行,改完以后连url都抓不到了


作者: Fuller    时间: 2022-4-5 17:38
amaz_4 发表于 2022-4-5 17:27
好像不行,改完以后连url都抓不到了

你现在用的是最新版数据管家软件吗?https://www.gooseeker.com/pro/gooseeker.html

我测试没有问题

作者: amaz_4    时间: 2022-4-5 17:44
Fuller 发表于 2022-4-5 17:38
你现在用的是最新版数据管家软件吗?https://www.gooseeker.com/pro/gooseeker.html

我测试没有问题

是新版的,刚刚又试了一遍,可以爬url了,但是第二级的任务好像不动了

作者: Fuller    时间: 2022-4-5 18:47
amaz_4 发表于 2022-4-5 17:44
是新版的,刚刚又试了一遍,可以爬url了,但是第二级的任务好像不动了

第二级要单独运行

作者: amaz_4    时间: 2022-4-5 19:18
Fuller 发表于 2022-4-5 18:47
第二级要单独运行

可以了!非常感谢,谢谢





欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2