集搜客GooSeeker网络爬虫

标题: 无法清除老数据 [打印本页]

作者: mutualart 时间: 2023-10-5 21:09
标题: 无法清除老数据
我设置了清楚老数据，但是爬取下来还是有几十万条数据，唯一值应该是6000多条，请问是哪里设置有误呢？
https://artpro.com/auction-house/92pYcR1T1l?tab=3

任务名是artpro-auctionhouse1

作者: Fuller 时间: 2023-10-7 08:48
我测试了一下你的规则，运行的挺好的。
1. 即使设置了清除老数据，第一条数据一直清除不了，这是正常的，特意留了一条老数据
2. 设置了连续滚屏的规则，运行之前要把爬虫的自动滚屏关掉，像下图这样设置

[attach]15924[/attach]

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)