集搜客GooSeeker网络爬虫

标题: 爬到1万条以后就不保存了？ [打印本页]

作者: wxjiang 时间: 2017-11-8 10:43
标题: 爬到1万条以后就不保存了？
我爬了两天了，今天早晨看文件夹里只保存了1万条XML，但是DS打数机还在运行，还在爬，不知道1万条以后的数据有保存下来吗？是要花钱才能看吗？

作者: umsung 时间: 2017-11-8 10:58
本帖最后由 umsung 于 2017-11-8 11:04 编辑

1，打数机默认当文件夹里超过10000个采集结果，新采集的结果就会保存到自动创建的m文件夹里,数量可自定义。
在DS打数机菜单项: 文件->存储路径中设置，不要调整太大，不要超过10万个，否则，打开文件夹会很慢。

2，免费版爬虫每条规则只能导出一万条数据，还是可以采集下来，只是超过1万条数据后就无法转换成excel文件，则需要购买数据仓库扩大仓库容量才能导出，如果数据量很大的话建议购买旗舰版，因为旗舰版数据量无限制。详情参考《购买服务》

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)