抓取中途电脑关机会不会影响数据的完整性

TonyJiang

爬虫模式抓取过程中电脑自动重启了会影响抓取数据的完整性么？

quyixuan · 发表于 2016-10-10 11:35:10

抓取中的线索会漏掉需要重新激活这些线索

TonyJiang · 发表于 2016-10-10 11:35:26

quyixuan 发表于 2016-10-10 11:35
抓取中的线索会漏掉需要重新激活这些线索

会标记为失败线索么？
抓取中的线索

quyixuan · 发表于 2016-10-10 11:35:41

TonyJiang 发表于 2016-10-10 11:35
会标记为失败线索么？
抓取中的线索

不会就是抓取中

TonyJiang · 发表于 2016-10-10 11:35:57

quyixuan 发表于 2016-10-10 11:35
不会就是抓取中

那激活失败线索后再爬是不是可以补完数据？

quyixuan · 发表于 2016-10-10 11:36:07

TonyJiang 发表于 2016-10-10 11:35
那激活失败线索后再爬是不是可以补完数据？

是的

TonyJiang · 发表于 2016-10-10 11:38:00

quyixuan 发表于 2016-10-10 11:36
是的

超时的那些线索如何补全？
激活失败线索后再运行爬虫么？

quyixuan · 发表于 2016-10-10 11:38:13

TonyJiang 发表于 2016-10-10 11:38
超时的那些线索如何补全？
激活失败线索后再运行爬虫么？

是的

TonyJiang · 发表于 2016-10-10 11:38:33

quyixuan 发表于 2016-10-10 11:38
是的

集搜模式和爬虫模式的哪些功能有区别？
我以为集搜就是爬虫群

quyixuan · 发表于 2016-10-10 11:38:51

TonyJiang 发表于 2016-10-10 11:38
集搜模式和爬虫模式的哪些功能有区别？
我以为集搜就是爬虫群

集搜只是开多一个窗口爬虫群可以开多个窗口

共 10 个关于本帖的回复最后回复于 2016-10-10 11:39

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页