DS大数据，这个爬虫什么时候才能停止啊

这个啥时候我知道他爬完了 是会有提示么？我爬了一个晚上  好像还没爬完。貌似没有那么多信息吧。

没有貌似，如果屏幕还在动的话就是在采集。
你要看的是采集上有没有出问题，比如是否重复采集了。

xandy 发表于 2017-3-8 10:39
没有貌似，如果屏幕还在动的话就是在采集。
你要看的是采集上有没有出问题，比如是否重复采集了。
...

是的呢  怎么看呢，因为其实我看到我要采集的页面也就4000多条信息，我是觉得奇怪不至于那么久吧。一个页面是60个商品，一共68页  我觉得两个小时就可以翻完了。

胡长昱 发表于 2017-3-8 10:45
是的呢  怎么看呢，因为其实我看到我要采集的页面也就4000多条信息，我是觉得奇怪不至于那么久吧。一个页 ...

那你看看有没有翻页死循环。
看下页面是不是一直停留在一个页面上采集。

xandy 发表于 2017-3-8 10:48
那你看看有没有翻页死循环。
看下页面是不是一直停留在一个页面上采集。

好像是你说的死循环了，
停留在一个页面上采集。

胡长昱 发表于 2017-3-8 10:58
好像是你说的死循环了，
停留在一个页面上采集。

翻页死循环看这个教程来解决：《实战：怎么解决翻页死循环/重复翻页的问题》

xandy 发表于 2017-3-8 10:59
翻页死循环看这个教程来解决：《实战：怎么解决翻页死循环/重复翻页的问题》 ...

可以了，采集完毕。数据怎么导出？

胡长昱 发表于 2017-3-8 11:00
可以了，采集完毕。数据怎么导出？

参看教程：《查看数据结果》。更多问题可以去教程版块搜索，善用搜索引擎。