集搜客GooSeeker网络爬虫

标题: 求助已有爬虫代码但单机爬微博太慢能借助云平台吗 [打印本页]

作者: dzlhl01 时间: 2016-4-26 23:33
标题: 求助已有爬虫代码但单机爬微博太慢能借助云平台吗
做毕业设计抓700个用户信息每个用户的100个关注人信息也要抓。
自己用PYTHON写了爬虫但访问微博次数有限爬一会速度就变得很慢
用没有什么方法可以加快速度呢
就剩下一周时间抓数据了
所在地，性别，微博昵称，个人描述，标签，注册时间，用户类型（认证用户、微博会员、微博达人等）关注人数和关注人信息，粉丝人数
700个用户的id已有例：weibo.cn/id/info

作者: Fuller 时间: 2016-4-26 23:36
我感觉微博采集工具箱中的博主详细信息工具能满足需求：http://www.gooseeker.com/land/weibo.html 最后一个工具

欢迎光临集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/)