连续动作和翻页的问题

saly123 于 2016-12-30 09:56 发表 [复制链接] [只看楼主] [打印] [上一主题] [下一主题]

11^#

Fuller 管理员 发表于 2017-1-4 09:57:41 | 只看该作者

saly123 发表于 2017-1-4 09:31
怎么将抓取的数据存入数据库？

可以存入云数据库。有连续动作的，就是有多级规则，比如，A-》B-》C，连着做三级，那么都要入库的话，有个技巧：在会员中心为这三个主题设置调度参数，但是要有区别1）主题A，勾选“抓取数据”，设置爬虫调度参数，并勾选“结果入库”
2）主题B和C，只勾选“结果入库”，不能勾选“抓取数据”，因为爬虫是从A开始的

本帖子中包含更多资源

您需要登录才可以下载或查看，没有帐号？立即注册

x

举报使用道具

回复支持反对

12 / 2 页

返回列表

精彩推荐

为BERTopic安装需要的预训练SBERT模型
在什么情况下使用弹窗模式和回退功能？
爬网址做层级采集——以当当商品爬虫为例
网络爬虫采集列表数据
UMAP的min_dist参数有什么作用？

连续动作和翻页的问题

本帖子中包含更多资源

推荐板块

精彩推荐

热门话题

热门用户

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页