怎么把翻页抓取和层级抓取连起来

gooseeker_jisou 于 2015-9-22 11:00 发表 [复制链接]

本帖最后由 ym 于 2016-6-17 14:40 编辑

问：我同时要实现翻页抓取和二级抓取，怎么把翻页抓取和层级抓取连起来

答：一个规则中可以同时设置翻页和下级线索（层级抓取），两级规则之间通过第一级规则中下级线索的目标主题名联系起来。注意：层级规则是互相独立运行的，抓取的时候不会自动从第一级跳到第二级，需要分别运行采数据。层级抓取参看《集搜客如何抓取多层级网页》

举报使用道具

| 回复

共 0 个关于本帖的回复最后回复于 2015-9-22 11:00

返回列表

精彩推荐

怎样让GooSeeker分词工具使用宋体画词云图
使用BERTopic时遇到的c-TF-IDF是什么？
gooseeker分词工具的命名实体识别和词形还
怎样设置LDA模型的超参数alpha(α)和beta(
LDA主题分析模型到底是什么？

怎么把翻页抓取和层级抓取连起来

共 0 个关于本帖的回复最后回复于 2015-9-22 11:00

推荐板块

精彩推荐

热门话题

热门用户

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页

怎么把翻页抓取和层级抓取连起来

共 0 个关于本帖的回复 最后回复于 2015-9-22 11:00

推荐板块

精彩推荐

热门话题

热门用户

共 0 个关于本帖的回复最后回复于 2015-9-22 11:00