老师好!
问题:在抓取电影的基本信息时,似乎是只能正常抓取如“肖申克的救赎”之类的电影名称上部加黄色排名标签的电影,而其他的电影页面,虽然看起来结构似乎都一样,但是不能正常抓取。
线索名:一级规则(my_douban_jq_20190118)、二级线索(jqInfoBox)
恳请老师解答。
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2021-1-5 09:09

沙发
shenzhenuser1 版主 发表于 2021-1-5 09:09:28 | 只看该作者
采集豆瓣的数据,直接在集搜客的快捷采集中选中豆瓣网站输入要采集的网址即可采集
比如采集豆瓣的电影列表,选中豆瓣_电影列表https://www.gooseeker.com/res/da ... 1%E5%88%97%E8%A1%A8

步骤:
1,选中要采集的网站页面
2,输入采集链接,选择采集多页
3,启动采集
采集完成后,打包数据即可下载Excel格式的数据:

如果要继续采集其他页面的数据,比如电影详情和电影评论,就将采集到的网址添加的对应页面的入口,选择输入多条网址

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 为BERTopic安装需要的预训练SBERT模型
  • 在什么情况下使用弹窗模式和回退功能?
  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?

热门用户

GMT+8, 2026-7-17 22:05