【豆瓣_电影影评采集】#GooSeeker数据DIY#

• 标题：【豆瓣_电影影评采集】#GooSeeker数据DIY#
• 类别：社交
• 网站：豆瓣
• 采集字段：电影名称、用户名称、标题、内容、用户主页链接、日期、有用数、回应数、评分、星级、标题链接
• DIY体验入口：http://www.gooseeker.com/res/dat ... 1%E5%BD%B1%E8%AF%84
• 样本网址： https://movie.douban.com/subject/1292722/reviews
  

【启动采集前的配置】

• 预先登陆网站：否
• 配置打码平台：否
  

【运行方法】— 详见数据DIY图文教程

• 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问豆瓣_电影影评页面；
• 输入一条网址，或者点击“输入多条网址”，然后点击“获取数据”；
• 点击“启动采集”按钮，采集完成后点击“打包”按钮，就可以下载数据了。
  

【常见问题】— 欢迎跟帖留言

为什么充值钱了，打包不了数据，不是１积分２０条数据吗，我充了１０块，有１００积分，不是应该可以爬取２０００条吗

yingying987 发表于 2019-12-2 20:40
为什么充值钱了，打包不了数据，不是１积分２０条数据吗，我充了１０块，有１００积分，不是应该可以爬取２ ...

打包数据的时候会提示，现在有多少条数据要打包，需要多少钱，你看到多少条数据？

可能我爬取失败了，显示有一条数据可打包，是看到打包多少条数据，就是爬取到多少条是吗

yingying987 发表于 2019-12-3 20:11
可能我爬取失败了，显示有一条数据可打包，是看到打包多少条数据，就是爬取到多少条是吗 ...

对，看到能打包多少，才能导出那么多。中间出错的原因可能有多个，比如：
1，网站封锁了爬虫，看到404或者出现验证码
2，网络暂时性中断了，比如，翻页中断
3，爬虫处理过程入库偶然出现失败

一般应对方法是进行重采

影评采集到的没有显示展开下面的内容怎么办呀？

wushujia 发表于 2022-3-3 10:50
影评采集到的没有显示展开下面的内容怎么办呀？

快捷采集那里有两个工具，组合使用：
1. 豆瓣电影-影评：采集影评列表和每条影评的网址
2. 豆瓣电影影评-详情：把上一个工具采集到的每条影评网址加到这个工具，就能采集全部内容

Fuller 发表于 2022-3-3 15:20
快捷采集那里有两个工具，组合使用：
1. 豆瓣电影-影评：采集影评列表和每条影评的网址
2. 豆瓣电影影评- ...

可以讲一下具体如何操作嘛