可以批量抓取类似百度贴吧这样网站上的贴子和回复吗？

小安河

ym · 发表于 2017-3-16 10:50:27

公开的网页信息都可以抓。
用数据DIY上的现成爬虫，可以免做规则直接采数据http://www.gooseeker.com/res/dat ... 0%E8%B7%9F%E8%AF%84

小安河 · 发表于 2017-3-16 10:50:48

也可以抓取国外论坛内容？
不仅仅限于国内的吧

ym · 发表于 2017-3-16 10:52:59

可以
数据DIY上面没有的网页，就要自己做采集规则，可以看左侧“从入门到精通”的教程来掌握操作，另外翻墙得自己解决。

小安河 · 发表于 2017-3-16 10:53:33

采集后呢？数据在哪里查看？

ym · 发表于 2017-3-16 10:54:40

你用的是数据DIY，这个没有查看的，要打包后才能下载数据。
用自己做的规则采数据，就是存在本地电脑的。

小安河 · 发表于 2017-3-16 10:54:55

打包需要付费十八，是吧

ym · 发表于 2017-3-16 10:56:04

付的是积分，官网上有获取免费积分的方法http://www.gooseeker.com/about/point.html
也可以购买积分，1元=10积分，能下载200条数据

小安河 · 发表于 2017-3-16 11:11:40

嗯嗯，还挺划算的

共 8 个关于本帖的回复最后回复于 2017-3-16 11:11

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页