可以采集文章吗？

肥胖君

可以采集文章吗？

ym · 发表于 2017-3-16 18:16:01

公开的网页信息都可以采集

肥胖君 · 发表于 2017-3-16 18:16:15

是采集下来就是文章吗？
比如百度文库里的
直接扒下来就是一篇文章吗？

ym · 发表于 2017-3-16 18:16:42

不是，一个网页抓一次，如果文章都在同一页的话，抓下来就是一篇，翻页的话就是分开的，得入库清洗或者用其他方法合并

肥胖君 · 发表于 2017-3-16 18:16:54

我把所有文章链接都收集好可以一次性扒下来吗？

ym · 发表于 2017-3-16 18:17:04

网页结构相同的话，做一个采集规则就可以批量采集

共 5 个关于本帖的回复最后回复于 2017-3-16 18:17

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页