怎么将无关的主题或评论在爬取时就剔除掉

axu517

1、评论中出现某条评论下的重叠评论或出现与主题无关的评论，如何剔除？

2、发帖人在自己帖子下进行评论，如何剔除？

3、版块中出现与主题不符的帖子，如何剔除？
4、社区用户个人资料中只能出现主题所属版块，但真正需要的是版块中某一分类，那应该怎么剔除那些不需要的？

axu517 · 发表于 2017-4-8 17:53:46

希望各位帮忙解答谢谢！

ym · 发表于 2017-4-8 19:09:22

把信息都采集下来后，后期人工做清洗过滤

axu517 · 发表于 2017-4-11 12:50:54

ym 发表于 2017-4-8 19:09
把信息都采集下来后，后期人工做清洗过滤

哦哦我自己试一下谢谢你

共 3 个关于本帖的回复最后回复于 2017-4-11 12:50

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页