大众点评商家评论无法抓取

SmokyHuman

现在大众点评的商家评论页面必须要登陆才能看到除了最新十条以外的评论了但在GooSeeker客户端无法登陆会显示403……还有办法抓取吗

Fuller · 发表于 2018-8-26 23:02:37

可以登录呀，你是被封IP了吗？

SmokyHuman · 发表于 2018-8-27 01:54:26

Fuller 发表于 2018-8-26 23:02
可以登录呀，你是被封IP了吗？

怎么样才能知道自己是不是被封了？会因为是OS系统吗

Fuller · 发表于 2018-8-27 09:28:19

SmokyHuman 发表于 2018-8-27 01:54
怎么样才能知道自己是不是被封了？会因为是OS系统吗

大众点评网很容易封爬虫，有多种方法应对：
1，修改UserAgent
2，清理缓存
3，换IP

修改UA和清理缓存的方法参看

目前换IP需要重新启动光猫重新拨号。很快会出一个版本通过proxy换IP

共 3 个关于本帖的回复最后回复于 2018-8-27 09:28

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页