只采集2016年的大众点评数据，怎么避免其它年份的数据？

大神们求助：我想采集2016年的数据，但是评论里有其它年份的数据，该怎么破？http://www.dianping.com/shop/58844203/review_all#rev_284140013

通常应该这样做：把所有的评论采集下来，抓取内容包含评论发布时间。等抓取结果入库以后，可以根据发布时间进行排序，把不要的时间删除。

如果需要增量抓取，不断发现新的评论，目前爬虫程序并不根据内容进行判断，一定要等到入库以后才能判断，所以，每次增量抓取的时候，多翻几页，确保没有遗漏的。在会员中心-》规则管理那里，设置调度参数，可以设置翻页次数