江诗丹顿 手表采集少线索问题

列表爬出数据导出，有183个手表信息，跟网页符合，但是在详情规则统计线索只有174条线索，通过手工将excell表的183条线索导入到打数机，还是显示有174条线索，有没有碰到类似情况的前辈，求教原因。
表格数据如下图

很有可能是网址太长，前250个字符相同，这样就无法判断两个网址是有区别的，因为判断的时候只比较前250个字符。
要解决这个问题有点麻烦，这个本来是软件的缺点，目前只能手工解决这个问题。
因为网址中的参数顺序是不影响的，可以手工把网址中的有区别的参数调到前面，放在250个字符之内，这样就不会重复判断失误了