11#
Givent 中级会员 发表于 2016-12-16 14:34:58 | 只看该作者
Fuller 发表于 2016-12-16 14:33
找货网址是哪个?

还是天天有货啊,他不是有找车和找货么?我要抓取那个找货的?另外为啥你给样本网址,点击不用输入验证码了啊
举报 使用道具
12#
Fuller 管理员 发表于 2016-12-16 14:39:05 | 只看该作者
是这个吗? http://m.ttyhuo.com/m/pkg-search.html

操作方法类似
举报 使用道具
13#
Givent 中级会员 发表于 2016-12-16 14:41:28 | 只看该作者
Fuller 发表于 2016-12-16 14:39
是这个吗? http://m.ttyhuo.com/m/pkg-search.html

操作方法类似

对的,为啥你这样弄的网址都不用输入验证码了?因为他这个数据是更新的么?以后每天抓取直接点击这个网址就可以是么?
举报 使用道具
14#
Fuller 管理员 发表于 2016-12-16 15:23:29 | 只看该作者
Givent 发表于 2016-12-16 14:41
对的,为啥你这样弄的网址都不用输入验证码了?因为他这个数据是更新的么?以后每天抓取直接点击这个网址 ...

是的,这个网址是iframe内部的,你用的网址是外层的,做了登录限制,内层的这个不用登录
举报 使用道具
15#
Givent 中级会员 发表于 2016-12-16 15:38:45 | 只看该作者
Fuller 发表于 2016-12-16 15:23
是的,这个网址是iframe内部的,你用的网址是外层的,做了登录限制,内层的这个不用登录
...

哥,我服了你。太牛了!另外,抓取时,会提升匹配失败,是不是延迟时间太短了

举报 使用道具
16#
yangyanxian 新手上路 发表于 2017-1-7 22:37:49 | 只看该作者
Fuller 发表于 2016-12-10 10:49
刚才我确认过了,这个网页上有个滚动条,要等下个版本,下周就发布了,旗舰版增加这个内部滚动条滚屏功能 ...

现在旗舰版能用吗
举报 使用道具
17#
Fuller 管理员 发表于 2017-1-7 22:43:26 | 只看该作者
yangyanxian 发表于 2017-1-7 22:37
现在旗舰版能用吗

能用,你想采集什么网页?
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-30 13:31