快捷导航
本帖最后由 xandy 于 2017-1-4 11:13 编辑

大家在抓数据的时候,需要抓取多个网页结构相同的页面数据时,比如既要抓取天猫手机搜索列表的价格、名称,又要抓取电脑搜索列表的价格名。
这种情况只需做一个抓取规则就行,不用针对手机做一个又对电脑做一个,因为都是抓取天猫搜索列表的数据,网页结构是相同的,在规则制作好之后,再往规则里添加线索就行。
线索简单来说就是一个网址,如果以天猫搜索手机的网址作为样本页面制作规则,那天猫搜索电脑的网址就可以作为一条线索添加到打数机中进行抓取。
添加线索的两中方式:

举报 使用道具
| 回复

共 21 个关于本帖的回复 最后回复于 2021-8-8 21:55

hellomonkey 新手上路 发表于 2016-3-9 09:01:32 | 显示全部楼层
本帖最后由 hellomonkey 于 2016-3-9 09:02 编辑

导入线索以后好像不会自动跳转下一线索?求问是怎么解决这个问题的?
举报 使用道具
Fuller 管理员 发表于 2016-3-9 09:39:53 | 显示全部楼层
hellomonkey 发表于 2016-3-9 09:01
导入线索以后好像不会自动跳转下一线索?求问是怎么解决这个问题的?

如果你是说同一个规则的多个线索,那么不是自己跳,而是
1,如果你使用手工启动DS打数机的单搜或者集搜,输入线索数量,输入几就抓几个网页
2,如果你使用爬虫群功能,那么在会员中心配置每批多少线索,爬虫群会连续运行,一批批抓
举报 使用道具
hellomonkey 新手上路 发表于 2016-3-9 10:16:50 | 显示全部楼层
Fuller 发表于 2016-3-9 09:39
如果你是说同一个规则的多个线索,那么不是自己跳,而是
1,如果你使用手工启动DS打数机的单搜或者集搜, ...

原来如此 我去试一下 谢谢回复!
举报 使用道具
molinghanxin 新手上路 发表于 2016-3-10 10:32:48 | 显示全部楼层
Fuller 发表于 2016-3-9 09:39
如果你是说同一个规则的多个线索,那么不是自己跳,而是
1,如果你使用手工启动DS打数机的单搜或者集搜, ...

为什么我用了集搜还是不会自动跳转页面呢?
举报 使用道具
Fuller 管理员 发表于 2016-3-10 11:23:26 | 显示全部楼层
molinghanxin 发表于 2016-3-10 10:32
为什么我用了集搜还是不会自动跳转页面呢?

你是不是说的这个问题:http://www.gooseeker.com/doc/thread-1492-1-1.html
我为你解答了
举报 使用道具
addreamerXZR 初级会员 发表于 2016-7-10 21:27:25 | 显示全部楼层
这个功能好!
举报 使用道具
haoxindz 新手上路 发表于 2017-7-24 23:09:03 | 显示全部楼层
不错哦
举报 使用道具
delia1993 新手上路 发表于 2017-11-6 15:10:51 | 显示全部楼层
学习了
举报 使用道具
1455982215 初级会员 发表于 2017-11-17 20:16:55 | 显示全部楼层
大厦阿三大厦阿三
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-19 17:40