GooSeeker
产品
资源
教程
视频教程
使用交流
资讯
开启辅助访问
切换风格
请
登录
后使用快捷导航
没有帐号?
立即注册
登录
|
注册
快捷导航
资讯
常见问题
使用交流
python交流
视频教程
资源发布公告
数学建模交流
论坛
›
搜客社区
›
使用交流
3
13261
树状XML怎么做?
波斯兔
于 2018-5-23 20:07
发表
[复制链接]
[只看楼主]
[打印]
[上一主题]
[下一主题]
波斯兔
积分
137
精华
0
威望
62
金钱
2
最后登录 1970-1-1
加为好友
发送消息
访问家园
结构如图,我想做一个树状XML结构,先定义一个主题,制定一个规则
然后制定连续动作:
然后再制定一个主题里面的规则:
忽略整理箱,那个是后来想的办法
现在爬是爬下来了,分成了2个文件夹,2个XML
可以不可以,把2个XML合成一个,变成和源数据一样的结构;
最终效果,,我应该怎么做呀?
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有帐号?
立即注册
x
收藏
0
转播
支持
0
反对
0
举报
使用道具
|
回复
共 3 个关于本帖的回复 最后回复于 2018-5-24 09:10
数据集
积分
826
精华
0
威望
326
金钱
3
最后登录 1970-1-1
加为好友
发送消息
访问家园
个人资料
主题列表
发消息
沙发
数据集
高级会员
发表于 2018-5-23 21:12:14
|
只看该作者
如果要把回复下面的回复采集放到一个xml里面,可以把回复和回复的回复作为一整块采集下来,映射那一整块的节点。后面再通过excel处理
举报
使用道具
回复
支持
反对
Fuller
积分
24084
精华
0
威望
6734
金钱
6
最后登录 2025-5-13
加为好友
发送消息
访问家园
个人资料
主题列表
发消息
板凳
Fuller
管理员
发表于 2018-5-23 22:49:11
|
只看该作者
树状整理箱是可行的。而且这也是集搜客网络爬虫的特色。
在整理箱中,选中一个抓取内容,点击鼠标右键,选择菜单 添加-〉包容。就会在选中的抓取内容下创建一个子节点,选中的抓取内容就变成了一个子箱子。在子箱子上可以定义样例复制映射规则,那么子箱子就可以抓取回复的回复。
现在有一个难点:
最上级的样例复制,要求选择第一个和第二个样例做映射。万一第一个样例没有回复的回复,那么就没法用第一个样例。
有两个解决方案:
1,如果每条回复对应的DOM节点都有相同的@class值,那么就可以用定位标志映射抓取多样例,而不用样例复制映射。这样的话,用任一条回复的@class做定位标志映射就行了。具体参看:《
定位标志采集列表数据
》
如果方案1不行,那么
2,用含有回复的回复作为样例做内容映射,并且用它作第一个样例做样例复制映射,用下一个回复做第二个样例,存规则。然后查看规则,手工修改规则,点击“保存修改”,就把手工修改保存起来了。
要注意存规则顺序,一定要先“存规则”,然后再修改,再“保存修改”,不能再“存规则”了,否则会把手工修改冲掉
举报
使用道具
回复
支持
反对
bowieD
积分
1226
精华
0
威望
360
金钱
2
最后登录 1970-1-1
加为好友
发送消息
访问家园
个人资料
主题列表
发消息
地板
bowieD
金牌会员
发表于 2018-5-24 09:10:06
|
只看该作者
最好是先找一个第一个回复和第二个回复都有子回复的页面做规则,因为需要用第一个样例和第二个样例做样例复制
整理箱结构如图所示,可以试试这样做
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有帐号?
立即注册
x
举报
使用道具
回复
支持
反对
返回列表
B
Color
Image
Link
Quote
Code
Smilies
高级模式
您需要登录后才可以回帖
登录
|
立即注册
发表回复
回帖并转播
回帖后跳转到最后一页
回复
推荐板块
使用交流
常见问题
数学建模交流
python交流
视频教程
精彩推荐
360或火绒等杀毒软件导致GooSeeker爬虫软件
话题分析(NMF模型和LDA模型)软件的安装和
运行Apple无法验证的程序的方法
文本聚类分析软件的安装和使用方法
利用AI阅读和分析文本:扣子COZE记录用户反
热门话题
1
【集微库】微博采集工具箱使用常见问题
2
怎样使用快捷采集(以采集京东评论为例)
3
集搜客文本分词标注工具(V1版)
4
有没有办法采集机场的出租车信息?
5
获得积分的好方法:转发小程序、QQ群、微信
6
【求助】关于采集阿里巴巴国际站访客详情分
7
GooSeeker分词,情感分析和关键词抽取平台使
8
新浪微博_博主主页
9
怎样采集抖音关键词搜索后的数据
10
集搜客GooSeeker 网络爬虫版本发布公告
热门用户
Fuller
帖子:10610
访问主页>>
wangyong
帖子:1737
访问主页>>
gbkuce
帖子:0
访问主页>>
GMT+8, 2025-5-14 04:31
快速回复
快速发帖
返回顶部
返回列表
共 3 个关于本帖的回复 最后回复于 2018-5-24 09:10