集搜客GooSeeker网络爬虫

标题: 求助:智联招聘职位搜索列表,连续翻页爬虫被中断 [打印本页]

作者: abc6699    时间: 2018-2-1 11:50
标题: 求助:智联招聘职位搜索列表,连续翻页爬虫被中断
本帖最后由 wangyong 于 2021-5-28 15:26 编辑

自己做的采集规则翻页总是中断,有没有更简便的方法可以采集智联招聘的数据?




作者: wangyong    时间: 2021-5-28 15:23
本帖最后由 wangyong 于 2021-5-28 15:26 编辑

集搜客数据管家中可以直接输入网址来采集智联招聘,步骤如下:1,安装数据管家进入快捷采集,选择智联招聘_岗位关键词搜索列表
[attach]14296[/attach]
添加要采集的链接,例如:https://sou.zhaopin.com/?jl=2393 ... %BC%80%E5%8F%91&p=1
选择要采集的页数点击“获取数据”
2,在快捷采集后台中看到任务状态变为“已采集”后,点击打包按钮下载Excel数据
[attach]14297[/attach]
3,Excel数据:
[attach]14299[/attach]
4,如果要继续采集下级详情页面内容,可以把Excel中采集到的详情页链接添加到智联招聘_岗位详情信息[attach]14300[/attach]









欢迎光临 集搜客GooSeeker网络爬虫 (https://www.gooseeker.com/doc/) Powered by Discuz! X3.2