想要抓微博主页中的微博单独网址，会抓到转发微博的，怎么做啊

ym 于 2015-9-24 18:20 发表 [复制链接] [只看楼主] [打印] [上一主题] [下一主题]

答：微博的独立网址是包含在发表时间对应节点点击展开的@href节点中，但是转发微博也有这样的节点结构，并且，转发微博的网址是排在前面的，所以，直接内容映射的话，就会采集到转发微博的网址，要针对性地采集微博的单独网址，就要做自定义xpath，点击高级设置，选择自定义xpath，勾选文本内容和兼做定位，把其xpath路径填入框中，保存即可，测试无错就可以

转播

支持

反对

举报使用道具

| 回复

共 0 个关于本帖的回复最后回复于 2015-9-24 18:20

返回列表

精彩推荐

网络爬虫采集列表数据
UMAP的min_dist参数有什么作用？
UMAP的n_neighbors参数有什么作用？
HDBSCAN的min_samples和min_cluster_size参
为什么BERTopic话题缩减后特征词出现大量没

想要抓微博主页中的微博单独网址，会抓到转发微博的，怎么做啊

共 0 个关于本帖的回复最后回复于 2015-9-24 18:20

推荐板块

精彩推荐

热门话题

热门用户

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页

想要抓微博主页中的微博单独网址，会抓到转发微博的，怎么做啊

共 0 个关于本帖的回复 最后回复于 2015-9-24 18:20

推荐板块

精彩推荐

热门话题

热门用户

共 0 个关于本帖的回复最后回复于 2015-9-24 18:20