采集搜索引擎结果网页用于SEO

网页采集器MetaSeeker能够快速大量并且准确地采集网络信息,为市场调研分析或者企业竞争情报分析提供素材,从而清晰地勾勒出在互联网上的竞争地位。今天读到一篇文章《How to Scrape a Search Engine Results Page for Your SEO Project》,讲解怎样为SEO项目采集搜索引擎的结果网页,实际上也属于相同的竞争分析范畴:研究分析SEO目标在搜索引擎上的竞争地位。例如,为了得出竞争优势结论,需要做下面的工作:

  • 采集搜索引擎的搜索结果网页
    • 操作方法:遴选出一组领域关键字,在搜索引擎上用这些关键字做搜索,用MetaSeeker将搜索结果采集下来。
    • 要达到的目的,即要解答以下问题:
      • 目标网站在这些关键字上的排名怎样?
      • 竞争对手有哪些?
      • 文章标题多有吸引力?
  • 采集某个特定网站被索引的网页
    • 操作方法:进行搜索时限定搜索范围,例如,采用搜索条件 site:www.foo.com,可以将这个网站的所有网页采集下来
    • 要达到的目的
      • 哪些网页被索引了
      • 被索引的网页的数量
      • 是否存在重复内容网页
      • 使用了什么关键字

采集结果可以导入EXCEL或者数据库中,以便进行分析和报表。如果不采用自动化网页采集器,手工采集的数量有限,不容易得到全面和客观的竞争地图。