GooSeeker

企业竞争情报分析和报告系统是一个复杂的企业IT系统，而且根据不同企业的部署和使用目标，企业竞争情报系统需要数量可观的定制开发功能部件。但是，离不开两大基石：数据采集和数据挖掘。

今天看到一个很有意思的专门为小企业做BI(Business Intelligence，商业智能，商业情报)分析报表的在线服务RJMetrics，很有意思的原因是它的专注，专门做数据分析和图表报告，客户群也很专注。在当前商业智能和竞争情报快速发展和转型的时期，对我们进一步开发和推广SliceProfile企业竞争情报系统很有借鉴价值。

一个朋友突然提起淘宝数据挖掘，并提到数据魔方和情报通两款产品和服务。本人曾经帮一个朋友用通用网站数据采集软件MetaSeeker断断续续采集ebay近一年，知道在国外有个专业的服务领域：ebay mining，很多人在做，也有很多客户需求，所以做起来还是很有意思的。

企业竞争情报系统构成要素

根据《基于数据挖掘的企业竞争情报智能采集模型研究》，企业竞争情报系统定义如下：

消除量纲影响也叫无量纲化，根据《SPSS 聚类分析中数据无量纲化方法比较》，在多元统计分析中，各个指标之间由于计量单位和数量级不尽相同，从而使得各指标间不具有综合性，不能直接进行综合分析，这时就必须采用某种方法对各指标数值进行无量纲化处理，解决各指标数值不可综合性问题。

对微博的关注也有时日了，早期是对twitter的体验，然后就是为锐推的设计师的独到见解所触动，近期进入了务实时期：抓取微博信息建设舆情监控系统和商业情报挖掘系统，偶尔也帮朋友单纯地抓取信息，例如，抓取新浪微博的名人博客并持续跟踪监控，挖掘意见领袖等。但是，一直很少思考微博的商业模式问题。

AJAX网页内容的获得一直是网站采集器头疼的事，同样对搜索引擎的网络爬虫来说一样头疼。用AJAX生成和管理网页内容除了为了达到提高用户体验的目标外，一个重要的目标是保护网站上的内容，防止被搜索引擎索引或者被采集。搜索引擎处之泰然，既然不让搜就不搜，然而网站采集器需要克服这个困难。

阅读了一篇第三届BiZ-WiZ杯华中地区大学生数学建模竞赛的优秀论文，参赛者使用MetaSeeker采集论坛信息，对论坛用户进行识别，识别出言论领袖、话题用户、活跃用户、关系圈等。该文被评为优秀论文，本人作为MetaSeeker的首席设计师，感到由衷的高兴。

互联网的海量信息中潜藏着大量有价值的情报，因为互联网是开放的，这些情报俗称开源情报。互联网本身不是一个企业竞争情报系统，必须采用有效的情报采集和数据挖掘技术方法和软件系统将潜藏的情报筛选出来。

相对于其他社会性媒体，微博虽然很年轻，但是发展十分迅猛，近期接连发生的重大事件，例如华为接班人事件和蒙牛诽谤门事件都是由微博引爆的。因此凡是忽视微博采集和跟踪的网络舆情监测系统都有全面性缺陷。