知识工程:"大数据"环境的企业基因工程

2013年11月11日 来源： 国际在线

　“大数据时代”无疑是目前最为流行的词语之一，一大堆关于大数据的科普和专业的书如雨后春笋一般涌现出来，你无法拒绝它的诱惑，总想弄清楚它到底在说什么，总在担心大数据会把我们带到什么样的一个不可预知的未来。然而，大数据只描述了数据的规模大，是一种对现在信息爆炸时代的表象认识，并没有深入到信息时代发展的本质层面，因此，大家都在等待一个新的时代的出现。

　　这个时代就是在DIKW（Data-Information-Knowledge-Wisdom）概念中界定的K的时代，知识的时代。知识正是大数据之“大”背后的那个“小”。比如第谷测了一辈子的行星运动轨迹，记录的数据汗牛塞屋，后来他的学生开普勒又花了将近一辈子的时间整理出了三大定律，这个大数据终于变得小了一点，到了牛顿时代，一个简单的平方反比的万有引力定律，就把所有一屋的大数据的内容全说透了。

　　虽然知识的概念出现很早，但到底什么是知识呢？在科学上要清晰的定义非常难，现在也做不到。但其中有一种解释，我很赞同，即知识是信息之间的关联。关联代表着新物质和新性质的产生，而不是静态的两个物体机械地摆在一起。比如H原子和O原子关联在一起，产生的不是2个原子物理上挨得很近这么简单，而是产生了一种叫H2O的新物质，它拥有它的母体、它的前辈所没有的液态流动的性质，因为有了这个物质，孕育了所有的生命，造就了地球这个生机盎然的大千世界。

　　在知识挖掘中常举的啤酒和尿布的例子，讲的就是通过关联获得知识的例子。啤酒与尿布”的故事产生于20世纪90年代的美国沃尔玛超市中，沃尔玛的超市管理人员分析销售数据时发现了一个令人难于理解的现象：在某些特定的情况下，“啤酒”与“尿布”两件看上去毫无关系的商品会经常出现在同一个购物篮中，这种独特的销售现象引起了管理人员的注意，经过后续调查发现，这种现象出现在年轻的父亲身上。在美国有婴儿的家庭中，一般是母亲在家中照看婴儿，年轻的父亲前去超市购买尿布。父亲在购买尿布的同时，往往会顺便为自己购买啤酒，这样就会出现啤酒与尿布这两件看上去不相干的商品经常会出现在同一个购物篮的现象。沃尔玛发现了这一独特的现象，开始在卖场尝试将啤酒与尿布摆放在相同的区域，让年轻的父亲可以同时找到这两件商品，并很快地完成购物，这就是“啤酒与尿布”故事的由来。

　　啤酒和尿布放在一起，代表了一种精巧的知识结构，是一种高级的人类智力活动的结果。发现关联就是发现知识，就是发现新物质、发现新性质，就是发现新的运营模式，就是发现人们未知的新世界，随着关联规模和深度的增加，也就扩大了人类认识世界和认识自己的能力，从而也就扩展了人类的生存能力和把握未来的能力。

　　大数据的根本目标就是要像挖掘万有引力定律一样，挖掘数据背后的规律，让数据由大变小，从而为我所用，创造出更多的经济、社会和科学价值。因此，我们认为知识时代才是抓住时代发展本质的描述，而所有技术层面的新生事物，都是实现这个时代目标的物质和技术基础，比如搜索技术是信息时代的技术基础，网络是信息时代的物质基础。在新的知识时代，大数据和相应的挖掘技术是技术基础，而数据仓库和高速网络、智能终端等是物质基础。知识工程是实现知识挖掘的系统工程，是突破人类认识能力的局限，从“大数据时代”走向“知识时代”的基础之一。

　　知识工程，企业基因工程

　　所谓知识工程，本质上就是建立企业的基因工程，即构建企业“天生的”学习和适应能力。