云计算是大数据的“内燃机”
数据早已有之,但一直以来是信息化的“副产品”,非战略性资源,直到云计算的发明。云计算让大数据应用平民化,在大数据应用在经济上变得可行。云计算之于大数据,就像内燃机之于石油。如果不是基于云计算的数据处理,数据再大也不是大数据,只是“数据大”。
20世纪,因为内燃机的发明,石油上位成了战略资源。从在战争中偶尔使用石油,发展到了为了石油而战争。内燃机之于石油,就像WWW之于TCP/IP、App Store之于智能手机、大数据之于云计算一样,都是后者的“Killer App”。
上世纪70年代初,计算机的发展应用产生的“大数据”(相对那个年代的人,那个年代的工具)需要管理,于是数据库管理技术诞生,业界开始了专业化开采数据资源的工作。当然早期的数据管理工具比较“原始”(相对现在),只擅长对付 “结构化”的数据资源。
资源的价值大小,很多时候取决于开采工具的经济性。人们希望找到更先进的工具,能够管理更复杂的数据类型,从数据中提炼出更多的应用价值,就像历史上内燃机曾经把石油的用途从照明扩展到动力世界那样。
2006年前后,业界领先的企业发明了一种叫云计算的新工具,不仅可以开采新型的数据资源(非结构化数据),而且还发掘出了一些重要的新用途(如精准营销、趋势预测等)。最重要的,这种工具的成本还很低。于是业界都梦想着,用云计算这个新工具,也去淘大数据的金。
全球云计算已发展到了理性务实的落地阶段,而大数据还处于炒作阶段。大数据技术还不成熟,技术解决方案还以定制为主,通用型解决方案尚不多见。大数据源还以内部和结构化为主,未发展到内外结合、结构化与非结构化结合的阶段。
从应用看,当前的大数据应用以渐进改善型业务为主,以程序化营销和个人大数据应用最为成功,其他“革命型”应用尚不多见。大数据应用在全球的发展,已形成了“互联网公司领导、开源社区扩散和ICT制造商产品化”的三阶段或三层次现象。