信息化 频道

卢东明:数据分析技术需要列式数据库

  【IT168 信息化】

  【IT168专稿】首届DTCC 2010数据库技术大会,4月在北京歌华开元大酒店盛大开幕,近700名中国数据库技术专业人士参加了此次技术盛会。

  在“数据管理、数据仓库、应用开发”专场中,Sybase中国公司技术总监 卢东明就《列式数据库 + CEP = 数据分析技术的完美结合》作了精彩的主题演讲,分享了与会的数据库爱好者。

  据了解,列式数据库是以列相关存储架构进行数据存储的数据库。据了解,数据库发展已经到了一个新阶段,数据库市场需要细分,行式数据库不再满足所有的需求,而有很多需求需要通过 内存数据库和列式数据库解决,列式数据库在数据分析、海量存储、BI这三个领域有自己独到。

  Sybase中国公司技术总监 卢东明

  据介绍,列式数据库具备以下特性:

  多:1 PB 股票交易数据 (6万亿条股票报价)

  快:2850亿行/天 (300万行/秒)

  杂:非结构化数据: 26 TB/天

  小:在IQ里压缩成159 TB

  便宜:低端存储,价格成倍下降

  而使用sybase的CEP (Complex Event Processing 复杂事件处理)的优势:

  Sybase CEP使用CCL编程,“SQL Like”流处理

  CCL查询是持续执行

  CCL语言支持流处理,例如“窗口”,事件流的关键

  数据库SQL查询可以与CCL混用,数据库与事件流信息相互补充。 


  列式数据库+CEP = 分析系统的完美组合

  国内列式数据库用户案例:

  电信业:中国移动,中国电信,中国联通,中兴通讯

  中国移动:短信/彩信统计分析,报表系统

  金融业:交行,浦发,HSBC,商业银行,天平保险,平安保险

  中国农业银行:“银行卡统计分析系统”?获得世界IT精英组织(
  COMPUTERWORLD HONORS PROGRAM —— 计算机世界荣誉奖励计划,简称CHP)授予“2008年Computerworld荣誉桂冠”

  政府:公安部门,海关,东莞市数字城市

  能源交通:铁道部,国家电网,中石化加油卡,南方航空,广州地铁

  铁道部:客票系统分析

  零售物流:丹尼斯百货,百丽
 

0
相关文章