【IT168 信息化】
【IT168专稿】首届DTCC 2010数据库技术大会,4月在北京歌华开元大酒店盛大开幕,近700名中国数据库技术专业人士参加了此次技术盛会。
在“数据管理、数据仓库、应用开发”专场中,Sybase中国公司技术总监 卢东明就《列式数据库 + CEP = 数据分析技术的完美结合》作了精彩的主题演讲,分享了与会的数据库爱好者。
据了解,列式数据库是以列相关存储架构进行数据存储的数据库。据了解,数据库发展已经到了一个新阶段,数据库市场需要细分,行式数据库不再满足所有的需求,而有很多需求需要通过 内存数据库和列式数据库解决,列式数据库在数据分析、海量存储、BI这三个领域有自己独到。
Sybase中国公司技术总监 卢东明
据介绍,列式数据库具备以下特性:
多:1 PB 股票交易数据 (6万亿条股票报价)
快:2850亿行/天 (300万行/秒)
杂:非结构化数据: 26 TB/天
小:在IQ里压缩成159 TB
便宜:低端存储,价格成倍下降
而使用sybase的CEP (Complex Event Processing 复杂事件处理)的优势:
Sybase CEP使用CCL编程,“SQL Like”流处理
CCL查询是持续执行
CCL语言支持流处理,例如“窗口”,事件流的关键
数据库SQL查询可以与CCL混用,数据库与事件流信息相互补充。
列式数据库+CEP = 分析系统的完美组合
国内列式数据库用户案例:
电信业:中国移动,中国电信,中国联通,中兴通讯
中国移动:短信/彩信统计分析,报表系统
金融业:交行,浦发,HSBC,商业银行,天平保险,平安保险
中国农业银行:“银行卡统计分析系统”?获得世界IT精英组织(
COMPUTERWORLD HONORS PROGRAM —— 计算机世界荣誉奖励计划,简称CHP)授予“2008年Computerworld荣誉桂冠”
政府:公安部门,海关,东莞市数字城市
能源交通:铁道部,国家电网,中石化加油卡,南方航空,广州地铁
铁道部:客票系统分析
零售物流:丹尼斯百货,百丽