信息化 频道

蒋杰:腾讯海量数据处理平台架构与实践

  【IT168信息化】2012年9月15日消息,为期三天(2012年9月13日~15日)由盛拓传媒旗下的IT168、ChinaUnix、ITPUB联合主办的第四届中国系统架构师大会(以下简称大会)于在北京永泰福朋喜来登酒店隆重召开。来自百度、淘宝、腾讯、IBM、新浪、网易、奇虎360等IT巨头的讲师分享了业界非常先进的技术经验与趋势。

蒋杰:腾讯海量数据处理平台架构与实践
▲腾讯公司数据平台助理总经理蒋杰

  大会现场来自腾讯公司数据平台助理总经理蒋杰,就腾讯海量数据处理平台架构与实践作了主题分享,并与与会的系统架构师们进行了深入的交流与探讨。蒋杰首先从腾讯的总体架构进行了分享,据了解这是腾讯整个架构的平台分享的首场“处女秀”。

  蒋杰指出,海量数据对于并发性要求很强。因为腾讯的业务非常复杂,复杂的业务还有最关键的是主营业务游戏,对腾讯带来的非常大的挑战,为了应对这样的挑战,腾讯用了一个组件来实现。蒋杰同时分享了腾讯支撑海量数据平台三大关键应用。

  第一、数据仓库体系

  腾讯数据仓库体系是一个Hadoop的体系,目前是腾讯数据仓库基于列式的存储,自身有一套存储文件模式来节省成本。

  第一、腾讯数据银行

  第三、实时放算体系

  蒋杰同时也详细的介绍了海量数据的应用实践比如腾讯实时推荐系统特性

  1、海量数据

  目前腾讯有近8亿QQ用户,多产品实时行业数据的综合应用才能体现腾讯统一的QQID跨全产品链的整体优势;

  2、实时计算系统

  从用户实时行业转化为用户即时兴趣,进而实现推荐需要实时计算能力建设;

  3、精准推荐

  实现面向用户个性化特征的精准推荐引擎建设及快速的应用部署能力

  4、用户画像

  除传统用户行业特征信息外,移动互联网领域内的LBS等地理信息应用可行性待研究。

蒋杰:腾讯海量数据处理平台架构与实践
更多信息尽在IT168现场报道。另,您可以微博关注#SACC 2012#了解信息。 

  据了解,蒋杰国内知名的数据专家,现任腾讯公司数据平台助理总经理,负责腾讯数据业务,拥有超过10年以上的从业经验,曾任阿里巴巴集团工作5年,任支付宝BI首席架构师,负责数据平台基础架构和应用架构,在海量计算,分布式架构,流式计算方面积累丰富经验,同时热衷新技术探索,关注组织和团队管理实践,海量数据领域积累了丰富的实践经验。

0
相关文章