往期回顾

第二期实时数据处理技术变迁

  • 时 间
  • 2012-10-20 14:00-16:30
  • 地 点
  • 北京通惠国家广告产业园A座3层万松书院
  • 主持人
  • 朱震杰(澄苍)淘宝技术专家,2008年至今专注于互联网大数据的实时处理与分析,经历了自建实时计算引擎到实时流式计算系统的变迁。目前负责一淘数据部-计算与共享技术团队,支持量子恒道各产品线实时计算功能和阿里内部效果计算平台的开发和维护。

话题

一淘数据实时处理技术变迁

一淘数据部在实时数据处理方面,经历了多次技术变迁,积累了丰富的经验, 先后开发自己的海量数据实时计算引擎、实时流传输框架SM2, 也进行了Storm等开源技术的探索和尝试, 目前部门正在大量使用这些实时处理技术,希望能和大家就实时数据处理方面,进行分享和交流。

嘉宾

张维(民瞻)

2010年加入淘宝,从事一淘数据部数据处理和分析的后台开发, 参与了部门实时数据处理变迁的全过程,在分布式的数据处理系统以及实时分析系统的构建和开发上有过实践经验。 目前主要关注分布式数据分析处理系统的开发,数据库系统应用以及优化。

话题

新一代实时处理系统-Storm

storm是由twitter开发的新一代实时处理引擎,由于它的开放性和稳定性,受到越来越多的人关注,这里给大家分享一下storm的基础以及在一淘数据部的应用。

嘉宾

张彦龙(太奇)

2011年11月加入淘宝,主要从事实时处理相关业务的开发,目前负责一淘数据的接入和整合。

现场速递

沙龙即将开始

民瞻带来《一淘数据实时流处理技术变迁》

太奇同学带来《新一代实时处理系统Storm》

讨论环节,大家就嘉宾提出的问题进行热烈讨论

讨论后,各小组代表积极发言分享

沙龙圆满结束,来张大合影