罗 李

阿里数据平台事业部海量数据技术专家

阿里集团云梯Hadoop集群经过了5年的上线运行，已经达到前所未有的规模。随着阿里集团业务量的急剧上涨，数据量也随之急剧的膨胀，从而导致云梯Hadoop集群规模日益膨胀。数据中心机房的机架位已经逐渐接近物理极限，集群的存储容量无法继续扩充，在此背景下，云梯跨机房项目应运而生，经过半年的集中开发和测试，在2013年9月成功上线运行。目前云梯集群已经成功实现单集群多NameNode，突破物理机房数量的限制实现跨机房数据分布和共享，集群规模已达万台。目前的云梯Hadoop版本，已经没有可预见的上限规模。本演讲将为大家分享整个云梯跨机房项目遇到的各种艰难险阻，以及云梯是怎么一步一步跨越，上线后遇到了哪些问题。

阿里数据平台事业部海量数据技术专家

构建一个跨机房的Hadoop 集群 罗李，淘宝花名：鬼厉。阿里集团分布式团队创建之初的第一批员工，目前在阿里集团数据平台事业部海量数据团队负责分布式存 储团队的所有技术和团队工作。毕业于北京理工大学，毕业后即加入阿里巴巴分布式计算团队，从事分布式计算、分布式存储和 Hadoop系统的研究和开发。先后在阿里巴巴搜索技术中心、阿里集团研发院、阿里云、淘宝数据团队等多个部门服务。主要负责阿 里集团分布式系统，Hadoop系统等版本的开发、测试、性能瓶颈分析、性能优化、集群管理、集群维护和监控、应用团队分布式技 术支持，公司内部培训和Hadoop技术在阿里集团内的推广等工作。