大会直播
点击查看大会现场图文直播
现场图文直播

图文直播

高吞吐数据库架构专题

高吞吐数据库架构专题出品人:金官丁

金官丁

热璞科技CTO

曾在阿里巴巴负责开源分布式数据库架构探索与实践,阿里系第一个专职MySQL DBA,后离开加入风靡全球创业团队开心农场。现创办热璞科技担任CTO一职,负责分布式数据库产品HotDB的产品规划及去IOE解决方案。

 

本专题下其它演讲

古雷

央视国际网络有限公司技术事业群DBA

CNTV资深MySQL专家。曾在搜狐等公司DBA团队工作,积累了丰富的MySQL运维经验。喜欢研究MySQL源码,把研究成果用于日常运维中,并且经常在MySQL的活动中分享出来。

演讲主题 MySQL5.7与8.0新特性管窥最近参加了两次MySQL5.7与8.0新特性交流活动,演讲者都是MySQL研发团队中非常有经验的成员。从中了解到MySQL5.7和8.0 有了非常大的改进,增加了不少有价值的的新特性。本人从中摘取了一些最感兴趣的特性,分享给大家。

听众受益了解MySQL的重大改进,可以逐渐开始尝试,并在合适的时机用于线上产品。

颜世光

百度高级软件架构师

网页搜索基础架构团队负责人. 百度文件系统BFS,核心数据库Tera的主要作者.热衷开源,先后推动了多个重量级系统对外开源。

演讲主题 百度万亿量级数据库的构建与应用搜索引擎每天处理几万亿的超链与网页数据,过去多数工作由MapReduce完成,从一篇网页产生到网民能搜索到有天级延迟。 2014年开始,我们对核心搜索架构进行了大规模重构,设计实现了海量实时数据库Tera,并以此为基础,构建了第三代抓取与索引系统,将网页收录延迟降低到分钟级。 核心数据库Tera存储了全网数万亿的链接与网页信息,支撑了每天近十万亿次的实时查询与更新操作,当前已经在github开源。本次议题 主要介绍Tera的设计思想,以及在实现与生产应用过程中的经验与教训。

听众受益1. 了解超大规模分布式存储系统设计 2. 探讨混合乐观、悲观锁提高分布式事务吞吐的思路。

莫晓东

腾讯-微信支付高级DBA

微信支付高级DBA。拥有丰富的数据架构和运维实战经验,擅长大规模MySQL数据库集群的架构、优化和高可用。2010年起在腾讯从事DBA工作,曾负责过腾讯手机游戏、无线增值的数据库建设,无线数据分析平台建设。目前专注于微信社交支付的存储层运维和架构优化。

演讲主题 微信红包数据库架构演变主题是微信红包的数据架构摸着石头过河的经历。微信红包业务从2014年起访问量便呈现指数级增长,体现了移动互联网时代爆发性传播的疯狂。微信红包幕后的运营开发团队一直和飞涨的用户量赛跑,在系统负荷的临界点之前上线解决方案。成功推动微信红包熬过两次春节大战,成长为本行星疑似最大的订单系统。本次分享为从事技术工作的兄弟们讲解微信红包这个典型互联网业务的后台数据库技术架构演变的过程,微信红包的数据架构从简单到复杂的成长经历以及探索。希望借本次大会和大家交流遇到的问题、拓展数据架构方面的优化思路。

听众受益学习微信红包的发展野史和数据库管理实战经验,为技术同学做数据库方案拓展视野避免走弯路。经验和时间都是最宝贵的东西,了解别人踩过的坑和对坑的思考,希望同学们能有所得。

王义林

京东金融数据库中间件研发高级技术经理

任职于京东金融,负责数据库中间件研发工作,在职期间带领CDS研发团队推出了多项数据库相关产品,包括:CDS分库分表中间件、作业平台、离线数据中心、数据管道平台、分布式事务服务。

演讲主题 分布式数据库CDS-原理与实践
CDS(Completed Database Sharding )是京东金融自主研发的高性能、高可靠分布式数据库。围绕高吞吐数据存取需求,CDS各项特性、产品的演进过程,具体解决的问题。以及在实施过程中的有益实践。

听众受益
分布式数据库如何建模,从单库到多库如何平滑上线。

张冬洪

微博研发中心DBA

redis中国用户组发起人;多年Linux和数据库运维经验,专注于MySQL和nosql架构设计与运维以及自动化平台的开发;目前在微博主要负责Feed系统相关业务的数据库运维和业务保障工作。

演讲主题 微博redis定制化之tribe系统介绍
1. 微博redis的使用介绍;
2. tribe系统设计的考量;
3. tribe系统性能测试对比;
4. tribe系统运维点滴。

听众受益
1. 了解微博海量数据的存储治理与架构设计;
2. 了解微博对于Redis的使用与改进;
3. 了解微博tribe系统的设计思路以及解决的痛点、难点。

谭磊

NABA北美区块链协会联合发起人

《区块链2.0》等七本专业书籍的作者和译者
NABA北美区块链协会联合创始人
杭州数字化产业综合服务中心主任
复旦大学软件学院硕士导师
中国工业设计协会CIO
iTechClub互联网技术精英俱乐部杭州分会会长

演讲主题 分布式数据库和区块链2.0剖析分布式数据库的原理和区块链技术的原理,他们之间的区别,以及如何可以把这两类技术有机结合在一起。

听众受益帮助大致了解区块链技术,如何可以把区块链的理念引入到分布式数据库之上。

马进

网易杭州研究院资深开发工程师

来自网易杭研大数据平台组,入职以来先后参与了分布式数据库DDB,缓存NKV,分布式事务调度器TCC等项目,目前是DDB项目负责人,主导数据库中间件的各种项目研发。专注于分布式系统架构与数据库技术,热衷于构建高效的,高性能的分布式后台应用。

演讲主题 分布式数据库DDB性能优化实践
DDB自06年开始为网易各大互联网应用提供稳定可靠的分库分表服务,是云音乐,考拉,博客等网易知名产品的背后功臣,同类型的系统有阿里TDDL, DRDS,开源系统Mycat等。本次分享会带大家了解DDB在的基本功能,设计哲学和架构变迁,同时,作为杭研十年一剑的分布式中间件系统,DDB积累了大量的性能优化实践,这次选择了一些典型普适的优化案例,帮助大家理解在高并发高吞吐场景下,一些卓而有效的优化思路。最后跟大家聊聊DDB在“轻量云”时代的发展规划。

听众收益
1. 了解DDB的功能,设计思路,基础架构,比较DDB在功能和实现上与其他分库分表系统的异同;
2. 通过DDB的性能优化实践,学习掌握一些典型的系统性能优化思路和方法;
3. 学习DDB的设计哲学和架构变迁,把握当前流行架构趋势,帮助听众们在设计自己系统时少走一些弯路。

李跃森

腾讯云PostgreSQL首席架构师

腾讯云首席PostgreSQL架构师。当前负责微信支付商户系统的数据库系统的建设。快十年的数据库内核从业经验,精通PostgreSQL内核,对内存数据库,磁盘数据库,分析型和事物型数据库内核都有所研究。在数据库内核设计和应用上有丰富的经验。在相关领域拥有多篇核心专利。

演讲主题 微信支付商户系统数据库探秘1,PGXZ 分布式数据库架构介绍 2,PGXZ技术揭秘:pgxz的动态扩容解决方案,业务无感知的动态扩容 3,PGXZ技术揭秘:数据倾斜解决方案,有效应对严重的数据倾斜问题 4,PGXZ技术揭秘:海量数据高速排序算法实现,上亿条数据快速排序输出 5,PGXZ技术揭秘:高效的内置集群分区表,高效处理分区表 6,PGXZ技术揭秘:冷热数据分离,长尾业务数据成本治理 7,PGXZ技术揭秘:数据高可用保证,两地三中心的自动容灾能力。

听众受益通过本研究,听众可以学习一种MPP架构的OLTP数据库解决方案,以及改方案在微信支付系统的中的部署方法。除此之外还对该架构中的几个关键技术进行解析和分享,包括性能提升,数据治理,跨IDC容灾等。