HDFS 作为 Hadoop 技术栈的底层存储系统,伴随着 Hadoop 技术栈的演进,一直是企业自建大数据存储的首选系统。但随着企业数据量的指数级增长,云计算时代的到来,企业对存储的弹性、运维及 TCO 都提出了更高要求。HDFS 难以继续满足企业的存储需求,云原生架构下企业如何对大数据平台进行改造?
在这次的会议中,我们邀请到理想汽车的大数据团队架构师聂磊为大家分享理想汽车数据平台从Hadoop 到云原生架构的改造实践。
同时,Juicedata 合伙人苏锐,将带来过去两年观察到的行业变化,和大家聊聊云原生架构中的重要一环,存储与计算分离的各类方案的优劣和适用场景。
理想汽车成立于2015年,大数据团队于2018年成立,平台最初主要以 Hadoop 技术栈来搭建;2020 年开始,理想汽车业务发展持续向好,数据平台管理的车辆数据增长极快,这对数据平台的敏捷性和弹性都提出了更高的要求。但由于 Hadoop 是存储和计算耦合的设计,增加存储空间的同时也需要增加计算资源。于是,理想汽车数据平台开始着手进行改造。
在这次的分享中,你将了解 :
- 理想汽车大数据平台存算分离改造实践与探索
- 在替换HDFS 过程中,JuiceFS 在理想汽车有哪些更为深入的应用?
- 数据平台进行存算分离改造时,有哪些可选方案,孰优孰劣?企业应该如何选择?
时间
2022 年7月 23日(本周六)下午 14:00-15:30
活动议题
分享人:聂磊/理想汽车大数据架构师
从事大数据工作 10 年,架构工作 6 年,对主流大数据技术有深入的理解;目前主要在推进大数据云原生和湖仓一体技术方案在理想汽车的落地。
Topic 1:理想汽车大数据云原生的演进与思考
- 大数据技术的发展和现状;
- 大数据云原生的好处与难点;
- JuiceFS 在理想汽车大数据云原生方案落地的探索。
分享人:苏锐/Juicedata 合伙人
Juicedata 合伙人,作为 1 号成员参与创建 JuiceFS,历任互联网 O2O 汽车服务品牌功夫洗车创始人 & CEO,豆瓣电影 PM & Tech Lead。
Topic 2:大数据平台存算分离的选择与方案
- Hadoop 存储计算耦合架构的设计原因与挑战
- 为什么要做存储计算分离,需要什么基础条件?
- 存储计算分离架构的几种方案比较
现场问答 & 互动
欢迎大家 7 月 23 日下午 14:00 准时参与 JuiceFS Meetup ,我们不见不散!
欢迎加入交流群: