会议详情
豆瓣成立于2005年,是中国最早的社交网站之一。在 2009 到 2019 的十年间,豆瓣数据平台经历了几轮变迁,形成了 DPark + Mesos + MooseFS 的架构。
由机房全面上云的过程中,原有这套架构并不能很好的利用云的特性,豆瓣需要做一次全面的重新选型,既要考虑未来十年的发展趋势,也需要找到与现有组件兼容且平滑过渡的解决方案。一番改造后, 豆瓣数据平台目前形成了 Spark + Kubernetes + JuiceFS 的云上数据湖架构。
JuiceFS 作为统一存储平台,接入了多项在线、离线业务,在升级过程中数据处理的一致性、实时性、稳定性也都得到了显著提升。
- 豆瓣数据平台在更替组件时,有哪些考量?
- 在 JuiceFS 统一存储平台上,豆瓣接入的场景有哪些?各有什么挑战?
在这期活动中,你将了解到豆瓣对于改造存储平台的思考与实践。同时,我们还将为大家介绍JuiceFS 企业版,想了解企业版和社区版有哪些相同和差异之处,不要错过本周六 Meetup。
时间
2023 年4月22日(本周六)下午 14:00-15:15
议程
14:00-14:05 4月社区动态
14:05-14:35 Talk1: 如何基于JuiceFS 搭建统一的存储平台
曹丰宇,参与了豆瓣上云和数据平台切换的过程,目前负责豆瓣数据平台的功能开发和维护。
演讲概要:
- 豆瓣旧的数据平台架构简介
- 面临的问题以及平台演进
- 云上构建数据平台架构
- JuiceFS 的应用场景
- 共享文件系统、日志、数据湖、流计算 checkpoint、归档备份、算法
- 未来展望
14:35-15:05 Talk2: JuiceFS 企业版全面解析
高昌健,Juicedata 技术专家,参与建设 JuiceFS 开源社区的主力队员。十年互联网行业从业经历,曾在知乎、即刻、小红书多个团队担任架构师职位,专注于分布式系统、大数据、AI 领域的技术研究。
演讲概要:
- 企业版发展历程
- 企业版和社区版的定位差异
- 企业版核心特性介绍
- 企业版未来规划
欢迎进群
确认
3秒后跳转登录页面
去登陆