活动介绍
4 月 14 日(周四)19:00,将线上播出《深入浅出 OceanBase 第二期》,将深入解析优化器及 Flink CDC + OceanBase 全增量一体化数据集成方案,欢迎大家提前关注。
议题:优化器及 Flink CDC + OceanBase 全增量一体化数据集成方案
时间:4月14日(周四)19:00-20:40
19:00-19:40 OceanBase 查询优化器
讲师:王国平(花名:溪峰)
19:40-20:20 Flink CDC + OceanBase 全增量一体化数据集成方案
讲师:王赫(花名:川粉)
20:20-20:40 QA
扫描海报二维码,进群预约直播
Topic 1 :OceanBase 查询优化器
讲师:王国平(花名:溪峰)OceanBase 高级技术专家,OceanBase 查询优化器负责人。简介:查询优化器是关系数据库系统的核心模块,是数据库内核开发的重点和难点,也是衡量整个数据库系统成熟度的“试金石”。查询优化理论诞生距今已有四十来年,学术界和工业界其实已经形成了一套比较完善的查询优化框架(System-R的Bottom-up动态规划优化框架和Volcano/Cascade的Top-down动态规划优化框架),但围绕查询优化的核心难题始终没变——如何利用有限的系统资源尽可能为查询选择一个“好”的执行计划。
本次分享将会跟大家介绍 OceanBase 查询优化器的工程实现以及我们对成熟优化器的一些思考。1、查询优化器简介2、查询改写3、查询优化4、统计信息和代价模型5、计划管理(SPM)6、对成熟优化器的思考
Topic 2 : Flink CDC + OceanBase 全增量一体化数据集成方案
讲师:王赫(花名:川粉)OceanBase 技术专家。简介:Flink CDC Connectors 是 Apache Flink 的一组数据源连接器,用户可以使用 Flink CDC 对不同的数据源进行全增量一体化的读取,并借助 Flink SQL 进行流批一体的 ETL 处理。目前在最新发布的 Flink CDC Connectors 2.2 中已经实现了对 OceanBase 社区版的支持。
本次分享将从以下三部分带来 Flink CDC + OceanBase 全增量一体化数据集成方案:1、传统的 CDC 和 ETL
CDC:DataX + Canal
ETL:CDC + KafKa + Flink
2、 Flink CDC + OceanBase
Flink 的动态表 https://nightlies.apache.org/flink/flink-docs-master/zh/docs/dev/table/concepts/dynamic_tables/
Flink CDC 的架构
Flink CDC OceanBase Connector 的优点和不足
3、Flink CDC OceanBase Connector 的使用
Flink CDC OceanBase Connector 的实现原理
典型的应用场景(数据同步、OB + MySQL表聚合等)
动手实践