利用持久内存提速Spark

点击进入回放

利用持久内存提速Spark

Apache Spark中国技术交流社区

时间

2020/09/10 19:00 - 20:30

人数

300

地点

研讨会直播

514人浏览

会议详情

简介：

主要探讨如何在Spark上使用持久内存这一新技术来进一步提速性能。具体会介绍基于Plasma的共享内存方案来提速SQL数据源访问的性能以及利用持久内存扩展Spark现有内存磁盘存储层级来提速RDD cache在迭代式计算中的效果。

讲师介绍：

纪琨尚，英特尔亚太研发有限公司大数据部门的软件工程师，专注于Spark计算框架上基于Optane PMEM的优化
叶宇强，英特尔亚太研发有限公司大数据部门的资深软件工程师，专注于Spark计算框架上基于Optane PMEM的优化

加速spark0909.png

Apache Spark中国技术交流社区

26 活动

94 文档

6 专题

0 博客