JindoFS FUSE支持

1 .JindoFS Fuse 支持 抚月 19：00开始 

2 .JindoFS 介绍 JindoFS是一种云原生的文件系 统，结合OSS和本地存储，成为 E-MapReduce产品的新一代存储 系统，为上层计算提供了高效 可靠的存储。 JindoFS 提供了块存储模式 （Block）和缓存模式（Cache） 的存储模式。 

3 .JindoFS 介绍 E-MapReduce E-MapReduce 特点 开源 OSS E-MapReduce HDFS OssFileSystem JindoFS 存储空间 海量 海量 取决于集群规模 海量 可靠性 高 高 高 高 吞吐率因素 服务端 集群内磁盘缓存 集群内磁盘 集群内磁盘 元数据效率 慢 中 快 快 扩容操作 容易 容易 容易 容易 缩容操作 容易 容易 需Decommission 容易 数据本地化 无 弱 强 较强 FUSE 支持 支持 支持 支持 

4 .FUSE 介绍 FUSE (Filesystem in Userspace) is an interface for userspace programs to export a filesystem to the Linux kernel. The FUSE project consists of two components: the fuse kernel module (maintained in the regular kernel repositories) and the libfuse userspace library (maintained in this repository). libfuse provides the reference implementation for communicating with the FUSE kernel module. 

5 .FUSE 演示 

6 .FUSE 使用场景 TensorFlow PyTorch Caffe FUSE Kubernetes / Kubeflow / Arena Linux Kernel 裸实例 / ECS OSS S3 HDFS 

7 .FUSE接口 FUSE接口 系统调用 FUSE接口 系统调用 getattr lstat statfs statvfs readlink readlink flush getdir release close mknod mknod fsync fsync mkdir mkdir setxattr setxattr unlink unlink getxattr getxattr rmdir rmdir listxattr listxattr symlink symlink removexattr removexattr rename rename opendir opendir link link readdir readdir chmod chmod releasedir closedir chown chown fsyncdir truncate truncate init utime utime destroy open open access access read pread ftruncate ftruncate write pwrite fgetattr fstat 

8 . HDFS FUSE实现 ./mdfs /tmp/fuse JVM ls –l /tmp/fuse HDFS集群 libfuse DFSClient libc libc userspace Kernel FUSE NFS VFS Ext3 ... 

9 . JindoFS FUSE实现 ./mdfs /tmp/fuse libclient ls –l /tmp/fuse JindoFS集群 libfuse libc libc userspace Kernel FUSE NFS VFS Ext3 ... 

10 .JindoFS FUSE优化 读操作效率不高，每次read最多只能读128KB 频繁访问元数据，元数据性能瓶颈 升级Linux Kernel版本 优化max_idle_threads参数 客户端缓存