FastCFS V4.0发布,支持单机PB级存储

    经过整整4个月的潜心研发,FastCFS V4.0终于与大家见面了。V4.0主要改进:faststore引入存储插件,存储节点以有限内存(如32GB)支持上百TB的存储空间。如果单机要支持PB级的存储空间,出于性价比考虑,建议存储节点至少配置128GB内存。另外V4.0 对faststore的存储层进行了重构,直接使用底层库 libdiskallocator,这样的做好处是保持一套代码,更容易维护,同时减少出bug的几率。

    faststore存储插件以block(4MB的文件块)为单位进行持久化存储,存储该block对应的slice索引;当内存不足时按block进行淘汰。faststore使用slice binlog + block索引持久化的做法,block索引持久化采用的是异步方式。总结一下faststore是否使用存储插件的差异:未使用存储插件只有slice binlog;使用存储插件是slice binlog + 按block组织的slice索引。

V4.0其他小改进

  [fdir] add protocols get_fullname_by_[inode|pname] for fdir_stat(便于调试文件访问权限问题)

  [fuseclient] support mount option ro (read-only)(mount的文件系统支持只读模式)

  [fstore] file block size use config instead of macro define(默认为4MB的文件block大小支持配置方式)

V4.0修复的bug列表

  [fdir] bugfixed: correct idempotency output when storage engine enabled

  [fdir] bugfixed: rename_check with flags S_ISVTX when dest dentry exist

  [fstore] bugfixed: must call slice_binlog_set_binlog_start_index(0)

  [libfastcommon] bugfixed: fast_mblock_batch_alloc correct return value

  [libdiskallocator] trunk_space_log.c: fix redo logic of keep record

    我们租用阿里云本地SSD的ECS对V4.0的数据一致性、系统稳定性以及性能进行了充分测试,欢迎大家体验和试用。建议使用旧版本的用户,尽快升级到最新版本。

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容