NUMA可感知的分布式并行文件系统元数据管理方法及系统
申请号:CN202510894866
申请日期:2025-06-30
公开号:CN120910012A
公开日期:2025-11-07
类型:发明专利
摘要
本发明公开了一种NUMA可感知的分布式并行文件系统元数据管理方法及系统,方法包括:构建本地元数据视图和全局元数据视图,本地元数据视图用于将元数据按访问模式动态分配到各个结点并在每个结点维护独立的元数据副本,全局元数据视图用于为元数据的跨结点操作提供一致性与持久化支持;采用元数据分区策略,通过元数据分区策略将元数据按访问模式动态分配到各个结点,对于高频访问的目录子树,通过本地优先规则在本地结点完成这些目录子树的目录与文件的创建;对于其他元数据,则通过一致性哈希算法动态分布使得相同目录下的元数据归属同一结点。本发明可以减少跨结点的远程访问开销,提高跨结点访问效率。
技术关键词
分布式并行文件系统
元数据管理方法
结点
热点
分区策略
副本
数据复制
目录
频率
缓存一致性协议
哈希算法
多臂老虎机
日志
数据更新
布隆过滤器
条目
事务提交