[00294370]支持海量数据访问的分布式文件系统的架构方法
交易价格:
面议
所属行业:
分析仪器
类型:
发明专利
技术成熟度:
正在研发
专利所属地:中国
专利号:CN201410216506.6
交易方式:
技术转让
技术转让
技术入股
联系人:
华南理工大学
进入空间
所在地:广东广州市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
摘要:本发明公开了一种支持海量数据访问的分布式文件系统的架构方法,该方法基于分布式哈希表,通过对文件路径进行哈希映射获取存取节点。采用完全分布式的无中心化架构设计,新节点通过若干次通信即可加入集群。节点间的寻址采用Kademlia算法,对路由表进行划分并通过异或运算得到节点间的距离以实现最近邻节点的跳转。通过PaxosLease算法选取领导者来处理映射到该节点的操作,以解决一致性问题。文件的实际数据则进行固定大小的分块存储,并冗余备份在若干个节点上,提供安全性以及分布式计算的需求。架构的系统在海量文件处理时能显著地提高处理效率,在较低延迟需求的环境中也可取得较好效果。
摘要:本发明公开了一种支持海量数据访问的分布式文件系统的架构方法,该方法基于分布式哈希表,通过对文件路径进行哈希映射获取存取节点。采用完全分布式的无中心化架构设计,新节点通过若干次通信即可加入集群。节点间的寻址采用Kademlia算法,对路由表进行划分并通过异或运算得到节点间的距离以实现最近邻节点的跳转。通过PaxosLease算法选取领导者来处理映射到该节点的操作,以解决一致性问题。文件的实际数据则进行固定大小的分块存储,并冗余备份在若干个节点上,提供安全性以及分布式计算的需求。架构的系统在海量文件处理时能显著地提高处理效率,在较低延迟需求的环境中也可取得较好效果。