基于CDN和P2P的分布式网络存储系统.PDF

第２７卷第２期　　　 计算机应用与软件 Ｖｏｌ２７Ｎｏ．２ ２０１０年２月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｆｅｂ．２０１０ 基于 ＣＤＮ和Ｐ２Ｐ的分布式网络存储系统 马　军　郑　?　殷保群 （中国科学技术大学网络传播系统与控制联合实验室网络传播系统与控制安徽省重点实验室　安徽合肥２３００２７） 摘　要　　把用户的文件分片后均衡存储在不同的分布式存储节点上，并利用虚拟目录服务器和基于Ｐ２ＰＤＨＴ的目录服务器把文 件元数据与文件数据片高效地对应起来，以提供高效目录服务，分布式存储节点以Ｐ２Ｐ方式工作以快速完成用户对文件数据的请 求任务。分布式网络存储系统ＤＮＳＳ充分利用了ＣＤＮ和Ｐ２Ｐ的技术优势，有较高的可用性、可靠性和可扩展性。ＤＮＳＳ已经在中国 科学技术大学应用。 关键词　　分布式存储　Ｐ２Ｐ　虚拟目录　ＤＨＴ ＣＤＮＡＮＤＰ２ＰＢＡＳＥＤＤＩＳＴＲＩＢＵＴＥＤＮＥＴＷＯＲＫＳＴＯＲＡＧＥＳＹＳＴＥＭ ＭａＪｕｎ　ＺｈｅｎｇＱｕａｎ　ＹｉｎＢａｏｑｕｎ （ＪｏｉｎｔＬａｂｏｆＮＣＳＣ，ＫｅｙＬａｂｏｆＡｎｈｕｉＮＣＳＣ，ＵｎｉｖｅｒｓｉｔｙｏｆＳｃｉｅｎｃｅａｎｄＴｅｃｈｎｏｌｏｇｙｏｆＣｈｉｎａ，Ｈｅｆｅｉ２３００２７，Ａｎｈｕｉ，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　Ｔｈｅｕｓｅｒ’ｓｆｉｌｅｉｓｂａｌａｎｃｅｄｓｔｏｒｅｄａｔｄｉｆｆｅｒｅｎｔｄｉｓｔｒｉｂｕｔｅｄｓｔｏｒａｇｅｎｏｄｅｓａｆｔｅｒｂｅｉｎｇｓｐｌｉｔ．Ｆｉｌｅｍｅｔａｄａｔａａｎｄｆｉｌｅｄａｔａｓｌｉｃｅａｒｅ ｍａｔｃｈｅｄｈｉｇｈｅｆｆｉｃｉｅｎｔｌｙｂｙｖｉｒｔｕａｌｄｉｒｅｃｔｏｒｙｓｅｒｖｅｒａｎｄＰ２ＰＤＨＴｂａｓｅｄｄｉｒｅｃｔｏｒｙｓｅｒｖｅｒｉｎｏｒｄｅｒｔｏｐｒｏｖｉｄｅｈｉｇｈｅｆｆｉｃｉｅｎｔｄｉｒｅｃｔｏｒｙｓｅｒｖｉｃｅ． ＤｉｓｔｒｉｂｕｔｅｄｓｔｏｒａｇｅｎｏｄｅｓｃｏｍｐｌｅｔｅｑｕｉｃｋｌｙｂｙｍｅａｎｓｏｆＰ２Ｐｓｙｓｔｅｍｔｈｅｔａｓｋｓｏｆｆｉｌｅｄａｔａｒｅｑｕｅｓｔｅｄｂｙｕｓｅｒｓ．Ｄｉｓｔｒｉｂｕｔｅｄｎｅｔｗｏｒｋｓｔｏｒａｇｅｓｙｓ ｔｅｍ（ＤＮＳＳ）ｔａｋｅｓｆｕｌｌａｄｖａｎｔａｇｅｏｆｔｈｅｔｅｃｈｎｏｌｏｇｙｓｕｐｅｒｉｏｒｉｔｙｏｆＣＤＮａｎｄＰ２Ｐａｎｄｉｓｏｆｈｉｇｈａｖａｉｌａｂｉｌｉｔｙ，ｒｅｌｉａｂｉｌｉｔｙａｎｄｓｃａｌａｂｉｌｉｔｙ．ＤＮＳＳ ｈａｓｂｅｅｎｕｓｅｄｉｎＵｎｉｖｅｒｓｉｔｙｏｆＳｃｉｅｎｃｅａｎｄＴｅｃｈｎｏｌｏｇｙｏｆＣｈｉｎａ． Ｋｅｙｗｏｒｄｓ　　Ｄｉｓｔｒｉｂｕｔｅｄｓｔｏｒａｇｅ　Ｐ２Ｐ　Ｖｉｒｔｕａｌｄｉｒｅｃｔｏｒｙ　ＤＨＴ 管理模块主要负责管理和维护用户的信息；虚拟目录服务模块 ０　引　言 则负责组织和维护文件系统的树形目录结构信息。 ＣＤＮ中心管理层主要负责维护全局文件数据分布信息、 随着网络技术的不断发展、网络带宽的不断提高以及单机 管理服务节点和实现全局负载均衡，包括三大功能模块：节点管 存储容量的不断增大，近年来，分布式网络存储系统的研究和应 理模块（ＭＭ），基于Ｐ２ＰＤＨＴ的目录服务模块（ＤＳ），负载均衡 ［１］ 用已经成为一个热点 ，如已经出现的分布式网络存储系统 模块（ＬＢ）。节点管理模块主要负责管理服务节点的增加、退 ［２］ ［３］ ［４，５］ ［６］ ［７］ ［８］ ＯｃｅａｎＳｔｏｒｅ 、ＣＦＳ 、ＰＡＳＴ 、Ｔａｎｇｌｅｒ 、Ｐａｎｇａｅａ 、Ｇｒａｎａｒｙ 出、删除等；目录服务模块则管理和维护整个系统的每个文件在 等。ＣＤＮ作为一种提高网络内容、节省骨干网络带宽的技术， 各个服务节点的存储信息；负载均衡模块则主要