开源云计算系统简介.pptx
开源云计算系统简介
现有开源云计算系统开源云计算系统对应的商用云计算系统HadoopHDFSGoogleGFSHadoopMapReduceGoogleMapReduceHadoopHBaseGoogleBigtableHadoopZooKeeperGoogleChubbyEucalyptus、NimbusAmazonEC2EucalyptusAmazonS3SectorandSphere无直接对应系统abiquo无直接对应系统MongoDB无直接对应系统
设计背景体系结构主要构件访问接口虚拟组网Eucalyptus
-将程序连接到有用系统的弹性效能计算体系结构ElasticUtilityComputingArchitectureforLinkingYourProgramsToUsefulSystemsEucalyptus:桉树-帮助用户完成对各种基于物理设施的虚拟设备的全局性掌控,完成对整个集群的计算能力进行动态配置。功能:Eucalyptus
-为研究者提供模块化的试验平台-可扩展性、可移植性、方便管理开发目的:设计目标设计原则-Eucalyptus必须能够在不受其设计者操控的软硬件环境中进行部署和执行。-Eucalyptus必须是模块化的,以便不同的研究者进行升级、改造和替换,同时能够实现最大程度的可扩展性。Eucalyptus的设计背景
Eucalyptus的基本架构
体系结构
1-系统的中枢神经,它是用户的可见入口点和做出全局决定的组件。负责处理由用户或系统管理员发出的请求,做出高层的虚拟机实例调度决定云控制器2-负责收集节点的状态信息、调度虚拟机实例执行请求、配置实例网络。运行在集群的头节点或服务器上。集群控制器3-负责管理一个物理节点,运行在虚拟机寄宿的物理资源上,负责启动、检查、关闭和清除虚拟机实例等工作。节点控制器主要构件
-由云控制器通过一个基于Web的接口或通过命令行的方式实现,管理接口只对系统管理员可见,且具有唯一性。管理接口-实质上是Eucalyptus内部系统接口和外部定义的客户端接口之间的转换器。客户端接口-虚拟机控制服务(VmControlService)实例控制接口010203访问接口
特点:简单,易配置协作完成单一任务的虚拟机之间可以通信,而属于不同用户的虚拟机之间应该是通信隔离的。解决方法:-虚拟网络接口:公共接口,私有接口-通信隔离:用虚拟局域网(VLAN)给属于特定用户的实例集打上网络标签虚拟组网
-Nimbus是一个开源的工具集,它可以把集群部署到IaaS云中-基于网格中间件Globus,从最早的VirtualWorkspace演化而来,提供与EC2类似的功能和接口Nimbus:Nimbus
Nimbus基本概念标准客户端(referenceclient):-以命令行的方式访问服务,全面支持WSRF前台的各种特性WSRF(WebServicesResourceFramework):-即Web服务资源框架RMAPI(ResourceManagementAPI):-即资源管理接口工作区(workspace):-实际上就是一个计算节点
Nimbus基本架构
SectorandSphere实现语言:C++Sector:-部署在广域网上的分布式存储系统,它为了使系统有高可靠性和可用性采用自动的文件副本冗余方式-已经用于Sloan数字巡天系统Sphere:-建立在Sector之上的计算服务,它为用户编写分布式密集型数据应用提供了简单的编程接口
Sector的基本架构
01当主服务器接收到Sphere数据处理的客户端请求,主服务器向客户端发送一个可用的从节点列表03客户端与SPE建立UDT连接(数据传输提升至Hadoop的两倍)02客户端选择一些或者所有从节点,让SPE在其上运行04流处理函数被发送给每个SPE,并储存在从节点上SPE打开动态库并获得各种处理函数05Sphere数据处理流程
Sphere数据处理模型
abiquo三部分:abiCloud、abiNtense和abiDataabiCloud --开源云管理软件,可以创建管理资源并且可以按需扩展。该工具能够以快速、简单和可扩展的方式创建和管理大型、复杂的IT基础设施(包括虚拟服务器、网络、应用和存储设备等)。优势:--强大的Web管理界面版本: --社区版、企业版、ISP版
abiCloud的基本架构
目标:-构建一个基于分布式文件存储系统的数据库实现语言:C++平台:LinuxMongoDB
MongoDB的基本架构
MongoDB的优势均衡性
-Hadoop、Eucalyptus、Nimbus、SectorandSphere、abiquo、MongoDB几