面向大数据归档解决方案.docx

面向大数据的归档解决方案 同时为在线和归档数据服务: ? ????? 通过Isilon?系列节点的集群使用，单个Isilon NAS群集可以同时被多种工作负载使用，包括目录、虚拟化文件存储和归档库，而不用担心对性能的影响以及对长期数据保存的特殊处理。除此之外它还有以下关键优势： ??????????提供在线存储级性能的归档服务：对大数据归档，Isilon瞬时访问速度可以扩展到超过每秒100 GB的吞吐量。 ??????????自动管理和自我修复功能：单个Isilon群集可以方便地扩展至超过20 PB的容量。系统的自我管理和分配功能可以监控系统并自我修复系统内的任何故障。 ??????????消除数据迁移风险：当新的存储节点、更新或更有性价比（存储效率）的硬盘被加入到系统中时，可以提供自动迁移功能。它不会有磁带介质退化的问题，使得长期归档服务成为了可能。 ? 高可用和数据保护： ? ????? Isilon??OneFS操作环境通过FlexProtect技术提供横向扩展的数据保护。区别于传统的RAID技术，FlexProtect采用特定于文件的方法来实现数据保护，为每个文件单独存储保护信息。这种独立保护允许将保护数据连同文件数据一起散布在整个群集中，从而在需要时大幅提高数据访问和重建的潜在并行度。在Isilon存储系统中存在节点或驱动器故障时，FlexProtect能够确定文件的哪些部分受故障的影响，并让多个节点仅参与受影响的文件的重新构建。 ????? Isilon?SmartLock技术添加了一个安全层，保护归档数据不会因为意外、提前或恶意的变更而被删除。SmartLock企业版（Enterprise Edition）符合最严格的SEC-17a4法规，它能和Isilon?OneFS操作系统完整结合并无缝地与其它的OneFS应用整合，比如SmartPools自动存储分层、SnapshotIQ和SyncIQ本地和远程数据复制和灾难恢复技术。关于Isilon数据保护方面的内容可以参看论坛之前的文章： ?????? HYPERLINK /docs/DOC-32638 OneFS操作系统软件概述之数据保护（一） ?????? HYPERLINK /docs/DOC-33174 OneFS操作系统软件概述之数据保护（二） ?????? HYPERLINK /docs/DOC-19239 详解Isilon数据保护和备份技术 ? 减少大数据归档的存储成本： ? ????? Isilon横向扩展NAS为非结构化数据提供了最有效的空间使用效率，提供显著的资本和运营支出结余。它提供开放的、标准的NAS和基于RESTful对象接口协议。为您企业内部应用选择合适的归档方案提供了便利。一旦数据从主存储归档，Isilon会使用一系列功能确保归档文件尽可能有效率地存放： ??????????单文件系统和单存储卷的简化使得其存储利率用超过80%。和传统的归档系统不同，Isilon群集的存储效率、可用性和性能会在容量提升时同步提升。 ??????????SmartPools技术提供自动化的、基于策略的分层策略。根据相关性和权值，数据会被放入高性能的存储池或高容量的存储池中。 ??????????简单的、横向扩展的架构可以整合文件数据，减少整个组织内文件的存放位置。从而减少管理成本和归档的操作流程。 OneFS操作系统软件概述之数据保护 电源故障 Isilon存储系统在将数据写入磁盘前，会将数据日志Journal写入NVRAM非易失随机存取存储器中。数据日志Journal用于保存变更信息到文件系统，当Isilon存储系统遭遇电源故障时，通过数据日志Journal中保存的变更信息可以确保系统能够快速的从故障中恢复。如果系统设计未采用Journal机制，那么文件系统将需要检测所有潜在文件系统改变，然后才能将文件系统恢复正常。 OneFS是一个日志文件系统，每个节点都拥有单独电池供电的NVRAM卡。在特殊情况下，NVRAM卡能够完成未提交的写操作。在不充电的情况下，NVRAM卡的电池可以持续使用多日。当一个节点恢复后，系统会检查数据日志Journal。 OneFS操作系统在确保所有未处理的操作已经被记录的情况下，才加载文件系统。如果用户没有遵循正确的关机程序，NVRAM电池没有充电，而且Transactions已经丢失的情况下，节点是不会加载文件系统。 Quorum机制 为了确保集群能够正常运行和数据能够写入，节点必须符合quorum机制。Quorum机制的定义是：当一个集群拥有N个节点，那么在（N÷2）+1个节点在线的情况下客户端才能对集群正常写入数据。例如：一个7节点的群集，必须有4个节点在线才符合quorum机制。如