高性能容器批量计算解决方案.pdf

高性能容器批量计算解决方案 容器使能批量计算 高效释放多元算力 基因、AI、大数据领域面临的挑战 数据量 计算过程 算力资源 系统运维 越来越大 越来越耗时 昂贵难获取 复杂度高 3 Huawei Confidential 容器成为基因测序、 AI、大数据行业的下一代技术新选择 自动化 标准化 易扩展 训练加速 复杂度低 高利用率 高性价比 高并发满足激增的计算量 实现多计算框架统一管理 打通不同集群，提升利用率 屏蔽环境依赖，降低运维复杂度 调度优化提升训练速度 丰富的生态和社区支持 高性能容器批量计算解决方案：释放多元算力 更高性能 更快调度 生态兼容 50%性能提升 10倍调度效率提升 兼容主流平台 基因容器 AI容器 大数据容器 MindSpore 高性能容器批量计算平台 Volcano 鲲鹏Kubernetes容器 鲲鹏Serverless容器 通用算力 AI算力 X86 传统算力 异构算力 5 Huawei Confidential 基因容器：轻松应对海量测序数据的分析和挖掘 第三代基因测序的优选平台 加速基因数据全流程计算 数据 基因转换 基因 基因 数据 结果 高效测序 高性价比 收集 与拼接 比对 注释 挖掘 归档 WGS 30X速度提升10倍 降低客户分析成本 支持10万容器规模 按需按秒计费 Cromwell SGE PBS Slurm 高并发运行测序流程 CPU/ 内存根据业务灵活配比 基因容器 GCS 免运维 一站式 大幅降低客户运维成本 一站式数据分析和挖掘 集群自动化扩缩容 支持Cromwell、SGE、PBS、 分析流程自动触发和执行 Slurm等第三方工具集成 EVS CCI SFS/SFS Turbo OBS 基于Cromwell的全球领先基因数据分析平台 减少管理运维人力成本、最大限度降低资源冗余造成的浪费，节约成本 6 Huawei Confidential 未来组：实现测序分析流程全自动化部署 客户 3分钟