Alluxio助力AI模型训练加速宝典 3.0（实战篇）.pdf

2024企业信息安全峰会大会以“直面信息安全挑战，创造最佳实践”为主题，聚焦企业信息安全技术与实践等热点话题，致力于推进企业信息安全体系建设，加强企业信息安全管理，助推企业信息安全生态圈的健康发展。

Alluxio助力AI模型训练

加速宝典3.0

实战篇

目录

引言03

背景Alluxio赋能AI场景05

小红书|加速云端机器学习-Alluxio在小红书的实践15

一、面临的挑战15

二、多云数据加速层16

三、小红书实践案例18

四、未来规划29

知乎|AlluxioAI助力知乎千卡模型训练31

一、混合云架构，带来便捷与挑战31

2024企业信息安全峰会大会以“直面信息安全挑战，创造最佳实践”为主题，聚焦企业信息安全技术与实践等热点话题，致力于推进企业信息安全体系建设，加强企业信息安全管理，助推企业信息安全生态圈的健康发展。32

二、知乎的探索历程

三、持续合作，保持探索40

辉羲智能|Alluxio在自动驾驶模型训练中的应用与部署41

一、自动驾驶数据闭环41

二、算法训练：NAS42

三、算法训练引入Alluxio44

四、Alluxio部署：单机房45

五、Alluxio部署：跨机房46

六、Alluxio测试：功能47

七、Alluxio测试：性能48

八、Alluxio落地：调参适配环境49

九、Alluxio落地：运维50

十、Alluxio落地：共同进步51

十一、小结