大数据平台架构设计方案.pptx
文本预览下载声明
大数据平台架构设计方案;CATALOGUE;01;结构化数据;数据量评估(日增量/存储需求/并发请求);处理方式选择(实时处理/批处理/流计算);02;分布式、可靠、高可用的海量日志采集、聚合和传输的系统,支持定制数据源,具备实时性、可扩展性、易用性。;数据存储层(HDFS/NoSQL/关系型数据库);;03;数据接入管理(ETL/数据复制/Web服务);数据加工管理(清洗/稽核/转换);数据共享管理(API接口/权限控制/审计);04;架构选型(Lambda/Kappa/数据湖架构);;弹性伸缩;05;实时化处理技术演进;机器学习算法;;区块链技术在数据治理中的应用;THANKS
显示全部