文档详情

《基于新信息技术的Hadoop大数据技术》课件_项目12 Flume的安装与使用.pptx

发布:2025-02-09约小于1千字共6页下载文档
文本预览下载声明

Flume概述Flume是Cloudera开发的一个分布式的、可靠的、高可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合、移动,最后存储到一个中心化的数据存储系统中。随着互联网的发展,特别是移动互联网的兴起,产生了海量的用户日志信息,为了实时分析和挖掘用户需求,需要使用Flume高效快速采集用户日志,同时对日志进行聚合避免小文件的产生,然后将聚合后的数据通过管道移动到存储系统进行后续的数据分析和挖掘。湖南软件职业技术大学

Flume架构设计湖南软件职业技术大学

Flume架构设计湖南软件职业技术大学

Flume架构设计湖南软件职业技术大学

Flume架构设计湖南软件职业技术大学

Thanks

显示全部
相似文档