且构网

分享程序员开发的那些事...
且构网 - 分享程序员编程开发的那些事

实时读取本地文件到 HDFS 案例分析 | 学习笔记

更新时间:2022-08-29 18:52:13

开发者学堂课程【数据采集系统 Flume 实时读取本地文件到 HDFS 案例分析】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/99/detail/1631


实时读取本地文件到 HDFS 案例分析


1. 案例需求:

实时监控 Hive 日志,饼上传到 HDFS 中。


2.需求分析


3.实时读取本地文件到 HDFS 案例

(1)创建符合条件的 flum 配置文件

(2)执行配置文件,开启监控

(3)开启 Hive ,生成日志

(4)查看 HDFS 上数据

实时读取本地文件到 HDFS 案例分析 | 学习笔记