大数据运维技术第10章 Flume组件安装配置课件.pptx

flume与kafka整合高可靠教程

springboot应用程序是一个利用 JdbcTemplate 简单查询的案例. flume 是1.9 的版本,官网可以下载. 安装也简单.

apache-flume-1.9.0-bin.tar.zip apache-flume-1.9.0-bin.tar.zip apache-flume-1.9.0-bin.tar.zip

Kafka的搭建文档 及整合Flume

Flume的安装及使用

日志服务器 Apache Flume.tar

flume采集rabbit数据上传到hdfs

Flume采集Rabbitmq数据同步到HDFS

Flume二次开发，支持抽取MYSQL Oracle数据库数据 以JSON格式推送至Kafka。 demo： sql_json.sources.sql_source.type = com.hbn.rdb.source.SQLSource sql_json.sources.sql_source.connectionurl = jdbc:oracle:thin:@IP:PORT/orcl sql_json.sources.sql_source.driverclass= oracle.jdbc.driver.OracleDriver sql_json.sources.sql_source.filename = sqlSource.status sql_json.sources.sql_source.customquery = SELECT INTID,ID_NO FROM TEST.TEST sql_json.sources.sql_source.begin = 0 sql_json.sources.sql_source.autoincrementfield = INTID