Flume + kafka + log4j构建日志采集系统,附实例及文档。
2021-08-31 10:24:38 1.89MB Flume kafk
1
学习kafka相关概念以及使用方法,kafka相关运行原理和执行流程,结合javaAPI,拦截器的相关实现,flume整合kafka等等
2021-08-17 11:23:30 2.37MB kafka flume zookeeper java
1
flume /kafka 与spark streaming 结合
2021-07-07 10:05:26 8.92MB flume kafka
1
兼容神策开源埋点SDK,采用Nginx+Flume+kafka实现日志收集。包括nginx环境配置、Flume解密和日志格式处理、将明文数据存放到kafka的Topic下、Flink写入HDFS。
2021-06-13 09:06:38 41KB flink flume kafka 用户行为分析
自己整理的Hadoop环境的一些安装,和一些简单的使用,其中包括Hadoop、hbase、hive、mysql、zookeeper、Kafka、flume。都是一些简单的安装步骤和使用,只在自己的虚拟机(Linux centOS7)上使用测试过。按照步骤一步一步来,安装就没有问题。
2021-05-10 13:07:58 8KB hadoop 大数据
1
大数据面试,flume、kafka、hbase、spark、hive、flink等常用大数据组件面试题,刷题不容错过的利器
2021-04-21 09:07:13 600KB 大数据面试 kafka flume hbase
基于flume+kafka+实时计算引擎(storm,spark,flink)的实时计算框架目前是比较火的一个分支,在实时数据采集组件中flume扮演着极为重要角色,logtash是ELK的重要组件部分,filebeat也是一个实时采集工具;
2021-04-14 15:13:12 42KB flume logsta filebe kafka
1
本文档讲述了集群的搭建步骤,flume的安装及配置,kafka集群配置,flink集群配置、hbase的安装、opentsdb数据库的安装以及各个组件的连接运行可视化
2021-03-09 14:07:57 2.62MB kafka flink flume Grafana
1
讲述如何采用最简单的kafka+flume的方式,实时的去读取oracle中的重做日志+归档日志的信息,从而达到日志文件数据实时写入到hdfs中,然后将hdfs中的数据结构化到hive中。
2021-03-02 21:15:26 837KB hadoop kafka flume oracle
1
apache-flume-1.9.0-bin.tar,kafka_2.11-0.10.1.0,zookeeper-3.3.6_.tar 压缩 到了一个logs.rar文件中,需要的请下载
2021-01-28 04:31:40 108.69MB kafka zk flume
1