登录
微信搜索superit|邀请体验：大数据, 数据管理、OLAP分析与可视化平台 | 赞助作者：赞助作者

 分类：Flume

Flume构建日志采集系统

Flume构建日志采集系统
Flume构建日志采集系统 溯水心生 关注  0.2 2018.02.05 21:04 字数 3755 阅读 4169评论 2喜欢 10 title: Flume构建日志采集系统 date: 2018-02-03 19:45 tags: [flume,kafka]...

1年前 (2019-05-09) 26℃

Flume 各种坑

Flume 各种坑
Flume 各种坑 2018年01月04日 17:22:49 qiaqia609 阅读数：34261  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/qiaqia609/article/details/78...

1年前 (2019-05-09) 28℃

Flume构建日志采集系统

Flume构建日志采集系统 溯水心生 关注  0.2 2018.02.05 21:04 字数 3755 阅读 4169评论 2喜欢 10 title: Flume构建日志采集系统 date: 2018-02-03 19:45 tags: [flume,kafka] ...

1年前 (2019-05-09) 22℃

Kafka实战－Flume到Kafka

Kafka实战－Flume到Kafka
1.概述 前面给大家介绍了整个Kafka项目的开发流程，今天给大家分享Kafka如何获取数据源，即Kafka生产数据。下面是今天要分享的目录： 数据来源 Flume到Kafka 数据源加载 预览 下面开始今天的分享内容。 2.数据来源 Kafka生产的数据，是由Flume的...

2年前 (2019-05-05) 24℃

Flume NG高可用集群搭建

Flume NG高可用集群搭建
Flume NG高可用集群搭建 2018年09月10日 23:15:44 jinYwuM 阅读数：145 软件版本： CentOS 6.7 hadoop-2.7.4 apache-flume-1.6.0 一、Flume NG简述 Flume 是 Cl...

2年前 (2019-05-05) 28℃

flume的配置详解

Flume： ===================== Flume是一种分布式的、可靠的、可用的服务，可以有效地收集、聚合和移动大量的日志数据。 它有一个基于流数据的简单而灵活的体系结构。 它具有健壮性和容错能力，具有可调的可靠性机制和许多故障转移和恢复机制。 它使用一个简单的...

2年前 (2019-05-03) 22℃

Flume实战之Taildir

Flume实战之Taildir
Flume实战之Taildir 2019年01月22日 13:38:00 weixin_33675507 阅读数：72 1、背景 将data路径下所有日志文件通过Flume采集到HDFS上 五分钟一个目录，一分钟形成一个文件 2、技术选型 flume...

2年前 (2019-05-01) 36℃

Flume内置channel,source,sink三组件介绍

Flume内置channel,source,sink三组件介绍
导读： 1.什么是channel？ 2.什么是source？ 3.什么是sink？ 4.直接读取文件Source,有哪两种方式？ 5.Channel有几种方式？ 6.Sink在设置存储数据时，数据较多，较少的情况下，该如何处理？ 看了一下Flume中央日志系统（版本号：1.3....

2年前 (2019-05-01) 30℃

flume-ng命令

flume-ng命令
flume-ng命令 2018年05月31日 10:20:14 Jay7925417 阅读数：982 flume-ng命令帮助： [root@hadoop01 apache-flume-1.6.0-bin]# ./bin/flume-ng help Usa...

2年前 (2019-05-01) 30℃

Flume 日志收集、使用Flume收集日志到HDFS

Flume 日志收集、使用Flume收集日志到HDFS
Flume 日志收集、使用Flume收集日志到HDFS 2017年12月02日 18:29:36 土豆拍死马铃薯 阅读数：2431 标签： Flume日志TomcatHDFS收集 更多 个人分类： 大数据  版权声明：本文为博主原创文章，未经博主允许不得...

2年前 (2019-05-01) 27℃

Flume的hdfsSink的roll参数不生效的原因（日志上传hdfs）

Flume的hdfsSink的roll参数不生效的原因（日志上传hdfs） 2017年11月30日 15:51:25 lsr40 阅读数：4768 首先，本人菜鸡一个，只是分享点东西出来，怕自己忘了，也给各位大佬填填坑当当垫背的！ 事情是这样的： 测试： ...

2年前 (2019-04-30) 21℃

Flume Taildir Source监听实时追加内容的文件

Flume Taildir Source监听实时追加内容的文件 2018年05月27日 21:38:49 wangpei1949 阅读数：2915  版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wangp...

2年前 (2019-04-30) 36℃

flume采集到HDFS

一、flume采集到HDFS 1、flume安装准备 jdk1.8安装： https://www.cnblogs.com/zeze/p/5902124.html java -version 2、flume安装 下载 wget http://mirrors.tuna.tsing...

2年前 (2019-04-30) 20℃

Flume中的HDFS Sink配置参数说明

Flume中的HDFS Sink配置参数说明  Flume  lxw1234@qq.com  4年前 (2015-10-16)  27624℃  1评论 关键字：flume、hdfs、sink、配置参数 Flume中的HDFS Sink应该是非常常用的，其中的配置参数也比较多...

2年前 (2019-04-30) 17℃

flume 启动，停止，重启脚本

flume 启动，停止，重启脚本   #!/bin/bash #echo "begin start flume..." #flume的安装根目录（根据自己情况，修改为自己的安装目录） path=/sysware/apache-flume-1.8.0-bin ...

2年前 (2019-04-30) 18℃

Flume + kafka + HDFS构建日志采集系统

Flume + kafka + HDFS构建日志采集系统 2016年11月25日 22:13:56 iteye_19607 阅读数：741更多 个人分类： 架构 https://blog.csdn.net/iteye_19607/article/details/82...

2年前 (2019-04-30) 19℃

Flume采集到HDFS

Flume采集到HDFS 原创 Hadoop 作者：13545163656 时间：2018-08-09 22:30:02  544  0 一、需求： 采集指定文件的内容到HDFS 技术选型：exec – memory – hdfs 1 2 ...

2年前 (2019-04-29) 20℃

centos7搭建EFK日志分析系统

centos7搭建EFK日志分析系统 96 Raye 0.2 2018.09.17 09:35 字数 1901 阅读 3658评论 0喜欢 15 前言 EFK可能都不熟悉，实际上EFK是大名鼎鼎的日志系统ELK的一个变种 在没有分布式日志的时候，每次出问题了需要查询日志的时候...

2年前 (2019-04-03) 22℃