文档章节

CentOS安装Flume

王孟君
 王孟君
发布于 2017/01/22 16:39
字数 339
阅读 127
收藏 2

Flume最早是Cloudera提供的日志收集系统,目前是Apache下的一个孵化项目,Flume支持在日志系统中定制各类数据发送方,用于收集数据。

本文记录一下在CentOS 6.7上,安装flume的步骤,为后期日志收集做准备 :)

下载安装包

本文使用flume-1.7.0, 使用wget获取flume安装包。

[root@dev18 flume]# wget http://ftp.wayne.edu/apache/flume/1.7.0/apache-flume-1.7.0-bin.tar.gz 
--2017-01-22 15:59:53--  http://ftp.wayne.edu/apache/flume/1.7.0/apache-flume-1.7.0-bin.tar.gz
Resolving ftp.wayne.edu... 141.217.0.199
Connecting to ftp.wayne.edu|141.217.0.199|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 55711670 (53M) [application/x-gzip]
Saving to: “apache-flume-1.7.0-bin.tar.gz”

100%[====================================================================================================================================================================================================================================>] 55,711,670  91.1K/s   in 9m 5s   

2017-01-22 16:08:59 (99.8 KB/s) - “apache-flume-1.7.0-bin.tar.gz” saved [55711670/55711670]

[root@dev18 flume]# 

解压缩

使用tar -zvxf apache-flume-1.7.0-bin.tar.gz 解压缩安装包

[root@dev18 flume]# tar -zvxf apache-flume-1.7.0-bin.tar.gz 

配置环境变量

使用vim /etc/proflile命令,打开profile文件,

[root@dev18 flume]# vim /etc/proflile

然后添加FLUME_NAME和FLUME_CONF_DIR变量,如

export FLUME_HOME=/srv/flume/flume
export FLUME_CONF_DIR=$FLUME_HOME/conf
PATH=$FLUME_HOME/bin:$PATH
export PATH

执行 source /etc/profile命令使变量生效

[root@dev18 flume]# source /etc/profile

验证安装

可以使用flume-ng version命令来查看,flume安装是否成功。

[root@dev18 flume]# flume-ng version
Flume 1.7.0
Source code repository: https://git-wip-us.apache.org/repos/asf/flume.git
Revision: 511d868555dd4d16e6ce4fedc72c2d1454546707
Compiled by bessbd on Wed Oct 12 20:51:10 CEST 2016
From source with checksum 0d21b3ffdc55a07e1d08875872c00523
[root@dev18 flume]# 

至此,flume的简单安装就完成了。

© 著作权归作者所有

上一篇: CentOS安装Hadoop
下一篇: Java枚举用法整理
王孟君

王孟君

粉丝 227
博文 94
码字总数 221044
作品 0
杭州
高级程序员
私信 提问
【Flume】- 收集 Log4j 日志上送Kafka

Flume 收集 Log4j 日志上送Kafka存储 --- 环境准备 下载Flume: http://flume.apache.org/ 安装: 解压下载包到自定义路径 配置agent 解释: sources: avro 用于接收Log4j日志 interceptors: ...

ZeroneLove
04/10
23
0
Flume Installation

下载flume二进制安装包:apache-flume-1.6.0-bin.tar.gz http://www.apache.org/dist/flume/1.6.0/ http://www.apache.org/dist/flume/1.7.0/ 把apache-flume-1.6.0-bin.tar.gz文件存放在/op......

Yulong_
2017/08/10
19
0
在CentOS6.9中 搭建 Flume

之前的基本环境准备我就不再说了, 请参照我之前的搭建hadoop的文章 在CentOS 6.9中搭建Hadoop 配置 flume 环境变量 然后 记得 source ~/.bash_profile 根据需求,配置不同的 source/channel...

自东土大唐而来
2017/11/22
8
0
SparkStreaming整合flume

SparkStreaming整合flume 在实际开发中push会丢数据,因为push是由flume将数据发给程序,程序出错,丢失数据。所以不会使用不做讲解,这里讲解poll,拉去flume的数据,保证数据不丢失。 1.首...

强行快乐~
07/22
0
0
Apache Flume 1.6.0 发布,日志服务器

Apache Flume 1.6.0 发布,此版本现已提供下载: http://flume.apache.org/download.html 更新内容: ** Bug 修复 [FLUME-1793] - Unit test TestElasticSearchLogStashEventSerializer fail......

oschina
2015/06/03
3.1K
2

没有更多内容

加载失败,请刷新页面

加载更多

Taro 兼容 h5 踩坑指南

最近一周在做 Taro 适配 h5 端,过程中改改补补,好不酸爽。 本文记录📝遇到的问题,希望为有相同需求的哥们👬节约点时间。 Taro 版本:1.3.9。 解决跨域问题 h5 发请求会报跨域问题,需...

dkvirus
52分钟前
3
0
Spring boot 静态资源访问

0. 两个配置 spring.mvc.static-path-patternspring.resources.static-locations 1. application中需要先行的两个配置项 1.1 spring.mvc.static-path-pattern 这个配置项是告诉springboo......

moon888
今天
3
0
hash slot(虚拟桶)

在分布式集群中,如何保证相同请求落到相同的机器上,并且后面的集群机器可以尽可能的均分请求,并且当扩容或down机的情况下能对原有集群影响最小。 round robin算法:是把数据mod后直接映射...

李朝强
今天
4
0
Kafka 原理和实战

本文首发于 vivo互联网技术 微信公众号 https://mp.weixin.qq.com/s/bV8AhqAjQp4a_iXRfobkCQ 作者简介:郑志彬,毕业于华南理工大学计算机科学与技术(双语班)。先后从事过电子商务、开放平...

vivo互联网技术
今天
19
0
java数据类型

基本类型: 整型:Byte,short,int,long 浮点型:float,double 字符型:char 布尔型:boolean 引用类型: 类类型: 接口类型: 数组类型: Byte 1字节 八位 -128 -------- 127 short 2字节...

audience_1
今天
9
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部