文档章节

centos6安装kafka及使用一

liaojie
 liaojie
发布于 2014/03/26 14:43
字数 530
阅读 4.5K
收藏 0

    目前kafka最新版为:kafka-0.8.1-src.tgz

一、去官网下载kafka-0.8.1-src.tgz

二、kafka-0.8.1版需要JDK 7(注:JDK 8不支持,别走弯路了,自己去试一下吧!

二、删除原有JDK,安装新的JDK

[root@s0 Soft]# rpm -e --nodeps tzdata-java-2013c-1.el6.noarch java-1.6.0-openjdk-1.6.0.0-1.61.1.11.11.el6_4.x86_64 java-1.7.0-openjdk-1.7.0.19-2.3.9.1.el6_4.x86_64 libreoffice-javafilter-3.4.5.2-16.1.el6_3.x86_64 java_cup-0.10k-5.el6.x86_64
[root@s0 Soft]# rpm -ivch jdk-7u51-linux-x64.rpm

三、解压kafka并安装支持

[root@s0 Soft]# tar -zxvf kafka-0.8.1-src.tgz
[root@s0 Soft]# cd kafka-0.8.1-src
[root@s0 kafka-0.8.1-src]# ./gradlew jar

这里会下好多好多文件,耐心等待吧(出现下面的内容就安装完成了,中途可能会因为网络原因下载依赖包出现问题,或不完整包编译出错等)

BUILD SUCCESSFUL

Total time: 1 mins 22.14 secs
[root@s0 kafka-0.8.1-src]#

如果出错,看清楚是啥问题,一般都会给你列出来

FAILURE: Build failed with an exception.

* What went wrong:
Execution failed for task ':core:compileScala'.
> xsbti/CompileFailed

* Try:
Run with --stacktrace option to get the stack trace. Run with --info or --debug option to get more log output.

BUILD FAILED

Total time: 36.523 secs

下载一个scala(http://www.scala-lang.org/files/archive/scala-2.10.4.tgz)

[root@s0 Soft]# tar -xvf scala-2.10.4.tgz
[root@s0 Soft]# cd scala-2.10.4
[root@s0 Soft]# mv scala-2.10.4 /usr/lib
[root@s0 Soft]# ln -s /usr/lib/scala-2.10.4 /usr/lib/scala
然后将/usr/lib/scala/bin加到环境变量中
[root@s0 Soft]# scala -version
Scala code runner version 2.10.4 -- Copyright 2002-2013, LAMP/EPFL
[root@s0 kafka-0.8.1-src]# ./gradlew jar   //继续安装kafka的依赖
[root@s0 kafka-0.8.1-src]# ./gradlew jarAll
[root@s0 kafka-0.8.1-src]# ./gradlew jar --stacktrace  --info --debug

四、接下来就可以启动了(根据需要修改存储目录)

[root@s0 kafka-0.8.1-src]# vim config/server.properties
将里面的:
log.dirs=/tmp/kafka-logs
zookeeper.connect=localhost:2181
改为你自己的:
log.dirs=/home/kafkaPath
zookeeper.connect=192.168.20.200:2181
保存退出

五、启动、创建主题、查看主题

启动:
[root@s0 kafka-0.8.1-src]# nohup bin/zookeeper-server-start.sh config/zookeeper.properties &null
[root@s0 kafka-0.8.1-src]# nohup bin/kafka-server-start.sh config/server.properties &null
创建主题:
[root@s0 kafka-0.8.1-src]# bin/kafka-topics.sh --create --zookeeper 192.168.20.200:2181 --replication-factor 1 --partitions 1 --topic LJ200
查看现有主题:
[root@s0 kafka-0.8.1-src]# bin/kafka-topics.sh --list --zookeeper 192.168.20.200:2181
LJ200
[root@s0 kafka-0.8.1-src]#

暂时先这样吧Centos群:11032329

© 著作权归作者所有

liaojie
粉丝 29
博文 77
码字总数 12159
作品 0
朝阳
程序员
私信 提问
加载中

评论(0)

2.1、Linux下Kafka环境搭建及基本使用

一、kafka单节点单broker环境搭建 系统环境:centos 64位 mini 虚拟机:Virtual Box 如果你不熟悉virtual box的使用,不知道如何安装centos系统,可以参考之前发布的文章: 快速掌握基于Vir...

极客慧
2018/11/26
2.4K
0
centos6安装kafka及使用二

一、运行生产者、消费者 启动消费者:[root@s0 kafka-0.8.1-src]# bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginningSLF4J: Failed to load class ......

liaojie
2014/03/26
694
0
Kickstart实现自动安装centos6和7

一直想尝试下pxe自动安装centos6和centos7,最近几天做了下实验,虽然实践的过程中碰到许多问题,但收获还是有的,把碰到的问题和收获分享下。 pxe自动安装需要三个服务,分别为dhcp、tftp、...

实践哥
2017/01/14
696
0
源码编译安装Apache-附一键部署脚本

1.进入apache官网https://www.apache.org/,点击Download 2.如图选择 3.选择httpd 4.下载两个包,2.2为CentOS6使用,2.4为CentOS7使用 一、CentOS6 1.输入命令,会弹出对话框可以把windows的...

甩锅侠
2017/08/05
0
0
Docker使用系列二:CentOS 6.5 制作可以ssh登录的Docker镜像

Docker使用系列一我们把镜像源改为了阿里云的,方便后续的操作。 执行这个命令就把源地址改为阿里的: curl https://git.oschina.net/feedao/Docker_shell/raw/start/ali-centos.sh | sh 第一...

活的自由
2014/04/18
1.2W
26

没有更多内容

加载失败,请刷新页面

加载更多

Druid 0.17 入门(2)—— 安装与部署

在Druid快速入门其实已经简单的介绍过最简化配置的单节点部署,本文我们将详细描述Druid的多种部署方式,对于测试开发环境可以选用轻量的单机部署方式,而生产环境我们最好选用集群部署的方式...

实时计算
28分钟前
48
0
Idea 2019 3.2 注册码 2089年到期。

https://www.jianshu.com/p/45a96e698bca

诗书易经
41分钟前
63
0
在CentOS 7.5上安装和配置ProFTPD

ProFTPd是一个开源FTP守护程序,ProFTPd是一种开源FTP守护程序,由于其能实现粒度更细的权限配置能力而被广泛使用。 这是为CentOS 7以及CentOS 6及以下版本提供安装方法的指南。 您可以在项目...

linuxprobe2020
45分钟前
46
0
使用logstash作为docker日志驱动收集日志

前言 logstash是一个开源的日志统一处理数据收集器,属于ELK中的L,在日志收集领域应用广泛. docker默认的日志驱动是json-file,每一个容器都会在本地生成一个/var/lib/docker/containers/cont...

四颗咖啡豆
50分钟前
84
0
zk-SNARKs零知识证明的8种构建介绍与对比

zk-SNARK是一个快速发展的领域,仅在过去的两个月里,就宣布了数个突破性的zk-SNARK构建。曾经必须的可信设置现在已经是冗余的了,这意味着可以使用任何计算。然而关于这些新的zk-SNARK构建的...

区块链教程
50分钟前
70
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部