文档章节

centos6安装kafka及使用一

liaojie
 liaojie
发布于 2014/03/26 14:43
字数 530
阅读 4443
收藏 0

    目前kafka最新版为:kafka-0.8.1-src.tgz

一、去官网下载kafka-0.8.1-src.tgz

二、kafka-0.8.1版需要JDK 7(注:JDK 8不支持,别走弯路了,自己去试一下吧!

二、删除原有JDK,安装新的JDK

[root@s0 Soft]# rpm -e --nodeps tzdata-java-2013c-1.el6.noarch java-1.6.0-openjdk-1.6.0.0-1.61.1.11.11.el6_4.x86_64 java-1.7.0-openjdk-1.7.0.19-2.3.9.1.el6_4.x86_64 libreoffice-javafilter-3.4.5.2-16.1.el6_3.x86_64 java_cup-0.10k-5.el6.x86_64
[root@s0 Soft]# rpm -ivch jdk-7u51-linux-x64.rpm

三、解压kafka并安装支持

[root@s0 Soft]# tar -zxvf kafka-0.8.1-src.tgz
[root@s0 Soft]# cd kafka-0.8.1-src
[root@s0 kafka-0.8.1-src]# ./gradlew jar

这里会下好多好多文件,耐心等待吧(出现下面的内容就安装完成了,中途可能会因为网络原因下载依赖包出现问题,或不完整包编译出错等)

BUILD SUCCESSFUL

Total time: 1 mins 22.14 secs
[root@s0 kafka-0.8.1-src]#

如果出错,看清楚是啥问题,一般都会给你列出来

FAILURE: Build failed with an exception.

* What went wrong:
Execution failed for task ':core:compileScala'.
> xsbti/CompileFailed

* Try:
Run with --stacktrace option to get the stack trace. Run with --info or --debug option to get more log output.

BUILD FAILED

Total time: 36.523 secs

下载一个scala(http://www.scala-lang.org/files/archive/scala-2.10.4.tgz)

[root@s0 Soft]# tar -xvf scala-2.10.4.tgz
[root@s0 Soft]# cd scala-2.10.4
[root@s0 Soft]# mv scala-2.10.4 /usr/lib
[root@s0 Soft]# ln -s /usr/lib/scala-2.10.4 /usr/lib/scala
然后将/usr/lib/scala/bin加到环境变量中
[root@s0 Soft]# scala -version
Scala code runner version 2.10.4 -- Copyright 2002-2013, LAMP/EPFL
[root@s0 kafka-0.8.1-src]# ./gradlew jar   //继续安装kafka的依赖
[root@s0 kafka-0.8.1-src]# ./gradlew jarAll
[root@s0 kafka-0.8.1-src]# ./gradlew jar --stacktrace  --info --debug

四、接下来就可以启动了(根据需要修改存储目录)

[root@s0 kafka-0.8.1-src]# vim config/server.properties
将里面的:
log.dirs=/tmp/kafka-logs
zookeeper.connect=localhost:2181
改为你自己的:
log.dirs=/home/kafkaPath
zookeeper.connect=192.168.20.200:2181
保存退出

五、启动、创建主题、查看主题

启动:
[root@s0 kafka-0.8.1-src]# nohup bin/zookeeper-server-start.sh config/zookeeper.properties &null
[root@s0 kafka-0.8.1-src]# nohup bin/kafka-server-start.sh config/server.properties &null
创建主题:
[root@s0 kafka-0.8.1-src]# bin/kafka-topics.sh --create --zookeeper 192.168.20.200:2181 --replication-factor 1 --partitions 1 --topic LJ200
查看现有主题:
[root@s0 kafka-0.8.1-src]# bin/kafka-topics.sh --list --zookeeper 192.168.20.200:2181
LJ200
[root@s0 kafka-0.8.1-src]#

暂时先这样吧Centos群:11032329

© 著作权归作者所有

共有 人打赏支持
liaojie
粉丝 29
博文 73
码字总数 12061
作品 0
朝阳
程序员
私信 提问
2.1、Linux下Kafka环境搭建及基本使用

一、kafka单节点单broker环境搭建 系统环境:centos 64位 mini 虚拟机:Virtual Box 如果你不熟悉virtual box的使用,不知道如何安装centos系统,可以参考之前发布的文章: 快速掌握基于Vir...

极客慧
2018/11/26
0
0
centos6安装kafka及使用二

一、运行生产者、消费者 启动消费者:[root@s0 kafka-0.8.1-src]# bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginningSLF4J: Failed to load class ......

liaojie
2014/03/26
0
0
源码编译安装Apache-附一键部署脚本

1.进入apache官网https://www.apache.org/,点击Download 2.如图选择 3.选择httpd 4.下载两个包,2.2为CentOS6使用,2.4为CentOS7使用 一、CentOS6 1.输入命令,会弹出对话框可以把windows的...

甩锅侠
2017/08/05
0
0
Docker使用系列二:CentOS 6.5 制作可以ssh登录的Docker镜像

Docker使用系列一我们把镜像源改为了阿里云的,方便后续的操作。 执行这个命令就把源地址改为阿里的: curl https://git.oschina.net/feedao/Docker_shell/raw/start/ali-centos.sh | sh 第一...

活的自由
2014/04/18
0
26
Kickstart实现自动安装centos6和7

一直想尝试下pxe自动安装centos6和centos7,最近几天做了下实验,虽然实践的过程中碰到许多问题,但收获还是有的,把碰到的问题和收获分享下。 pxe自动安装需要三个服务,分别为dhcp、tftp、...

just_do_itit
2017/01/14
0
0

没有更多内容

加载失败,请刷新页面

加载更多

看过上百部片子的这个人教你视频标签算法解析

本文由云+社区发表 随着内容时代的来临,多媒体信息,特别是视频信息的分析和理解需求,如图像分类、图像打标签、视频处理等等,变得越发迫切。目前图像分类已经发展了多年,在一定条件下已经...

腾讯云加社区
22分钟前
0
0
2. 红黑树

定义:红黑树(Red-Black Tree,简称R-B Tree),它一种特殊的二叉查找树(Binary Search Tree)。 要理解红黑树,先要了解什么是二叉查找树。在上一章中,我们学习了什么是二叉树,以及二叉树...

火拳-艾斯
23分钟前
0
0
input的button类型,点击页面跳转

一、input type=button 不做任何操作 例如: <input type="button" class="btn btn-primary" style="width: 30%" value="返回" onclick="window.location.href='/users/list'"></input> onc......

Sunki
29分钟前
0
0
踩坑:js 小数运算出现精度问题

背景 在学习小程序商城源码时发现了这个问题,单价可能出现小数,小数之间运算结果会莫名其妙多出一大串数字,比如下面这样👇。 在此之前我是知道 js 中著名的 0.1 + 0.2 != 0.3 的问题的,...

dkvirus
34分钟前
0
0
zookeeper和HBASE总结

zookeeper快速上手 zookeeper的基本功能和应用场景 zookeeper的整体运行机制 zookeeper的数据存储机制 数据存储形式 zookeeper中对用户的数据采用kv形式存储 只是zk有点特别: key:是以路径...

瑞查德-Jack
57分钟前
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部