分布式日志收集系统搭建(Flume-NG)

本文同步于个人Github博客:https://github.com/johnnian/Blog/issues/34,欢迎关注并交流。 分布式日志收集系统(Flume-NG) 应用场景 在生产环境中,有若干台服务器,每台服务器都部署着一套...

Johnnian
2017/12/20
0
0
Kafka connect介绍、部署及开发

Kafak connect 简介 Kafaka connect 是一种用于在Kafka和其他系统之间可扩展的、可靠的流式传输数据的工具。它使得能够快速定义将大量数据集合移入和移出Kafka的连接器变得简单。Kafka Conne...

hnrpf
2017/10/25
1K
0
第15课:Spark Streaming源码解读之No Receivers彻底思考

本期内容: 1,Direct Access 2,Kafka 使用No Receiver有更强的控制度和语义一致性。接下来我们以Kafka为例,讲解不使用Receiver而直接从Kafka的Broker上读取数据,这种方式成为Direct方式。...

葛晨鑫
2016/05/29
332
0
kafka的安装和使用

一、安装 1、安装scala 解压 tar -zxvf scala-2.10.4.tgz 2、安装kafka 解压 tar -zxvf kafka_2.11-0.9.0.1.tgz 二、修改kafka/config下的server.properties配置文件如下内容 broker.id=1 不......

xiaozhou18
2016/12/15
259
0
apache kafka技术分享系列(目录索引)

目录索引: Kafka使用场景 1.为何使用消息系统 2.我们为何需要搭建ApacheKafka分布式系统 3.消息队列中点对点与发布订阅区别 kafka开发与管理: 1)apachekafka消息服务 2)kafak安装与使用 ...

dannyhe
2015/09/06
675
1

没有更多内容

加载失败,请刷新页面

加载更多