加载中
Kafka Connect深度解读之配置项处理

Kafka连接器配置 无论是开发源端还是接收端连接器,都需要定义一些外部系统的配置参数,例如身份验证信息等。用户在部署连接器时需要提供这些参数,由于此过程容易发生人为错误,因此对其进行...

Apache Kafka、Apache Pulsar和RabbitMQ性能测试对比

Apache Kafka、Apache Pulsar和RabbitMQ都可以用作消息中间件平台,可对比的项目非常多,但是通常最关心的就是性能。在本文中,将专注于系统的吞吐量和延迟,因为这些是生产中事件流系统的主...

保护Kafka环境的最佳实践

对于许多企业来说,Kafka是整个企业数据系统的中枢,因此保护事件流平台对于数据安全至关重要,并且通常是管理层要求的。本文会讲述五个安全类别以及Kafka和Confluent平台的基本功能,这些功...

Kafka Connect深度解读之单消息转换

Kafka Connect是Apache Kafka®的一部分,在Kafka和其它系统之间提供可靠的、可扩展的分布式流式集成。Kafka Connect具有可用于许多系统的连接器,它是一个配置驱动的工具,不需要编码。 Ka...

2020/05/09 21:45
3.9K
使用Connect API创建自定义Kafka连接器

如果正在使用Apache Kafka,那么就有机会使用Kafka Connect连接器以进行数据的流入和流出。虽然可用的连接器越来越多,但是这些已有的仍有可能无法满足需求,这时就可以使用Kafka的Connect A...

2020/04/25 21:49
5.9K
Kafka连接器之在2.3版本中的改进

在Kafka的2.3版本中,对Kafka连接器做了很大的改进。首先就是在添加和删除连接器时,修改了Kafka连接器处理任务的方式。之前这个动作造成了整个系统的停顿,这是一直被开发和运维人员诟病的地...

Kafka连接器深度解读之错误处理和死信队列

Kafka连接器是Kafka的一部分,是在Kafka和其它技术之间构建流式管道的一个强有力的框架。它可用于将数据从多个地方(包括数据库、消息队列和文本文件)流式注入到Kafka,以及从Kafka将数据流...

Kafka连接器深度解读之转换器和序列化

Kafka连接器是Apache Kafka®的一部分,提供数据存储与Kafka之间的流式集成。对于数据工程师来说,只需要使用JSON格式配置文件即可。目前已经有很多数据存储的连接器,仅举几例来说,包括JDB...

Kafka连接器深度解读之JDBC源连接器

在现实业务中,Kafka经常会遇到的一个集成场景就是,从数据库获取数据,因为关系数据库是一个非常丰富的事件源。数据库中的现有数据以及对该数据的任何更改都可以流式传输到Kafka主题中,在这...

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部