Kafka连接器深度解读之转换器和序列化

Kafka连接器是Apache Kafka®的一部分,提供数据存储与Kafka之间的流式集成。对于数据工程师来说,只需要使用JSON格式配置文件即可。目前已经有很多数据存储的连接器,仅举几例来说,包括JDB...

2019/03/25 08:57
8.2K
Kafka连接器深度解读之JDBC源连接器

在现实业务中,Kafka经常会遇到的一个集成场景就是,从数据库获取数据,因为关系数据库是一个非常丰富的事件源。数据库中的现有数据以及对该数据的任何更改都可以流式传输到Kafka主题中,在这...

2019/03/12 14:02
1.2W
在既有系统中打通Apache Ignite、MySQL和Node.js

介绍 在本系列的第一篇文章中,安装了Node.js、Ignite的Node.js瘦客户端包,并且测试了一个示例应用。在本文中,可以看一下Ignite在处理其它数据源(比如关系数据库)的已有数据时,一个很有...

2019/03/04 14:07
4.3K
Apache Ignite的Node.js客户端使用入门

介绍 Ignite原生提供了若干种主要编程语言的支持,最近,还通过瘦客户端技术对其它的编程语言提供了支持,其中在2.7版本中新增加的瘦客户端包括Python、PHP和Node.js。 瘦客户端具有如下的特...

2019/02/13 19:24
2.3K
Apache Ignite原生持久化概述

很多人会问,Ignite有没有持久化存储,或者说是不是一个单纯的内存存储? 答案是都有,Ignite的原生持久化可以打开,也可以关闭。这使得Ignite可以存储比可用内存量大得多的数据集,也就是说...

2019/02/11 13:31
5.4K
使用Apache Ignite构建C++版本的分布式应用

本文会介绍Apache Ignite的C++ API(称为Ignite C++),主要面向C/C++开发者。 Ignite和Ignite C++ Ignite C++构建于Ignite之上; Ignite C++在同一个进程中启动JVM,并且通过JNI与之通信; ...

2019/01/27 23:06
5.8K
在Ignite中使用k-均值聚类算法

在本系列前面的文章中,简单介绍了一下Ignite的k-最近邻(k-NN)分类算法,下面会尝试另一个机器学习算法,即使用泰坦尼克数据集介绍k-均值聚类算法。正好,Kaggle提供了CSV格式的数据集,而要...

2018/12/03 19:49
4.3K
在Ignite中使用k-最近邻(k-NN)分类算法

在本系列前面的文章中,简单介绍了一下Ignite的线性回归算法,下面会尝试另一个机器学习算法,即k-最近邻(k-NN)分类。该算法基于对象k个最近邻中最常见的类来对对象进行分类,可用于确定类成...

2018/11/28 16:53
2.6K
在Ignite中使用线性回归算法

在本系列前面的文章中,简单介绍了一下Ignite的机器学习网格,下面会趁热打铁,结合一些示例,深入介绍Ignite支持的一些机器学习算法。 如果要找合适的数据集,会发现可用的有很多,但是对于...

2018/11/22 00:24
2.6K
Ignite中的机器学习介绍

本系列共6篇文章,会通过一些代码示例,讲解如何在Ignite中使用机器学习库,本文是本系列的第一篇。 从Ignite的2.4版本开始,机器学习就可以用于生产环境了。在这个版本中,进行了大量的开发...

2018/10/26 14:07
1.8K
Ignite集成Spark之IgniteDataFrames

本系列共两篇文章,主要探讨如何将Ignite和Spark进行集成。 下面简要地回顾一下在第一篇文章中所谈到的内容。 Ignite是一个分布式的内存数据库、缓存和处理平台,为事务型、分析型和流式负载...

2018/10/08 15:38
3K
Ignite集成Spark之IgniteRDD

本系列共两篇文章,会探讨如何将Ignite和Spark进行集成。 Ignite是一个分布式的内存数据库、缓存和处理平台,为事务型、分析型和流式负载而设计,在保证扩展性的前提下提供了内存级的性能。 ...

2018/09/13 23:45
3.9K
Ignite与Spark内存计算平台对比分析

经常有人拿Ignite和Spark进行比较,然后搞不清两者的区别和联系。Ignite和Spark,如果笼统归类,都会归类于内存计算平台,两者功能上虽然有交集,并且Ignite也会对Spark进行支持,但是不管是...

Apache Ignite核心特性介绍(2.5.0版)

1.摘要 1.1.Ignite是什么? Apache Ignite是一个以内存为中心的分布式数据库、缓存和处理平台,支持事务、分析以及流式负载,可以在PB级数据上享有内存级的性能。 1.1.1.Ignite定位 Ignite是...

2018/06/12 11:57
8.9K
Apache Cassandra和Apache Ignite:分布式数据库的明智之选

有时,Cassandra和Ignite配合得很好,但是有时,选择一个解决方案更好。

Apache Ignite事务架构:第三方持久化的事务处理

本文是Ignite事务架构系列的最后一篇文章,在之前的文章中,讨论了与键值API的事务处理有关的一系列主题。 第一篇文章中,主要介绍了二阶段提交协议及其工作方式; 第二篇文章中,介绍了锁模...

Apache Ignite事务架构:Ignite持久化的事务处理

在本系列上一篇文章中,介绍了故障和恢复,下面是本系列剩下的文章将要讨论的主题: Ignite持久化的事务处理(WAL、检查点及其他) 第三方持久化的事务处理 在本文中,会聚焦于Ignite持久化的...

Apache Ignite事务架构:故障和恢复

在本系列的上一篇文章中,探讨了并发模型和隔离级别,下面是本系列剩下的文章将要讨论的主题: 故障和恢复 Ignite持久化层的事务处理(WAL、检查点及其他) 第三方持久化层的事务处理 在本文...

2018/04/09 16:08
6K
Apache Cassandra和Apache Ignite:对比测试,强大的内存计算

一个被频繁提出的问题就是,Apache Cassandra和Apache Ignite之间的区别是什么,这很正常,因为这两个数据库有很多的共同之处,比如水平扩展性、高可用和持久化。在本系列的前四篇文章中,已...

Apache Cassandra和Apache Ignite:通过Ignite增强Apache Cassandra

Apache Cassandra是开源分布式NoSQL磁盘数据库的领导者之一,作为关键的基础设施,已经部署在诸如Netflix、eBay、Expedia等很多公司中,它因为速度、可线性扩展至上千个节点、一流的数据中心...

没有更多内容

加载失败,请刷新页面