全部博文 - 个人空间 - OSCHINA - 中文开源技术交流社区

认证官方账号

6K

经验值

6K

开源豆

关注私信

高性能分布式数据集成平台

85

连击天

fork: star:

加载中

最近我写开源商业文章明显更新少了，不是我不写文章了，而是开源商业化进展很顺利，我写文章的时间都被各种写标书占满了。作为一个开源原生的商业公司，白鲸开源公司的员工几乎都是程序员，而...

开源 word docx github https xlsx extract talend python 图片格式 prompt requests python-docx

2024/11/15 14:50

6.9K

北京时间 2023 年 6 月 1 日，全球最大的开源软件基金会 Apache Software Foundation（以下简称 ASF）正式宣布 Apache SeaTunnel 毕业成为 Apache 顶级项目(TLP, Top Level Project)。这是首...

seatunnel 开源 apache 大数据开源社区 https apacheseatunnel saas 数据处理 github

2023/06/01 15:06

5K

产品概述 Apache SeaTunnel 是一个非常易用的超高性能分布式数据集成产品，支持海量数据的离线及实时同步。每天可稳定高效同步万亿级数据，已应用于数百家企业生产，也是首个由国人主导贡献到...

seatunnel datax mysql hive flink postgresql 数据同步工具 sqlserver oracle 数据处理 jdbc

2023/11/14 10:54

3.6K

在数据驱动的数字时代，企业正面临前所未有的数据增长与系统复杂性。数据分布在不同系统、格式与平台中，导致“信息孤岛”问题日益严重。打破这些孤岛，实现数据的高效整合与共享，成为推动企...

数据集成异构系统 ApacheSeaTunnel 批流一体插件化架构 CDC支持

04/28 18:30

1.8K

这次在 6月 Meetup 为大家带来的是Scaleph 基于 Apache SeaTunnel (Incubating) 的数据集成介绍，希望你有所收获。本次演讲主要包括五个部分：关于Scaleph Scaleph架构&功能简介 SeaTunne...

seatunnel flink jdbc https dump 开源 apache 可视化 core-metrics transform 电商平台 spark

2022/07/04 19:59

1.6K

引言点亮 ⭐️ Star · 照亮开源之路 https://github.com/apache/incubator-seatunnel 为什么说 CDC 是SeaTunnel平台中的一个重要功能特性？今天这篇文章跟大家分享一下 CDC 是什么？目前市...

seatunnel https reader apache once mysql github cqrs 开源 transform oracle postgresql flink schema

2023/01/04 20:56

1.5K

ELT已死，EtLT才是现代数据处理架构的终点!

提到数据处理，经常有人把它简称为“ETL”。但仔细说来，数据处理经历了ETL、ELT、XX ETL（例如，Reverse ETL、Zero-ETL）到现在流行的EtLT架构几次更迭。目前大家使用大数据Hadoop时代，主要...

saas seatunnel 数据处理大数据数据存储计算引擎开源 oracle mapreduce spark db2

2023/08/31 11:47

1.5K

作者：史德昇随着数据来源的不断复杂化及业务需求的快速演进，通用的数据集成框架在实际落地过程中往往面临诸多挑战：数据结构不规范、字段缺失、敏感信息混杂、数据语义不清等问题频繁出现...

数据集成框架 ApacheSeaTunnel 数据处理智能容错正则解析 XML解析

05/08 15:57

1.5K

文章作者：雷宝鑫整理排版：白鲸开源曾辉 Apache SeaTunnel官网链接: https://seatunnel.apache.org/ Apache SeaTunnel(以下简称SeaTunnel）是一款新一代高性能、分布式的数据集成同步工具...

SeaTunnel 分离集群模式 Kubernetes部署 Hazelcast集群 HeadlessService RESTfulAPI

04/22 16:45

1.4K

作者 | 郭炜策划 | 凌敏前言下面是一段利用 Co-Pilot 辅助开发的小视频，这是 Apache SeaTunnel 开发者日常开发流程中的一小部分。如果你还没有用过 Co-Pilot、ChatGPT 或者私有化大模型帮...

程序员开源 saas 自动化测试 seatunnel 开源社区 youtube dolphinscheduler 计算引擎

2023/08/11 18:23

1.3K

缘起及背景在科技行业蓬勃发展的浪潮中，开源商业化宛如一颗闪耀却又充满争议的新星，备受瞩目。开源商业化在中国到底行不行？这是一个不仅被开源圈讨论了很久的话题，也是被行业讨论了很多...

开源 apache 开源社区 debug seatunnel dolphinscheduler 鸿蒙系统 openharmony 数据处理

02/12 18:29

1.3K

引言随着大数据技术的发展，数据集成和数据流处理需求日益增长。Apache SeaTunnel 作为一款开源的数据集成框架，不仅支持多种数据源和目标，还提供了灵活的 API 来满足各种复杂的业务需求。...

reader transform seatunnel context kafka 开源数据传输工具分布式系统 jdbc hive

2024/11/14 16:30

1.3K

点击蓝字关注我们背景目前参与的项目属于公司里面数据量大、计算密集的一个重要业务项目，需要提供高效且准确的 OLAP 服务，并提供灵活且实时的报表。业务数据存储在 MySQL 中，数据增长多...

seatunnel https apache elasticsearch mysql github 开源 kibana flink yml java 数据处理 docker

2022/01/10 18:13

1K

点亮 ⭐️ Star · 照亮开源之路 https://github.com/apache/incubator-seatunnel 讲师简介毕博马蜂窝数据工程师在10月15日，Apache SeaTunnel& IoTDB 联合 Meetup 期间，马蜂窝网数据工...

seatunnel spark transform apache https starrocks 大数据 flink github 计算引擎开源

2022/11/04 11:56

1K

此前，社区推出一篇文章《Apache SeaTunnel MCP Server：让AI成为你的ETL助手》介绍了即将推出的SeaTunnel MCP Server 能力，受到了大家的热烈反响。为了让大家更加深入地了解这个项目，社区...

SeaTunnelMCPServer ETL助手模型上下文协议自然语言操作数据数据集成任务

05/27 18:11

1K

集群配置异常问题 4月份以来，出现了3次集群脑裂现象，均为某节点脑裂/自动关闭。核心日志如下： Master节点出现Hazelcast监控线程打印的Slow Operation日志 Hazelcast 心跳超时60s后，会...

集群脑裂 Hazelcast 心跳超时 FullGC 故障检测器 GC调参

05/27 18:31

1K

在数字化时代，数据已成为企业最宝贵的资产之一。随着数据量的爆炸性增长，企业面临着如何有效管理和利用这些数据的挑战。DataOps，或数据运营，应运而生，旨在解决这一挑战。 DataOps是一种...

开源数据处理 dataops git 可视化 spark devops 自动化测试关系型数据库

2023/12/22 09:04

977

部署环境（MacOS/Linux） 1.安装JDK环境目前SeaTunnel支持运行在JDK8及以上的环境。用户需要自行安装JDK环境。 2.下载安装包目前SeaTunnel的最新版本是2.3.1版本。这里我们安装部署2.3.1版...

seatunnel console maven .config jdk apache control starrocks assert download fake https 开源 macos

2023/05/17 14:03

928

Apache SeaTunnel Web 功能正式发布！在大数据技术的不断进步之下，Apache SeaTunnel 成为了众多开发者和企业关注的焦点。今天，我们很高兴地宣布：Apache SeaTunnel Web功能已正式发布，带...

seatunnel apache https web-home skip client deployment download docs maven engine admin yaml

2023/10/18 15:50

911

在大数据处理领域，Apache SeaTunnel 已成为一款备受青睐的开源数据集成平台，它不仅可以基于Apache Spark和Flink，而且还有社区单独开发专属数据集成的Zeta引擎，提供了强大的数据处理能力。...

seatunnel apache web-home server hazelcast mysql yaml application client 数据处理 maven java

2024/02/28 15:22

890

没有更多内容

加载失败，请刷新页面

©OSCHINA(OSChina.NET)

工信部

开源软件推进联盟

指定官方社区

社区规范

北京奥思研工智能科技有限公司版权所有

京ICP备2025119063号

顶部