个人空间 - OSCHINA - 中文开源技术交流社区

Apache SeaTunnel除了单表之间的数据同步之外，也支持单表同步到多表，多表同步到单表，以及多表同步到多表，下面简单举例说明如何实现这些功能。单表 to 单表一个source，一个sink。从m...

mysql https weixin blog .net 开源 apacheseatunnel sink source olap article details csdn

工作日志

2024/07/23 16:27

308

0

概述 Apache SeaTunnel Apache SeaTunnel 是一个分布式、高性能、易扩展、用于海量数据（离线&实时）同步和转化的开源数据集成平台，支持spark、flink 及自研 Zeta 引擎，有庞大的用户社群....

iceberg 计算引擎 schema 开源 connect flink spark seatunnel hadoop .config evolution hdfs trino

工作日志

2024/07/18 16:53

243

0

需求背景由于我司的项目中需要接入不同的数据源的数据到数仓中，在选择了众多的产品中最后选择了Apache SeaTunnel，对比参考目前我这边使用的接口，暂时没有接口认证，如果需要接口认证的方...

json seatunnel transform schema 开源 jsonpath string list source rest doris sink save table conf

工作日志

2024/07/18 16:52

873

0

导读本文将分享如何利用 Apache SeaTunnel 将各个业务系统的数据同步到 OLAP 引擎。主要内容包括以下六大部分： 1. Apache SeaTunnel 项目介绍 2. Apache SeaTunnel 核心功能 3.SeaTunnel ...

seatunnel olap引擎 worker mysql jdbc flink spark reader 开源 hive 可视化 hadoop transform

工作日志

2024/07/18 16:42

538

0

摘要本文深入探讨了Apache SeaTunnel及其商业版可视化数据同步平台WhaleTunnel在数据整合领域的应用，特别是如何高效地将SAP系统中的数据同步到Amazon Redshift。通过技术介绍、操作流程、性...

redshift 可视化开源 https talend hudi apache jdbc hive oracle seatunnel flink spark

工作日志

2024/07/16 11:57

273

0

摘要本文深入探讨了Apache SeaTunnel及其商业版可视化数据同步平台WhaleTunnel在数据整合领域的应用，特别是如何高效地将SAP系统中的数据同步到Amazon Redshift。通过技术介绍、操作流程、性...

redshift 可视化开源 https talend hudi hive apache oracle jdbc 数据处理 spark

工作日志

2024/07/16 11:56

95

0

2024年第三季度已经悄然开启，猛回头才发现今年的时日竟然已经过半！这半年又是在忙忙碌碌中度过，好在看着社区发展年中汇总的一串串数字，似乎都在预示着社区将在一条正确的轨道上，朝着好的...

开源 seatunnel 大数据 apacheseatunnel apache v meetup apacheseatunnelmeetup

工作日志

2024/07/10 14:48

99

0

在我国，数字化的趋势驱动互联网银行发展走上快车道，近年来互联网银行发展迅速，积极拓展线上业务，并利用大数据技术加强风险控制，积极进行数字化转型。当新兴互联网银行乘着数字化改革的风...

seatunnel 大数据 hive clickhouse elasticsearch jdbc mysql metrics 数据处理 oracle spark

工作日志

2024/07/08 16:53

211

0

各位热爱Apache SeaTunnel的小伙伴们，社区6月份月报来啦！这里将记录Apache SeaTunnel社区每月的重要更新，欢迎关注。月度Merge Stars 感谢以下小伙伴上个月为Apache SeaTunnel所做的精彩贡...

hotfix jdbc seatunnel starrocks hive mongodb transform kafka mysql improve hbase connector client

工作日志

2024/07/08 16:48

125

0

引言在现代大数据应用中，数据集成和同步成为企业数据管理的关键环节。随着数据源和数据库的多样化，如何高效地进行数据集成成为企业面临的重要挑战。 Apache SeaTunnel 作为一款开源的数据...

seatunnel flink spark reader transform worker 开源 apache 大数据 engine 计算引擎

工作日志

2024/07/04 21:44

137

0

在使用Apache SeaTunnel时，我遇到了一个写入S3文件的报错问题。通过深入调试和分析，找到了问题所在，并提出了相应的解决方案。本文将详细介绍报错情况、参考资料、解决思路以及后续研究方...

文件系统 seatunnel https debug hadoop apache github schema json java idea blog wiki lang

工作日志

2024/07/04 21:44

97

0

采访对象 | 陈炳烨采访人&编辑 | Debra Chen Apache SeaTunnel社区第一位学生Committer就此诞生！这位来自西安交通大学软件工程专业的同学从较为简单的文档修改工作，逐步深入到代码层面，到...

seatunnel 开源开源社区面试 owner committer github apacheseatunnel issue codestyle review

工作日志

2024/07/04 15:19

91

0

在这个数据驱动的大模型时代，数据集成的作用和意义愈发重要。数据不仅仅是信息的载体，更是推动企业决策和创新的关键因素。作为全球最流行的批流一体数据集成工具，WhaleTunnel随着WhaleSt...

开源数据处理可视化大数据 zero dolphinscheduler seatunnel 数据可视化 json

工作日志

2024/07/01 14:28

99

0

软件作品

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈

开源项目作者

合格公民

Gitee 达人

软件作品

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈