文档章节

大数据ETL

i3170
 i3170
发布于 2017/07/27 14:51
字数 69
阅读 202
收藏 0
ETL

精选30+云产品,助力企业轻松上云!>>>

一、名称定义解释

    1、ETL(Extract  - 抽取,TransForm 转换 ,Load 加载)

二、概念、

    1、将数据从数据源中抽取出来,经过数据清洗后,用事先定义好的数据仓库模型,将数据加载到数据仓库中。

 

i3170
粉丝 1
博文 2
码字总数 90
作品 0
黄浦
私信 提问
加载中
请先登录后再评论。
ETL-kettle 核心执行逻辑

一、大数据下的ETL工具是否还使用Kettle kettle 作为通用的ETL工具,非常成熟,应用也很广泛,这里主要讲一下 目前我们如何使用kettle的? 在进行大数据处理时,ETL也是大数据处理的主要场景之...

osc_tr9tcucx
2019/07/14
46
0
大数据技术核心之ETL

前几篇文章都是根据自己所见所知,在前人的基础上加以整合,对大数据概念有了初步的了解。接下来的四篇文章,抛开大数据的概念与基本知识,进入核心。我们从:数据采集、数据存储、数据管理、...

yunpiao
2014/12/09
97
0
8年数据仓库经验老鸟分享零基础转行大数据的最佳自学之路

本人推荐一个大数据学习交流群 119599574 ,每天晚上20:10都有一节【免费的】大数据直播课程,专注大数据分析方法,大数据编程,大数据仓库,大数据案例,人工智能,数据挖掘都是纯干货分享,你...

大数据大咖
2018/06/05
0
0
大数据处理过程核心技术ETL详细介绍

架构挑战 1、对现有数据库管理技术的挑战。 2、经典数据库技术并没有考虑数据的多类别(variety)、SQL(结构化数据查询语言),在设计的一开始是没有考虑到非结构化数据的存储问题。 3、实时...

osc_mnd6q2ay
2019/03/25
2
0
数据仓库工程师、大数据开发工程师、BI工程师、ETL工程师之间有什么区别?

商务智能。商务智能工程师是商业智能行业的工程师。从需求分析师到数据仓库架构师、ETL工程师、数据分析工程师、报表开发工程师、数据挖掘工程师等,都可以称为BI工程师。 ETL工程师:从事系...

大数据萧风
2019/01/29
21
0

没有更多内容

加载失败,请刷新页面

加载更多

App Builder 2020中文版

教程: 1、断开网络连接,下载解压,运行对应操作系统App Builder 2020安装包; 2、在弹出的窗口中勾选同意条款协议,点击【Next】; 3、创建桌面快捷方式,点击【Next】; 4、一切准备就绪,...

osc_62a7f5bj
36分钟前
19
0
蚂蚁金服轻量级类隔离框架 Maven 打包插件解析 | SOFAArk 源码解析

SOFAStack(Scalable Open Financial Architecture Stack)是蚂蚁金服自主研发的金融级云原生架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 本文为《...

SOFAStack
03/19
11
0
Java 高级 面试题 及 参考答案

一、面试题基础总结 1、 JVM结构原理、GC工作机制详解 答:具体参照:JVM结构、GC工作机制详解 ,说到GC,记住两点:1、GC是负责回收所有无任何引用对象的内存空间。 注意:垃圾回收回收的是无...

osc_np3y0rbq
37分钟前
10
0
面试准备季——MyBatis 面试专题(含答案)

写在前面:2020年面试必备的Java后端进阶面试题总结了一份复习指南在Github上,内容详细,图文并茂,有需要学习的朋友可以Star一下! GitHub地址:https://github.com/abel-max/Java-Study-...

osc_1ipdqsf2
38分钟前
8
0
Redis 高频面试题:10w+QPS 的 Redis 真的只是因为单线程和基于内存?

你以为 Redis 这么快仅仅因为单线程和基于内存? 那么你想得太少了,我个人认为 Redis 的快是基于多方面的:不但是单线程和内存,还有底层的数据结构设计,网络通信的设计,主从、哨兵和集群...

osc_qgfjs4a5
39分钟前
18
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部