文档章节

什么是异构数据源和分布式数据库

Avner
 Avner
发布于 2017/08/25 15:03
字数 517
阅读 1.8K
收藏 0

精选30+云产品,助力企业轻松上云!>>>

异构数据源(disparate data source)广义上讲是指数据结构、存取方式、形式不一样的多个数据源。如,在一个系统中,同时包含由关系型数据库Oracle/SQL SERVER/MYSQL、EXCEL文件或txt文本数据、XML数据等不同的数据源的一个整体,就是一个异构的数据源。

在信息化建设过程中,由于各种系统建设的阶段性、技术性以及经济、人为因素的影响,导致用户积累了大量不同存储方式的数据,从简单的文件数据到复杂的网络数据库,它们构成了异构数据源。

 

分布式数据库(Distributed Database)是由若干个服务器节点组成,它们通过网络连接,每个节点都是一个独立的数据库系统,可以独立运行,在逻辑上属于同一系统,但在物理结构上是分布式的。

分布式数据库的特点:

1、不强调集中控制,它具有一个以全局数据库管理员为基础的分层控制结构,但是每个局部数据库管理员都具有高度的自主权。

2、数据独立性。

3、数据冗余。在需要的节点复制数据,可以提高局部的应用性;当某节点发生故障时,可以操作其它节点上的复制数据,因此增加了系统的有效性。分布式系统中对最佳冗余度的评价是很复杂的。

 

分布式系统的类型,大致可以归为三类:

1、分布式数据,但只有一个总数据库,没有局部数据库。

2、分层式处理,每一层都有自己的数据库。

3、充分分散的分布式网络,没有中央控制部分,各节点之间的联接方式又可以有多种,如松散的联接,紧密的联接,动态的联接,广播通知式联接等。

上一篇: WITH AS介绍
下一篇: Hive Tips
Avner
粉丝 9
博文 66
码字总数 56634
作品 0
杭州
程序员
私信 提问
加载中
请先登录后再评论。
【大数据】DataX介绍

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/binggetong/article/details/82707321 DataX入门 1.DataX 1.1介绍 DataX 是阿里巴巴集团内被广泛使用的异构数...

Elsa晓冰
2018/09/14
0
0
网易有数 - 网易大数据|专业的私有化大数据平台

网易有数 企业级大数据可视化分析平台,具有全面的安全保障、强大的大数据计算性能、先进的智能分析、便捷的协作分享等特性。 观看介绍视频 免费注册试用

2018/03/09
0
0
数据集成中间件知识点总结

  数据集成是把不同来源、格式、特点性质的数据在逻辑上或物理上有机地集中,从而为企业提供全面的数据共享。   一、模型分类   (1)联邦式数据库系统(Federated Distributed Datab...

雪童子
2016/09/26
0
0
数据源管理 | 基于DataX组件,同步数据和源码分析

本文源码:GitHub·点这里 || GitEE·点这里 一、DataX工具简介 1、设计理念 DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、...

知了一笑
05/06
0
0
数据源管理 | 基于DataX组件,同步数据和源码分析

本文源码:GitHub·点这里 || GitEE·点这里 一、DataX工具简介 1、设计理念 DataX是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、...

知了一笑
05/06
0
0

没有更多内容

加载失败,请刷新页面

加载更多

绕过移动端系统限制的 dlopen 库 byOpen

byOpen是一个绕过移动端系统限制的增强版dlfunctions库。 支持特性 Android 支持App中加载和使用Android系统库接口(即使maps中还没有被加载也支持)。 Android 7以上dlopen, System.load都是...

shzwork
昨天
0
0
Golang学习系列第二天:变量、常量、数据类型和流程语句

继golang第一天后,今天学习下golang的变量、常量、数据类型和控制流语句。 做过其他编程语言(比如JavaScript,java,python)项目的话,其实很好理解变量、常量、数据类型和控制流。 变量也...

董广明
昨天
20
0
redis系列之——一致性hash算法

一致性hash算法你了解吗?什么时候使用?解决什么问题?redis集群模式使用了一致性hash算法了吗? 数据分片(sharding) 分布式数据存储时,经常要考虑数据分片,避免将大量的数据放在单表或...

诸葛小猿
昨天
15
0
IMDB是否提供API? [关闭] - Does IMDB provide an API? [closed]

问题: I recently found a movie organizer application which fetches its data from the IMDB database . 最近,我发现了一个电影管理器应用程序,该应用程序从IMDB数据库中获取其数据。 ...

fyin1314
昨天
14
0
Elasticsearch系列之Query DSL

1 前言 我们先通过阅读官方文档,了解一下什么是 Query DSL 。 1.1 Query DSL Elasticsearch provides a full Query DSL (Domain Specific Language) based on JSON to define queries. DSL是......

冯文议
昨天
20
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部