文档章节

利用元数据管理数据质量

阿里云大学云百科
 阿里云大学云百科
发布于 2018/03/06 16:17
字数 608
阅读 97
收藏 3

什么是元数据
       任何文件系统中的数据分为数据和元数据。数据是指普通文件中的实际数据,而元数据指用来描述一个文件的特征的系统数据,诸如访问权限、文件拥有者以及文件数据块的分布信息(inode...)等等。在集群文件系统中,分布信息包括文件在磁盘上的位置以及磁盘在集群中的位置。用户需要操作一个文件必须首先得到它的元数据,才能定位到文件的位置并且得到文件的内容或相关属性。
元数据管理方式
       元数据管理有两种方式。集中式管理和分布式管理。集中式管理是指在系统中有一个节点专门司职元数据管理,所有元数据都存储在该节点的存储设备上。所有客户端对文件的请求前,都要先对该元数据管理器请求元数据。分布式管理是指将元数据存放在系统的任意节点并且能动态的迁移。对元数据管理的职责也分布到各个不同的节点上。大多数集群文件系统都采用集中式的元数据管理。因为集中式管理实现简单,一致性维护容易,在一定的操作频繁度内可以提供较满意的性能。缺点是单一失效点问题,若该服务器失效,整个系统将无法正常工作。而且,当对元数据的操作过于频繁时,集中的元数据管理成为整个系统的性能瓶颈。
       分布式元数据管理的好处是解决了集中式管理的单一失效点问题, 而且性能不会随着操作频繁而出现瓶颈。其缺点是,实现复杂,一致性维护复杂,对性能有一定影响。

 

如何利用元数据管理数据质量:点击这里

更多精品课程:

云数据库Redis版使用教程

玩转云存储对象存储OSS使用入门

阿里云CDN使用教程

负载均衡入门与产品使用指南

阿里云大学官网(阿里云大学 - 官方网站,云生态下的创新人才工场

© 著作权归作者所有

阿里云大学云百科
粉丝 14
博文 596
码字总数 262969
作品 0
朝阳
私信 提问
Talend 4.0 全球同步发布

Talend,在开源数据管理软件市场公认的领导者,于4月13日宣布发布了公司和数据集成市场的重要里程碑产品,Talend 4.0。随着公司的数据管理旗舰解决方案的这一重大升级,Talend现在为业界提供...

ychenETL
2010/04/19
720
2
数据价值提升新模式:数据资产管理“AIGOV五星模型”

作者介绍 程永新,新炬网络董事、副总经理,DAMS中国数据资产管理峰会联合发起人。长期钻研国内外数据资产管理理论与实践,数据资产管理五星模型与服务框架提出者,大数据领域资深专家,多项...

程永新等作者
2018/09/10
0
0
加米谷大数据带你了解2018年五个大数据热门岗位

  数据质量决定了数据对业务的内在价值。信息技术只是这个内在价值的放大镜。因此,高质量的数据与有效的技术相结合是一项巨大的资产,但低质量的数据与有效的技术相结合也是一项巨大的责任...

加米谷大数据
2018/05/24
4
0
数据资产管理“五星模型”与企业级实践

讲师介绍 程永新,新炬网络董事/副总经理,大数据领域资深专家,多项国家发明专利持有人,数据资产管理五星模型提出者,18年电信行业信息化管理经验,计算机本科、工商管理硕士、EMBA。 本文...

程永新
2018/07/10
0
0
规避FB数据危机,详解银监会数据治理指引落地路线

就在前天,Facebook爆发了史上最大的数据危机:其开放API接口给第三方公司,在未经用户许可的情况下,被盗用了高达5千万用户的个人资料。Facebook股价市值在短短两天之间蒸发了600亿美元,同...

DBAplus社群
2018/03/22
0
0

没有更多内容

加载失败,请刷新页面

加载更多

Android 图片加载带进度条的ImageView

https://blog.csdn.net/shu_quan/article/details/79975578

shzwork
20分钟前
7
0
关于XAMPP默认端口80 和443被占用的问题

本文转载于:专业的前端网站➩关于XAMPP默认端口80 和443被占用的问题 关于安装xampp-win32-1.8.1-VC9-installer.zip后启动时候报端口80和443被占用的问题解决 xampp-win32-1.8.1-VC9-instal...

前端老手
22分钟前
6
0
错误Setting the parent of a transform which resides in a Prefab Asset is...

错误日志 Setting the parent of a transform which resides in a Prefab Asset is disabled to prevent data corruption 原因1 用Resouce.Load加载一个prefab,没有实例化直接设置parent ......

XBlock
23分钟前
9
0
Spring boot 配置mybatis

当然任何模式都需要首先引入mybatis-spring-boot-starter的pom文件,现在最新版本是1.1.1(刚好快到双11了 :)) <dependency>    <groupId>org.mybatis.spring.boot</groupId>    <......

雷开你的门
24分钟前
9
0
云栖干货回顾 | 更强大的实时数仓构建能力!分析型数据库PostgreSQL 6.0新特性解读

阿里云 AnalyticDB for PostgreSQL 为采用MPP架构的分布式集群数据库,完备支持SQL 2003,部分兼容Oracle语法,支持PL/SQL存储过程,触发器,支持标准数据库事务ACID。AnalyticDB PG通过行存...

开源中国小二
36分钟前
6
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部