文档章节

数据仓库实施模式之浅见

 数据分析师
发布于 2014/11/21 10:28
字数 714
阅读 12
收藏 0

题外话:跟数据打交道摸爬滚打有几个年头了,在传统的金融行业干过,互联网行业呢仍在努力中,移动互联网行业也接触了一些,其他行业(的数据分析、数据平台或者数据仓库)也跟小伙伴们在一些群里讨论过,切入正题:下面呢就我所接触的这些行业/项目共同的实施模式抽象一下,总结一下:)

个人的体会是所有企业、公司对数据分析、数据平台、数据仓库实施的模式,泛方向上看都是采用由底向上的模式开始的(PS:什么是由底向上模式可以度娘)。这个如果用后来金博士与因梦大师关于数据仓库建设实施的观点来说的话接近于金博士的先集市再仓库的观点,都先有特定分析需求或特定报表开始,然后再到平台。这个我们可以追溯到最原始的纸质报表时代(自定义为数据分析1.0时代),当时的报表多数是针对某些部门,某些统计数据。再到现在的各分析工具,传统数据仓库/数据平台(2.0时代)也是先做一些部门的数据一些关键指标报表(尤其是互联网公司要先让VPBOSS们先看到效果,要快),然后再规划重构平台,最后到现在的开源数据分析解决方案、数据仓库一体机(基于MPP体系结构的3.0时代),所有这些在统一平台前都是会由一些特定的分析需求或特定报表而先使用,先见效果再来,在尝到了“甜头”之后,对统一数据平台/数据仓库、数据中心的迫切要求就来了,必须得建,得弄了,才会再统一规划重构数据中心、数据平台、数据仓库,这时的实施模式就会由原来的自底向上转变为站在更高的角度下的自顶向下模式了。需要说明的是在自顶向下模式(数据仓库平台)的构建过程中原来的data mart集市将会继续保留。直到平滑过渡 :)

在由自顶向下模式(数据仓库平台)的构建过程中规划是尤为重要的,这个规划包括但不仅仅有平台的定位,技术方案的选型,人员的配备,系统的架构,详细的设计等(下篇会谈下这个)。这里还有要说的一个就是有时我们看重的不仅仅是我们把事情做成的结果,其实我们更注重这个过程。

© 著作权归作者所有

共有 人打赏支持
粉丝 30
博文 1645
码字总数 2338861
作品 0
邢台
胖子哥大数据之路(一)-数据仓库也需要大数据

一、楔子   大数据传统企业实施,其路漫漫,绝不会如昙花一现,探索大数据在传统行业的实施之路,寻找一条适合传统行业的企业大数据实施方法体系,是我执着坚守的信念,大数据是一种信仰,...

张子良
2014/02/12
0
11
胖子哥的大数据之路(三)- 大数据仓库的需求分析该怎么做

一、引言   基于大数据技术构建数据仓库平台,源于大数据技术本身的不成熟和普及度问题,以及辅助工具的缺失,注定了其实施过程与传统数据仓库的差异性,和 更大的实施难度。本文针对大数据...

张子良
2014/02/20
0
0
我所经历的大数据平台发展史(上)——非互联网时代

这个数据平台发展史仅是我自己经历过的由传统数据平台到互联网数据平台发展的一些简单回忆,文章引用了历史项目&平台规划架构,在这里不做更深入描述。 我是从2000年开始接触数据仓库,大约0...

李博源
2016/02/18
0
0
实现商业智能的步骤

实现商业智能的步骤 商业智能,更准确地来说,并不是一款软件,可以一键安装。商业智能,更偏向于是一种针对企业信息化遇到的问题所提出的解决方案。因此,商业智能的实施无法一蹴而就,它是...

必爱之帆
2014/09/09
141
1
胖子哥的大数据之路(二)- 大数据结构化数据存储应用模式

一、楔子   胖子哥是我网名,叫了很多年的网名,网名的来历与自己的沧桑和身材有关,不知是IT改变了我,显得苍老,还 是我本就苍老,顺应了IT行业的需要。25岁那面,曾被跟我一样高的漂亮美...

张子良
2014/02/14
0
0

没有更多内容

加载失败,请刷新页面

加载更多

开发命令行工具的 12 个最佳实践

简评:设计良好的命令行应用是极富生产力的工具,本文介绍了开发命令行工具的 12 个最佳实践 CLI 是构建产品的绝佳方式,与 Web 应用不同的是它需要的时间更少,并且功能更强大。使用Web,你...

极光推送
16分钟前
2
0
DRAM和NAND Flash合约价持续走下坡路

大伙儿关心的内存和SSD产品价格在年内有望继续迎来一波减价。 据TrendForce旗下的DRAMeXchange发布的最新报告显示,本应该是购物旺季的Q4,DRAM芯片和NAND Flash芯片的合约采购价均呈现疲软的...

linux-tao
20分钟前
0
0
Vue学习记录

Vue学习记录 Vue实例 Vue实例的创建 var vm = new Vue({ // 选项}) 数据冻结 使用 Object.freeze(),这会阻止修改现有的属性,也意味着响应系统无法再追踪变化。 var obj = { foo: 'ba...

BakerZhu
20分钟前
0
0
day124-20181022-英语流利阅读-待学习

靠打零工能走上人生巅峰吗? Daniel 2018-10-22 1.今日导读 “零工经济”,一般指通过网站或 App 获得一些零碎的工作机会,从事不稳定的工作,赚取不稳定的薪水。由于从事这样的工作门槛相比...

飞鱼说编程
26分钟前
2
0
python学习笔记

马克

孙幼凌
34分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部