文档章节

数据仓库实施模式之浅见

 数据分析师
发布于 2014/11/21 10:28
字数 714
阅读 8
收藏 0

题外话:跟数据打交道摸爬滚打有几个年头了,在传统的金融行业干过,互联网行业呢仍在努力中,移动互联网行业也接触了一些,其他行业(的数据分析、数据平台或者数据仓库)也跟小伙伴们在一些群里讨论过,切入正题:下面呢就我所接触的这些行业/项目共同的实施模式抽象一下,总结一下:)

个人的体会是所有企业、公司对数据分析、数据平台、数据仓库实施的模式,泛方向上看都是采用由底向上的模式开始的(PS:什么是由底向上模式可以度娘)。这个如果用后来金博士与因梦大师关于数据仓库建设实施的观点来说的话接近于金博士的先集市再仓库的观点,都先有特定分析需求或特定报表开始,然后再到平台。这个我们可以追溯到最原始的纸质报表时代(自定义为数据分析1.0时代),当时的报表多数是针对某些部门,某些统计数据。再到现在的各分析工具,传统数据仓库/数据平台(2.0时代)也是先做一些部门的数据一些关键指标报表(尤其是互联网公司要先让VPBOSS们先看到效果,要快),然后再规划重构平台,最后到现在的开源数据分析解决方案、数据仓库一体机(基于MPP体系结构的3.0时代),所有这些在统一平台前都是会由一些特定的分析需求或特定报表而先使用,先见效果再来,在尝到了“甜头”之后,对统一数据平台/数据仓库、数据中心的迫切要求就来了,必须得建,得弄了,才会再统一规划重构数据中心、数据平台、数据仓库,这时的实施模式就会由原来的自底向上转变为站在更高的角度下的自顶向下模式了。需要说明的是在自顶向下模式(数据仓库平台)的构建过程中原来的data mart集市将会继续保留。直到平滑过渡 :)

在由自顶向下模式(数据仓库平台)的构建过程中规划是尤为重要的,这个规划包括但不仅仅有平台的定位,技术方案的选型,人员的配备,系统的架构,详细的设计等(下篇会谈下这个)。这里还有要说的一个就是有时我们看重的不仅仅是我们把事情做成的结果,其实我们更注重这个过程。

© 著作权归作者所有

共有 人打赏支持
粉丝 29
博文 1645
码字总数 2338861
作品 0
邢台
胖子哥大数据之路(一)-数据仓库也需要大数据

一、楔子   大数据传统企业实施,其路漫漫,绝不会如昙花一现,探索大数据在传统行业的实施之路,寻找一条适合传统行业的企业大数据实施方法体系,是我执着坚守的信念,大数据是一种信仰,...

张子良
2014/02/12
0
11
胖子哥的大数据之路(三)- 大数据仓库的需求分析该怎么做

一、引言   基于大数据技术构建数据仓库平台,源于大数据技术本身的不成熟和普及度问题,以及辅助工具的缺失,注定了其实施过程与传统数据仓库的差异性,和 更大的实施难度。本文针对大数据...

张子良
2014/02/20
0
0
我所经历的大数据平台发展史(上)——非互联网时代

这个数据平台发展史仅是我自己经历过的由传统数据平台到互联网数据平台发展的一些简单回忆,文章引用了历史项目&平台规划架构,在这里不做更深入描述。 我是从2000年开始接触数据仓库,大约0...

李博源
2016/02/18
0
0
实现商业智能的步骤

实现商业智能的步骤 商业智能,更准确地来说,并不是一款软件,可以一键安装。商业智能,更偏向于是一种针对企业信息化遇到的问题所提出的解决方案。因此,商业智能的实施无法一蹴而就,它是...

必爱之帆
2014/09/09
141
1
胖子哥的大数据之路(二)- 大数据结构化数据存储应用模式

一、楔子   胖子哥是我网名,叫了很多年的网名,网名的来历与自己的沧桑和身材有关,不知是IT改变了我,显得苍老,还 是我本就苍老,顺应了IT行业的需要。25岁那面,曾被跟我一样高的漂亮美...

张子良
2014/02/14
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

bat强制启用宏

运行bat文件后,将宏的安全等级设为低,达到启用宏的目的。 REM 这个文件将提供用户快速设置Excel宏的安全等级@ECHO OFFCLS:cmd4REG ADD "HKEY_CURRENT_USER\Software\Mi...

tedzheng
7分钟前
0
0
流,用声明性的方式处理数据集 - 读《Java 8实战》

引入流 Stream API的代码 声明性 更简洁,更易读 可复合 更灵活 可并行 性能更好 流是什么? 它允许以声明方式处理数据集合 遍历数据集的高级迭代器 透明地并行处理 简短定义:从支持数据处理...

yysue
9分钟前
1
0
postman发送json格式的post请求

postman发送json格式的post请求 在地址栏里输入请求url:http://127.0.0.1:8081/getmoney 选择“POST”方式, 在“headers”添加key:Content-Type , value:application/json 点击"body",''ra...

两广总督bogang
15分钟前
0
0
Javascript将html转成pdf,下载(html2canvas 和 jsPDF)

最近碰到个需求,需要把当前页面生成pdf,并下载。弄了几天,自己整理整理,记录下来,我觉得应该会有人需要 :) 项目源码地址:https://github.com/linwalker/render-html-to-pdf html2ca...

孟飞阳
16分钟前
0
0
pureftp源码编译及设定

--- use for RHEL 567 and Ubuntu 1604 1. download pureftpd wget http://download.pureftpd.org/pub/pure-ftpd/releases/pure-ftpd-1.0.47.tar.bz2 2. install gcc #apt-get install -y li......

zzimac
18分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部