文档章节

聊聊大数据的三重门

小贱1991
 小贱1991
发布于 2016/08/02 10:47
字数 1533
阅读 23
收藏 1
点赞 0
评论 0

聊聊大数据的三重门

  人类实现了信息的存储,就像Time Machine一样,回到任意一个点,通过已有的数据重新构建过去的影像,也能够预测未来,模拟一个虚拟而准确的未来环境。兄弟连云计算培训就跟大家聊聊这大数据的三重门www.lampbrother.net

 

  大数据第一重

  这是大数据的第一阶段,也是大数据当前所处的阶段。这个阶段的表象是:

  大数据部门在大部分公司遍地开花,

  大家一拥而上

  这一阶段的必然结果是:

  大家发现耗费了大量人力物力,

  终究是收效有限

  虽然大部分企业的消耗了大量的资金,却没有带来应有的价值,但带来的一个副产品是

  企业花的钱给工业界和学术界

  积累了大量的大数据人才

  这些人才会在第二重阶段时产生巨大的价值。

  为什么云计算培训会做出上面的结论?我先说个例子吧,光是搭建一个像样子的数据平台,就需要5-6个熟练的大数据工程师折腾大半年,还不包括真正基于之上的多维分析,机器学习(预测)等产品,而这些产品的难度也是很大的,需要大量的人力,关键是还不一定能做好。要达到高效的计算,以及系统的稳定,机器的数量也有不少要求,因为大部分大数据组件都是分布式的。

  与此同时,很多人已经意识到了大数据的实施难度,一些专门服务于大数据产业的公司也开始慢慢诞生成长,这些公司覆盖了从大数据组件开发,到大数据平台构建,再到基于大数据平台的上层解决方案,并且在各个行业慢慢伸出了自己的触角。

 譬如:当前比较火热的互联网金融,其实就是依托于大数据,做各种原先金融行业很看重的信征,欺诈检测,自动放贷等。这些基于大数据而带来的技术变革大大提高了金融行业的效率,为资金更快的流转提供了基础,从而对所有行业都会产生深远影响。

 

  然而这些公司在当前阶段还没有形成主流,各个公司依然是偏向于选择自建数据平台。

  大数据第二重

  进入到第二重时,会有明显的四个特征:

  在大量的中小企业碰壁之后,他们意识到,自己做大数据并不是最明智的选择,转而寻方案解决提供商。

  大量的大数据服务公司开始已经做好原始积累。在技术和行业经验上得到充分的发展,并且在行业形成较好的口碑,其行业触角也已经覆盖大部分产业。

  大公司发现毕竟自己的主业不是去做大数据,而是基于大数据的结果更好的帮助自己已有的产品或者导向做好新的产品。这个时候大公司本身也开始慢慢寻求一些第三方大数据公司的支持。

 

  更好的数据法规支持,保证行业内的数据隐私,安全等(很重要)。

 

  此时,整个大数据行业开始慢慢恢复到理性成熟阶段,大家各司其职。BAT依然会以自己的主业为主,大数据虽然是一个产生变革的技术,然而终究是为了产品服务的,应该让拥有大数据基因的公司去做更好些。这也是人类分工体系下必然产生的。

 

  这个时候由于有了第一重阶段的人才积累,很多人会出来创业,大数据创业会成为潮流,并且枝繁叶茂,渐渐覆盖各个行业的各个领域。随着时间推移,一些公司在各自的领域深耕,渐渐形成一些领域内的重量级解决方案公司,而不管是中小型企业,还是大企业,慢慢都会将大数据业务慢慢转移到更专业的大数据公司。

 

  此阶段,可能私有部署依然是主流。

 

  大数据第三重

 

  到第三重的时候,也会有几个特点:

  1.大数据企业也会形成三极,类似现在的BAT,拥有了产业里的哥斯拉。

  2.云计算的发展已经到了:

  中小型公司,绝大多数都已经在云端

  大型公司,已经完全普及混合云架构

 

  这个时候,大数据领域的几家巨头公司,慢慢将自己的业务场景抽象和覆盖的差不多,慢慢成为了大数据云服务公司。

 

  此时可能会产生如下的几个有意思的情况:

 

  这几家大数据公司会在几家主流云平台搭建各自的大数据平台,方便企业的数据接入

 

  大部分企业内部可能只有分析师,不再有数据平台架构师,算法工程师等。具体情形和现在使用公有云相似,一些做基础运维的岗位慢慢都被淘汰。

 

  对应的大数据公司,产生的效益应该要远远好于用户自己搞,因为他们积累的大量的行业共通经验。应该可以节约了大量的企业和社会成本。

 

  后话

 

  云化是整个IT产业的趋势,而在其上的各个产业,譬如大数据产业,也终究是逃不掉这个大趋势的。 大数据,还有云计算,是整个新的信息革命的基础,愿大家乘着这巨浪,到达属于自己的彼岸。

© 著作权归作者所有

共有 人打赏支持
小贱1991
粉丝 1
博文 24
码字总数 25924
作品 0
昌平
[转]软件开发的“三重门“

by 陈皓 @ http://coolshell.cn 自从上次写了“程序员技术练级攻略” 以来,就觉得似乎还有很多东西没有谈到,但当时没有继续思考了。而春节前有人问我,是做底层技术,还是做业务。这问题让...

Yisen ⋅ 2012/03/24 ⋅ 3

大数据:“给我一把98K,带你吃鸡吃到嗨”

想要在大数据行业里'吃鸡’,首先我们的了解大数据以后的发展趋势。 2018年大数据技术目前已日趋成熟,日后会在系统研发、大数据应用开发和大数据分析方向上分类更加的精确和细致。总的来说大...

琳达老师 ⋅ 05/02 ⋅ 0

软件开发的“三重门”

自从上次写了“程序员技术练级攻略” 以来,就觉得似乎还有很多东西没有谈到,但当时没有继续思考了。而春节前有人问我,是做底层技术,还是做业务。这问题让我思考了很多,不由自主地回顾了...

虫虫 ⋅ 2012/01/30 ⋅ 26

破局移动时代即时通讯 云服务路在何方?

  【IT168 评论】曾几何时,OICQ、QQ、MSN等专注于即时通讯的平台独树一帜,将即时通讯打造为PC时代的三大盈利模式之一。如今,移动互联网已渗入生活的“骨髓”,即时通讯已无处不在,成为...

it168网站 ⋅ 2017/09/26 ⋅ 0

成为技术老大技术管理篇5一技术演变史(16)

前面几篇,我们聊了前端、后端、客户端技术的发展变迁。今天,我们聊聊数据统计分析到大数据的演变。 报表 说到数据统计,最早是从企业软件开始的。技术的演变并不是独立进行的,他是随着企业...

铁棍山药 ⋅ 05/11 ⋅ 0

30个常见的大数据面试题 让你的薪资提升一个等级

经历了水深火热的大数据学习,终于拨开云雾见天明了,但你离成功总是还差了一步,那就是拿到大数据工程师的Offer。 在电脑旁奋斗了无数个日夜,代码敲了无数遍,项目整改了无数遍,只为了得到...

嘿你好夏天 ⋅ 04/26 ⋅ 0

Eova 1.5.1 Oracle 兼容,Java Web 快速开发平台

主要兼容Oracle,Mysql用户自行判定是否有更新必要! 兼容Oracle,提供Oracle完整脚本、配置,可直接运行! [新增]可在界面直接配置多子表 [新增]排除不需要登录拦截的URL // 不需要登录拦截...

Jieven ⋅ 2016/02/16 ⋅ 14

资源 | 吴恩达斯坦福CS230深度学习课程全套资料放出(附下载)

在人工智能领域,深度学习的重要性不言而喻。各大高校纷纷推出具有自己特色的课程,斯坦福大学也不例外。 在deeplearning.ai深度学习专项课程之后,吴恩达在斯坦福又开了一门学分课,这门课涉...

技术小能手 ⋅ 06/21 ⋅ 0

抛开Hadoop生死论,我们可以聊聊生态演进!

  【IT168 评论】2017年,Gartner的一份《2017年数据管理技术成熟度曲线》报告极其明显得标识出Hadoop即将进入衰落席。对此,IT168走访了国内一系列大数据厂商,在过去几个月,我们共同探讨...

it168网站 ⋅ 05/03 ⋅ 0

火影忍者番外篇-Eova隐藏技能

用通俗的语言,娱乐的心态,茶余饭后的时间,来掌握晦涩的技术,Eova不仅要开发So Easy,还要学习So Easy! 希望《火影忍者番外篇-Eova隐藏技能》系列博文能为Eova用户,拨开迷雾! 卡卡西:...

Jieven ⋅ 2016/01/27 ⋅ 10

没有更多内容

加载失败,请刷新页面

加载更多

下一页

个人博客的运营模式能否学习TMALL天猫质量为上?

心情随笔|个人博客的运营模式能否学习TMALL天猫质量为上? 中国的互联网已经发展了很多年了,记得在十年前,个人博客十分流行,大量的人都在写博客,而且质量还不错,很多高质量的文章都是在...

原创小博客 ⋅ 今天 ⋅ 0

JavaScript零基础入门——(十一)JavaScript的DOM操作

JavaScript零基础入门——(十一)JavaScript的DOM操作 大家好,欢迎回到我们的JavaScript零基础入门。最近有些同学问我说,我讲的的比书上的精简不少。其实呢,我主要讲的是我在开发中经常会...

JandenMa ⋅ 今天 ⋅ 0

volatile和synchronized的区别

volatile和synchronized的区别 在讲这个之前需要先了解下JMM(Java memory Model :java内存模型):并发过程中如何处理可见性、原子性、有序性的问题--建立JMM模型 详情请看:https://baike.b...

MarinJ_Shao ⋅ 今天 ⋅ 0

深入分析Kubernetes Critical Pod(一)

Author: xidianwangtao@gmail.com 摘要:大家在部署Kubernetes集群AddOn组件的时候,经常会看到Annotation scheduler.alpha.kubernetes.io/critical-pod"="",以表示这是一个关键服务,那你知...

WaltonWang ⋅ 今天 ⋅ 0

原子性 - synchronized关键词

原子性概念 原子性提供了程序的互斥操作,同一时刻只能有一个线程能对某块代码进行操作。 原子性的实现方式 在jdk中,原子性的实现方式主要分为: synchronized:关键词,它依赖于JVM,保证了同...

dotleo ⋅ 今天 ⋅ 0

【2018.06.22学习笔记】【linux高级知识 14.4-15.3】

14.4 exportfs命令 14.5 NFS客户端问题 15.1 FTP介绍 15.2/15.3 使用vsftpd搭建ftp

lgsxp ⋅ 今天 ⋅ 0

JeeSite 4.0 功能权限管理基础(Shiro)

Shiro是Apache的一个开源框架,是一个权限管理的框架,实现用户认证、用户授权等。 只要有用户参与一般都要有权限管理,权限管理实现对用户访问系统的控制,按照安全规则或者安全策略控制用户...

ThinkGem ⋅ 昨天 ⋅ 0

python f-string 字符串格式化

主要内容 从Python 3.6开始,f-string是格式化字符串的一种很好的新方法。与其他格式化方式相比,它们不仅更易读,更简洁,不易出错,而且速度更快! 在本文的最后,您将了解如何以及为什么今...

阿豪boy ⋅ 昨天 ⋅ 0

Python实现自动登录站点

如果我们想要实现自动登录,那么我们就需要能够驱动浏览器(比如谷歌浏览器)来实现操作,ChromeDriver 刚好能够帮助我们这一点(非谷歌浏览器的驱动有所不同)。 一、确认软件版本 首先我们...

blackfoxya ⋅ 昨天 ⋅ 0

线性回归原理和实现基本认识

一:介绍 定义:线性回归在假设特证满足线性关系,根据给定的训练数据训练一个模型,并用此模型进行预测。为了了解这个定义,我们先举个简单的例子;我们假设一个线性方程 Y=2x+1, x变量为商...

wangxuwei ⋅ 昨天 ⋅ 0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部