文档章节

大数据Spark蘑菇云前传第1课:大数据时代的“黄金”语言Scala(学习笔记)

jcchoiling
 jcchoiling
发布于 2016/08/08 18:25
字数 257
阅读 22
收藏 0
本課課程:
  1. JVM 企業霸主地位與今日 Java 式微
  2. “黄金”语言Scala
  3. Scala 在大數據中的“黄金”地位
 
JVM,是一個代理模式:裡面有代理端和宮戶端的模式。Hadoop 裡的 Name Node 和 Data Node 的通信也是代理模式;Spark 中的 Master 和 Executor 中的通信也是代理模式。它把設置和實理分理開
 
Scala 是大數據中第一重要的技術,Spark 的框架實現語言和首選開發語言! 而 Spark 是目前美國第一賺錢的大數據技術; Scala 也是業界公認的第一重要的消息組件 Kafka 的實現語言和首選開發語言,Kafka 具有無可X敵的吞吐量和消息數據的持久化能力; 
 
Python 是一種動態語言,它不支持靜態檢查!
 
下圖總結一下Spark可以如何與其他技術結合起來:
 
 
 
 

© 著作权归作者所有

共有 人打赏支持
jcchoiling
粉丝 2
博文 10
码字总数 7074
作品 0
香港
私信 提问
【Spark亚太研究院系列丛书】Spark实战高手之路-第3章Spark架构设计与编程模型第1节②

三、你为什么需要Spark; 你需要Spark的十大理由: 1,Spark是可以革命Hadoop的目前唯一替代者,能够做Hadoop做的一切事情,同时速度比Hadoop快了100倍以上: Logistic regression in Hadoo...

Spark亚太研究院
2014/12/16
0
1
教你如何成为Spark大数据高手

Spark目前被越来越多的企业使用,和Hadoop一样,Spark也是以作业的形式向集群提交任务,那么如何成为Spark大数据高手?下面就来个深度教程。 分享之前我还是要推荐下我自己创建的大数据学习交...

风火数据
05/20
0
0
基于Spark环境对比Python和Scala语言利弊

在数据挖掘中,Python和Scala语言都是极受欢迎的,本文总结两种语言在Spark环境各自特点。 本文翻译自 https://www.dezyre.com/article/Scala-vs-Python-for-apache-Spark/213 1.性能对比 由...

A尚学堂Len老师
08/20
0
0
学习大数据这三个关键技术是一定要掌握!

大数据时代全面来临,大数据、人工智能等技术引领科技创新潮流,获得国家政策大力支持,前景广阔。学习大数据技术的人自然是络绎不绝, 学习大数据虽然是一个趋势,但也要注意大数据培训课程...

董黎明
08/19
0
0
Spark GraphX宝刀出鞘,图文并茂研习图计算秘笈与熟练的掌握Scala语言【大数据Spark

Spark GraphX宝刀出鞘,图文并茂研习图计算秘笈 大数据的概念与应用,正随着智能手机、平板电脑的快速流行而日渐普及,大数据中图的并行化处理一直是一个非常热门的话题。图计算正在被广泛地...

Spark亚太研究院
2014/08/29
0
0

没有更多内容

加载失败,请刷新页面

加载更多

颜色模型与颜色应用---RGB颜色模型

中国龙-扬科
26分钟前
3
0
网络优化-tcp和udp的协作

TODO

梦想游戏人
28分钟前
4
0
list和数组转化

Java中List转换为数组,数组转List List转换为Array可以这样处理: ArrayList<String> list=new ArrayList<String>(); String[] strings = new String[list.size()]; list.toArray(strings);......

west_coast
29分钟前
3
0
LSP 商户端API

Your domain:                  lsp-api-merchant.hhs2717.cnVirtualhost conf:             /usr/local/nginx/conf/vhost/lsp-api-merchant.hhs2717.cn.confDirectory of:......

BeanHo
38分钟前
2
0
设计模式 之 访问者模式

设计模式 之 访问者模式 概念 核心理念:将数据结构与算法分离。 使用场景:数据结构不变动,算法经常变动。 1、一个Visitor类存放被访问的对象,访问者主要处理具体算法与行为。 // 访问者...

GMarshal
42分钟前
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部