加载中
Spark SQL编程

1、测试数据   val acTransList = Seq("SB10001,1000", "SB10002,1200",     "SB10003,8000", "SB10004,400", "SB10005,300", "SB10006,10000",     "SB10007,500", "SB10008,56", "SB10009,30",...

2017/03/27 22:55
128
Spark编程基础

1、什么是Spark RDD   a. Spark RDD is immutable(不可变)   b. Spark RDD is distributable(分布式)   c. Spark RDD lives in memory(驻内存)   d. Spark RDD is strongly typed(强类型) 2、开...

2017/03/27 14:33
53
Spark Streaming + Kafka 开发示例

1、确保JDK、Scala、Kafka等已安装完毕 2、Window下安装Spark a. 下载hadoop-2.7.3.tar.gz解压到D:\Install,并配置环境变量HADOOP_HOME b. 下载hadoo2.7.3-winutils.zip的hadoop.dll和winut...

2017/03/22 19:47
567
Kafka安装

1、安装JDK(1.8.x) 2、安装zookeeper a. 下载zookeeper-3.4.9.tar.gz b. 解压到D:\Install目录下 c. 进入D:\Install\zookeeper-3.4.9\conf目录,将zoo_sample.cfg重名为zoo.cfg,并做以下修改...

2017/03/22 19:30
125
Spark集群安装部署

1、安装前准备 a. 确保hadoop已安装完毕 b. 确保scala已安装完毕 下载scala-2.11.8.tgz cd /usr/app tar -zxvf scala-2.11.8.tgz mv scala-2.11.8 scala #添加环境变量 vi /etc/profile ...

2017/03/18 12:24
99
Linux常用指令

####################################################### #追加文本内容1 cat >>input.txt <<EOF #追加内容 1.xx 2.xx EOF #追加文本内容2 echo ' #追加内容 1.xx 2.xx ' >> input.t...

2017/03/13 22:20
1

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部