spark教程(六)-Python 编程与 spark-submit 命令

hadoop 是 java 开发的,原生支持 java;spark 是 scala 开发的,原生支持 scala; spark 还支持 java、python、R,本文只介绍 python spark 1.x 和 spark 2.x 用法略有不同,spark 1.x 的用...

2019/10/18 14:46
234
spark算子篇-aggregate 系列

aggregate aggregate 是比较常用的 行动 操作,不是很好懂,这里做个解释。 aggregate(zeroValue, seqOp, combOp) zeroValue 是一个初始值,自己根据实际情况进行设定; 首先我们知道 RDD 是...

2019/10/18 14:46
237
spark教程(四)-SparkContext 和 RDD 算子

SparkContext SparkContext 是在 spark 库中定义的一个类,作为 spark 库的入口点; 它表示连接到 spark,在进行 spark 操作之前必须先创建一个 SparkContext 的实例,并且只能创建一个; 利...

2019/10/18 14:44
123
websocket原理

摘抄并用于自查 1. WebSocket 与 HTTP   websocket 协议在 2008 年诞生,2011年成为国际标准。现在所有浏览器都已经支持了。Websocket 的最大特点是,服务器可以主动向客户端推送消息,客户...

2019/10/18 14:07
58
使用Hyper-V安装Ubuntu虚拟机

之前一直用vm,装了win sever 和centos 7然后用了一段时间后没有什么问题,之后玩各种东西接触linux比较多,就想装个Ubuntu玩玩,但是vm总是遇到各种问题,比如开机黑屏,无法关闭,占u和内存...

2019/10/18 12:21
374
第八周

实验六 类的继承 一、实验目的 (1) 理解异常的基本概念: (2) 掌握异常处理方法及熟悉常见异常的捕获方法。 二、实验要求 (1) 练习捕获异常、声明异常、抛出异常的方法、然悉try和catch子...

2019/10/18 10:59
9
day1(老男孩-Python3.5-S14期全栈开发)

作者:赵俊 发布日期:2019/10/18 一、第一个python程序 1、在解释器下写hello world程序运行,与运行外部文件方法 运行外部文件,必须在相应位置创建一个python文件,里面写上语句 2、#!/...

2019/10/18 10:39
3
vue组件库的基本开发步骤(源代码)

上次发布的随笔忘记提供源代码了,今天特地来补充,如果有什么问题,欢迎大家为我修改指正。 vue.config.js文件: const path = require('path') function resolve (dir) { return path.join...

2019/10/18 09:52
455
python输入一个字符串,输出翻转后的字符串(翻转字符串)

题目:输出一个字符串,输出翻转后的字符串。例如:输入字符串a123,输出321a。 方法一:使用列表的reverse方法 1 string=input('请输入一个字符串:') 2 lst=list(string) #使用列表,将列表...

2019/10/18 09:06
346
day09:子查询

子查询:出现在其它语句中的select语句,称为子查询或内查询。外部的查询语句称为主查询或外查询 分类: 按子查询出现的位置:     select 后面(仅仅支持标量子查询)、from后面(支持表...

2019/10/18 08:53
16
C语言I博客作业04

这个作业属于那个课程 c语言程序设计I 这个作业要求在哪里 https://edu.cnblogs.com/campus/zswxy/CST2019-2/homework/9770 我在这个课程的目标是 熟练掌握c语言,学会怎样去做好表格,统计图...

2019/10/18 08:29
5
python函数的基本语法<一>

函数:   一次定义,多次调用,函数可以变相看成变量 函数的阶段:   1.定义阶段   2调用阶段 形参和实参:   定义阶段的参数叫形参,调用阶段的参数叫实参 函数的几种基本用法: #多...

def
2019/10/18 07:54
9
Python开发之路

第一部分 MarkDown 基本语法 001 MarkDown基本语法 第二部分 Python集成环境和解释器 002 Python解释器 003 Python解释器源修改 004 pip的使用 005 Python的IDE之Pycharm的使用 006 Python的...

2019/10/17 23:52
23
VRP文件系统基础

##基本查询命令 ####查看当前目录 pwd pwd [ /all ] [ filename | directory ] <Huawei>pwd flash: ####显示当前目录下的文件信息 dir <Huawei>dir Directory of flash:/ Idx Attr Size(Byt...

2019/10/17 23:50
77
for-in语句和with语句、break和continue语句

for-in语句 for-in语句是一种精准迭代语句,可以用来枚举对象的属性,用以遍历一个对象的全部属性。 for…in声明用于对数组或者对象的属性进行循环操作; for…in循环中的代码每执行一次,就...

2019/10/17 22:48
35
Windows、CentOS虚拟机安装以及yum本地仓库的搭建

1.Windows虚拟机安装 首先用VMware创建一个新的虚拟机 下一步,选择使用安装程序光盘映像文件 输出产品秘钥(可直接从百度上找到) 设置虚拟机的安装路径,以及分配给虚拟机的磁盘大小 下一步...

2019/10/17 21:42
578
Ribbon【入门】

公共依赖: <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>2.0.3.RELEASE</version> ...

2019/10/17 21:21
97

没有更多内容

加载失败,请刷新页面