文档章节

sparkCore源码解析之思维脑图

freeli
 freeli
发布于 01/14 19:27
字数 165
阅读 7
收藏 0

在学习sparkCore时,有几个模块的概念理解不是很透彻,故对照源码进行学习,并将结果一脑图的形式呈现,方便后续的持续学习。

job

详细内容见:

  1. sparkCore源码解析之block
  2. sparkCore源码解析之partition
  3. sparkCore源码解析之Job
  4. sparkCore源码解析之shuffle

© 著作权归作者所有

共有 人打赏支持
freeli
粉丝 1
博文 61
码字总数 85793
作品 0
朝阳
程序员
私信 提问
Spark_Streaming源码解析之思维脑图

sparkStreaming源码思维脑图: 脑图详解: 此博文共分为四个部分: DAG定义 Job动态生成 数据的产生与导入 容错 脑图制作参考

freeli
2018/12/07
0
0
sparkCore源码解析之block

---title: sparkCore源码解析之blocksubtitle: RDD组成之block源码分析keywords: [spark,core,源码,block]author: liyzdate: 2019-01-14tags: [spark,源码解析] category: [spark] 1. 标记 ......

freeli
01/14
0
0
sparkCore源码解析之shuffle

---title: sparkCore源码解析之shufflesubtitle: shuffle的源码解析description: map and reducekeywords: [spark,core,源码,shuffle]date: 2019-01-14tags: [spark,源码解析] category: [sp......

freeli
01/14
0
0
sparkCore源码解析之partition

---title: sparkCore源码解析之partitionsubtitle: 分区的源码解析description: 水塘抽样keywords: [spark,core,源码,partition]author: liyzdate: 2019-01-14tags: [spark,源码解析] categ......

freeli
01/14
0
0
用思维导图读eova,开发效率翻倍

作为一个易上手、开发快的框架,EOVA确实不错。但对于刚入门又懒得读源码和数据库的虫虫们来说,有没有更加懒的办法呢? 思维导图来了,一张图就如把脉一样把eova看得一清二楚,开发起来也就...

zerov
2016/06/22
1K
4

没有更多内容

加载失败,请刷新页面

加载更多

eggjs与sequelize简单demo

参考 egg 官方文档 安装 // 依赖npm install --save egg-sequelize mysql2// ts 类型npm install --save @types/sequelize 插件,config/plugin.ts import { EggPlugin } from 'egg';......

Geeyu
54分钟前
1
0
看过上百部片子的这个人教你视频标签算法解析

本文由云+社区发表 随着内容时代的来临,多媒体信息,特别是视频信息的分析和理解需求,如图像分类、图像打标签、视频处理等等,变得越发迫切。目前图像分类已经发展了多年,在一定条件下已经...

腾讯云加社区
今天
4
0
2. 红黑树

定义:红黑树(Red-Black Tree,简称R-B Tree),它一种特殊的二叉查找树(Binary Search Tree)。 要理解红黑树,先要了解什么是二叉查找树。在上一章中,我们学习了什么是二叉树,以及二叉树...

火拳-艾斯
今天
3
0
input的button类型,点击页面跳转

一、input type=button 不做任何操作 例如: <input type="button" class="btn btn-primary" style="width: 30%" value="返回" onclick="window.location.href='/users/list'"></input> onc......

Sunki
今天
1
0
踩坑:js 小数运算出现精度问题

背景 在学习小程序商城源码时发现了这个问题,单价可能出现小数,小数之间运算结果会莫名其妙多出一大串数字,比如下面这样👇。 在此之前我是知道 js 中著名的 0.1 + 0.2 != 0.3 的问题的,...

dkvirus
今天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部