加载中
纯Java可视化的分布式计算平台

一:平台效果: 1. NameNode 基于Swing开发的任务调度系统 2. DataNode 基于Swing开发的任务执行器 3.辅助工具 MyZooKeeper 基于Swing实现的Naming Service 服务注册与发现管理器 MQ 基于Swi...

2017/07/17 22:25
271
SparkSql学习2 —— 在内存中分析2000万数据

上一篇,我们借助Sqlite分析了2000w条数据,分析结果不错,但有一个问题:造数据很耗时(花费了2个小时)、sql查询同样很耗时(分组汇总查询一次大概需要30秒)。 那么,我们可以尝试下直接在...

2016/06/30 11:22
31
谈“优化”的本质

优化的本质,是模拟,是用强项去(模拟)替代弱项。 举证一: 例如,云计算中,对于大数据的存储(TB、PB级别的数据),任何一种普通的文件系统都是难以承受这种数量级的数据的。因此Hdfs的方...

2016/06/30 10:31
27
SparkSql学习1 —— 借助SQlite数据库分析2000万数据

总所周知,Spark在内存计算领域非常强势,是未来计算的方向。Spark支持类Sql的语法,方便我们对DataFrame的数据进行统计操作。 但是,作为初学者,我们今天暂且不讨论Spark的用法。我给自己提...

2016/06/30 10:01
102
javascript的瑞士军刀: ns.js

之所以起ns这个名字,完全是因为ns是namespace的缩写。在js中急需一套简单好用的工具包,去简化你的开发任务。ns.js就因此而诞生了。

2016/05/20 17:01
66
Swing参照Android采用XML的方式自动布局

程序员之所以选择使用一种技术,其背后会有很多种原因,有从项目需求出发的,有从个人偏好出发的。 但一项技术如果想流行开来,必定需要满足很多条件,其中最重要的一点便是简单性! 复杂、繁...

2016/05/20 16:21
136
轻量级的框架,讲究小而美

什么才是轻量级框架? 就是那种不需要你做太多的事情、开箱即用的工具类。 小而美,是轻量级框架的核心特征。

2016/05/20 15:42
35
分布式计算、大数据的感悟

对比 MapReduce、Storm、4in1、Hive、Impala等分布式计算框架,可以得出如下结论: 普适(例如MapReduce框架 )是优点,但也是限制所在。 普适采用的是“一条道跑到黑”的理论,对于结构简单...

2016/01/06 11:43
154

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部