海量小文件存储与Ceph实践

在存储小文件系统时,如何解决如下2个问题: 1. 海量小文件的元数据信息组织与管理 2.

2016/03/09 09:52
2.8K
从内核文件系统看文件读写过程

系统调用 操作系统的主要功能是为管理硬件资源和为应用程序开发人员提供良好的环境,但是计算机系统的各种硬件资源是有限的,因此为了保证每一个进程都能安全的执行。处理器设有两种模式:“...

Tachyon更名为 Alluxio,并发布1.0版本

近日,人气开源分布式内存文件系统Tachyon正式更名为Alluxio,并发布了1.0版本。自从Alluxio的第一个开源版本发布之后,社区的人数从1个迅速增加到200多个,这200多人来自50多个公司,这些公...

scala dynamics 示例

scala 新版本 2.10 引入了 Dynamic 这个 trait,意思上就是希望能够动态的 handle 一些东西

2016/02/03 10:53
500
使用Spark DataFrame针对数据进行SQL处理

DataFrame让Spark具备了处理大规模结构化数据的能力,在比原有的RDD转化方式易用的前提下,计算性能更还快了两倍。本文提供使用DataFrame进行数据处理的样例

What are the differences between Akka and Netty?

What are the differences between Akka and Netty besides their choice of language (Scala vs Java)?...

2015/12/24 11:37
930
python使用pickle,marshal进行序列化、反序列及JSON的使用

Pickle序列化 python的pickle模块实现了基本的数据序列和反序列化。通过pickle模块的序列化操作我们能够将程序中运行的对象信息保存到文件中去,永久存储;通过pickle模块的反序列化操作,我...

如何编写github项目的README.md文件?

编写github项目的README.md是需要一些技巧的,需要了解README.md文件的Markdown标记规则,本文提供Markdown标记的规则与具体的示例文件

Lombok 安装、入门 -spice up your java

Lombok 安装、入门 -编写简洁的JAVA代码 使用Lombok,编写简洁的代码

2015/11/22 14:22
641
2-scala文件操作--自动关闭打开的资源,读取properties文件

使用scala的load pattern自动关闭打开的资源 读取properties文件

scala.Enumeration 枚举示例

在Scala中并没有枚举类型,但在标准类库中提供了Enumeration类来产出枚举。扩展Enumeration类后,调用Value方法来初始化枚举中的可能值。

2015/08/10 10:54
7.6K
在scala中,类和它的伴生对象可以相互访问对方的私有对象

在scala中,类和它的伴生对象可以相互访问对方的私有对象,这个是比较变态的。 scala通过伴生对象,实现类似JAVA的静态方法。

纯函数、透明引用、副作用的含义

Side Effects、referential transparency、Pure function的含义及说明

scala处理日期

scala处理日期

2015/08/03 16:19
8.6K
1-scala文件操作--读写,序列化

scala读写普通文件,对象序列化,读写二进制文件

使用shell脚本运行scala

使用shell脚本运行scala

2015/07/29 12:15
2.1K
如何找回SecureCRT密码

为方便快速登录某系统,经常会对secureCRT会话设置默认登录用户名和密码。时间长了,就忘记了服务器的用户密码,本文讲解如何根据密文找回用户密码。

Ad-hoc queries含义解析

看文档时,都是困惑ad-hoc是什么意思,今天查了资料,总结一下

2015/07/08 16:43
9.1K
Tachyon:Spark生态系统中的分布式内存文件系统

摘要:Tachyon把内存存储的功能从Spark中分离出来, 使Spark可以更专注计算的本身, 以求通过更细的分工达到更高的执行效率。

没有更多内容

加载失败,请刷新页面