加载中
hadoop 远程调度(四)

简介 继续上一篇博客远程调度(三)来介绍hadoop远程调度过程。上一篇主要写rpc 服务端启动,和接受到客户端请求,处理请求,及把请求封装成一个call对象。接下来介绍怎么执行客户端请求,和...

2017/05/05 11:01
33
hadoop 远程调度(三)

简介 前几篇博客介绍了NIO和hadoop rpc的主要流程。本文主要介绍hadoop rpc server端接受到请求怎么处理,怎样返回。 rpc 服务端提供服务的大致流程 rpc server端在接受到客户端请求后,会解...

2017/05/04 11:40
33
hadoop 远程调度(二)

hadoop 远程调度(二) [toc] 远程调度例子 //定义接口 public interface ClientProtocol extends org.apache.hadoop.ipc.VersionedProtocol{ long versionID = 123456; String ech...

2017/05/03 09:39
340
hadoop远程过程调度(1)

#hadoop远程过程调度(1) [toc] RPC基础知识 rpc 原理 rpc就是允许程序调度位于其他机器上的过程。 大致调度步骤: client通过动态代理获取接口对象 client调用接口的实例对象的方法 通过s...

2017/05/03 09:37
42
hadoop 压缩框架

hadoop 压缩框架 [toc] hadoop 常见的压缩 | 格式 | split | native |压缩率 |速度 | 是否hadoop自带 |linux命令 | 换成压缩格式后,原来的应用程序是否要修改 | | :-------- | :--------:| ...

2017/05/03 09:21
38
hadoop 序列化框架

hadoop 序列化框架 [toc] 序列化,反序列化 序列化: 按照一定格式把一个对象编码成一个字节流,可以存储在硬盘,可以在网络中传递,可以拷贝,克隆 等, 反序列化: 把存入字节流的对象,解...

2017/05/03 09:20
52
hadoop 配置文件处理

hadoop 配置文件处理 [toc] Configuration 类 Configuration 作用 1.加载配置文件 2.可以加载多个配置文件 3.支持动态修改配置 4.快速保存配置文件 构造方法 public Configuration(); ...

2017/05/03 09:18
37

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部