加载中
docker安装

Docker 在Centos 6.5 X64下安装 下载epel wget http://ftp.sjtu.edu.cn/fedora/epel/6/i386/epel-release-6-8.noarch.rpm 安装epel rpm -ivh epel-release-6-8.noarch.rpm 安装docker-io yum...

Scala视图

视图 隐含参数和方法也可以定义隐式转换,称作视图。由类型S到类型T的视图由一个函数类型为S=>T或(=>S)=>T的隐含值或一个可以转变为该类型的值定义。 视图在两种情况下应用。 1. 如果表达式e...

Stream Grouping类型

Stream Grouping定义了一个流在Bolt任务间该如何被切分。这里有Storm提供的6个Stream Grouping类型: 1. 随机分组(Shuffle grouping):随机分发tuple到Bolt的任务,保证每个任务获得相等数...

2015/06/09 16:52
211
hive扩展函数开发规范

提供以下两种实现方式:a继承org.apache.hadoop.hive.ql.exec.UDF类 代码包为:packageorg.apache.hadoop.hive.ql.udf 实现evaluate方法,根据输入参数和返回参数类型,系统自动转换到匹配的方...

2015/06/09 16:51
634
Hadoop源代码分析(Task的内部类和辅助类)

从前面的图中,我们可以发现Task有很多内部类,并拥有大量类成员变量,这些类配合Task完成相关的工作,如下图。 MapOutputFile管理着Mapper的输出文件,它提供了一系列get方法,用于获取Map...

2015/06/09 16:45
80
首届中国大数据技术沙龙会议

当今最红的名词是大数据,掌握趋势,才能赢得未来!首届中国大数据技术沙龙会议暨超人学院技术交流会,邀请各位前来参会。在这里,你可以了解大数据技术的趋势,掌握企业对于技术的最新动态,...

CDH使用

CDH使用文档 前言:CDH在安装完毕之后,通过CM给集群添加服务组件,就可以开始各个组件的使用了,本文针对集群和各服务组件的使用作说明。 一、 创建用户目录 在集群上使用CDH时,建议使用普...

超人学院大数据高新就业班第八期火爆招生中

当今最红的名词是大数据,掌握趋势,才能赢得未来! 技术改变命运,你想改变自己的命运吗?想拥有高薪的工作,舒适的办公环境吗?那就来超人学院吧!这是你最好的选择,没有之一! 技术难度高...

超人学院Hadoop大数据资源分享

超人学院Hadoop大数据资源分享-----数据结构与算法(java解密版) http://yunpan.cn/cw5avckz8fByJ 访问密码 b0f8 更多精彩内容请关注:http://bbs.superwu.cn 关注超人学院微信二维码: 关注...

2015/06/05 17:10
658
快速排序法(一)

说明快速排序法(quick sort)是目前所公认最快的排序方法之一(视解题的对象而定),虽然快速排序法在最差状况下可以达O(n2),但是在多数的情况下,快速排序法的效率表现是相当不错的。 快速...

2015/06/05 17:09
189
solr配置参考

配置参考solrConfig.xml <!-- 7.5中solrConfig.xml中已做详细解释,或者参考5.3 --> <?xml version="1.0" encoding="UTF-8" ?> <config> <luceneMatchVersion>4.7</luceneMatchVersion> <sc...

2015/06/05 17:07
105
在不同版本hdfs集群之间转移数据

在不同版本hdfs集群之间转移数据 最简单的办法就是把src集群的数据导到本地,然后起另一个进程将本地数据传到des集群上去。 不过这有几个问题: 效率降低 占用本地磁盘空间 不能应付实时导数...

2015/06/05 17:06
123
redis学习笔记之pipeline

redis是一个cs模式的tcp server,使用和http类似的请求响应协议。一个client可以通过一个socket连接发起多个请求命令。每个请求命令发出后client通常 会阻塞并等待redis服务处理,redis处理完...

Devicemapper 源码分析和流程

整个流程大体如下: 创建 thinpool // This is theprogrammatic example of "dmsetup create" funccreatePool(poolName string, dataFile, metadataFile *os.File, poolBlockSizeuint32) er...

2015/06/05 17:01
869
Scala隐含参数详解

隐含参数 隐含参数列表(implicit p1,...,pn)将参数p1,...,pn标记为隐含的。一个方法或构造器仅能有一个隐含参数列表,且必须是给出的参数列表的最后一个。 具有隐含参数列表的方法可以像正常...

内置的聚合函数

返回类型 函数 说明 bigint count(*) , count(expr), count(DISTINCT expr[, expr_., expr_.]) 返回记录条数。 double sum(col), sum(DISTINCT col) 求和 double avg(col), avg(DISTINCT co...

Hadoop源代码分析(MapReduce概论)

大家都熟悉文件系统,在对HDFS进行分析前,我们并没有花很多的时间去介绍HDFS的背景,毕竟大家对文件系统的还是有一定的理解的,而且也有很好的文档。在分析Hadoop的MapReduce部分前,我们还...

2015/06/05 16:54
120
hbase列表排序

hbase都是按照字典序进行排序的,也就是降序,在页面的表现就是最早的数据(rowkey最小的)排在前面。 目前的解决方案是:给主键增加一个外键关联表,外键的生成规则是 400000000000-主键号,...

2015/06/04 17:28
2.2K
hive字符串函数

1. 字符串长度函数:length 语法: length(string A) 返回值: int 说明:返回字符串A的长度 举例: hive> select length('abcedfg') from lxw_dual; 7 2. 字符串反转函数:reverse 语法: rev...

2015/06/04 17:26
8.6W
redis两种调用方式实例

在下面的代码示例中,将给出两种最为常用的Redis命令操作方式,既普通调用方式和基于管线的调用方式。 注:在阅读代码时请留意注释。 1 #include <stdio.h> 2#include <stdlib.h> 3#include ...

2015/06/04 17:24
1.8K

没有更多内容

加载失败,请刷新页面

返回顶部
顶部