加载中
HBase scan setBatch和setCaching的区别

HBase的查询实现只提供两种方式: 1、按指定RowKey获取唯一一条记录,get方法(org.apache.hadoop.hbase.client.Get) 2、按指定的条件获取一批记录,scan方法(org.apache.Hadoop.Hbase.cli...

2017/05/21 10:08
734
Hadoop YARN配置参数剖析(3)—MapReduce相关参数

MapReduce相关配置参数分为两部分,分别是JobHistory Server和应用程序参数,Job History可运行在一个独立节点上,而应用程序参数则可存放在mapred-site.xml中作为默认参数,也可以在提交应用...

2017/05/04 20:19
152
对象的持久化和序列化

对象持久化(Persistence) 对象持久化就是将对象存储在可持久保存的存储介质上,例如主流的关系数据库中。在实际应用中,需要将业务数据以对象的方式保存在数据库中,就需要应用到相应的对象持...

2016/07/17 16:30
120
Yarn简单介绍及内存配置

Yarn简单介绍及内存配置

2016/05/20 18:18
240
InputFormat到key-value生成流程,reduce写出数据流程

InputFormat到key-value生成流程

2015/09/01 21:06
194
Solr查询语法总结

Solr查询语法总结

2015/08/23 09:42
664
tomcat堆大小设置

tomcat堆大小设置

2015/08/05 12:38
453
oracle常用

oracle常用

2014/12/16 10:24
467
反射工具类

package screendata.util; import com.alibaba.fastjson.JSON; import TransferInfo; import org.reflections.ReflectionUtils; import java.lang.reflect.Field; import java.util.*; /** *...

2019/08/15 10:53
78
DateUtil

package com.sniper.common.util; import java.text.DateFormat; import java.text.ParseException; import java.text.SimpleDateFormat; import java.util.Calendar; import java.util.Date...

2019/07/20 09:43
130
java-集合做成逗号分隔的字符串-类似mkstring

org.apache.commons.lang.StringUtils.join(nextZoneCodes, ","); 自定义代码: public static String arrayToString(String[] strs) { if(strs.length == 0) { return ""; } e......

2018/11/16 15:35
995
ExceptionUtil

package com.util; import org.slf4j.Logger; import org.slf4j.LoggerFactory; import java.io.ByteArrayOutputStream; import java.io.PrintStream; public class ExceptionUtil { private...

2018/10/08 16:44
221
Spark加载外部配置文件

--files path启动加载配置文件 在spark-streaming程序中需要配置文件中的数据来完成某项统计时,需要把配置文件打到工程里,maven的配置如下: [html] view plain copy <build> <plugins> <...

2018/03/12 15:04
7.6K
spark加载properties配置文件方法

首先我先介绍一下错误的写法,这个加载配置文件方法是错误的: [java] view plain copy val props = new Properties(); val loader = getClass.getClassLoader; props.load(new FileInputStr...

2018/03/12 15:02
2.6K
redis3.x连接报错

(error) DENIED Redis is running in protected mode because protected mode is enabled 解决: protected-mode no 参考:http://blog.csdn.net/alaska_bibi/article/details/52594639...

2018/03/08 10:37
49
HBase shell 中的十六进制数值表示

在使用Hbase shell 进行get 或scan操作时,时不时会看到一些数值被转成了16进制, 就像下面那样 value=W\x5C5\x80 那么这个值具体等于多少? 查阅资料后发现算法如下 W -> W的ASCII码16进制 为 ...

2018/02/01 09:11
4.3K
测试Hbase 表映射成 Hive表查询效率

一、准备工作: 1、编写程序将1000万条数据写到Hbase表中; 2、将对应的Hbase表映射成Hive表。 在Hive 的shell中执行类似如下的命令 hive> CREATE EXTERNAL TABLE IF NOT EXISTS t_hbase_p...

2018/01/30 11:40
2.3K
sed -i命令详解

[root@www ~]# sed [-nefr] [动作] 选项与参数: -n :使用安静(silent)模式。在一般 sed 的用法中,所有来自 STDIN 的数据一般都会被列出到终端上。但如果加上 -n 参数后,则只有经过sed 特...

2018/01/04 08:58
1.6W

没有更多内容

加载失败,请刷新页面

返回顶部
顶部