加载中
我们听到的TiDB到底是什么?!

Java架构大师2019-04-22 10:28:33 最近TiDB掀起了一波分布式数据库的热潮,公司也在着手准备TiDB的培训工作,前几天也参与了几场公司针对TiDB的培训,下面我们了解一下关于TiDB。 TiDB 是什么...

Pulsar - Producer is already present on the connection解决方案

我们目前得版本是2.6.1 也出现这个问题,网上查询资料说是以前得版本有这个问题。 最后解决:broker 重启直接 kill -9 原因: 就是 shudown 会导致 client 多次断链 多次重连,你可以观察一下...

09/29 10:43
168
vue 通过docker构建镜像部署项目

1. 环境准备 下载docker app,并启动 http://get.daocloud.io/#install-docker-for-mac-windows 2. 在vue项目根目录下编写Dockerfile文件 #dockerfile #使用 nginx最新版本作为基础镜像 FROM...

09/15 16:31
228
Spring Boot Quartz 分布式集群任务调度实现

Spring Boot Quartz 主要内容 Spring Scheduler 框架 Quartz 框架,功能强大,配置灵活 Quartz 集群 mysql 持久化定时任务脚本(tables_mysql.sql) 介绍 在工程中时常会遇到一些需求,例如定时...

tkmybatis VS mybatisplus

文章目录 TkMybatis Vs MybatisPlus 1.基础CRUD BaseMapper 2.代码生成器 3. 全局主键 Sequence主键 4. 热加载 5. 分页 Mybatis-Plus Tk.Mybatis 6. 额外功能 Mybatis-Plus Tk.Mybatis TkMy...

08/19 17:48
142
HUE WorkFlow Schedule 调用Hive参数传递,外部参数传递,时间参数传递

1. hql: SELECT * from table op where op.create_time>='${startTime}' and op.create_time<='${endTime}';......

08/11 17:10
92
Hbase 大表快速count

第一种比较简单,但是只适合小表进行count 1.count命令 最直接的方式是在hbase shell中执行count的命令可以统计行数。 [html] view plain copy hbase> count ‘t1′ hbase> count ‘t1′, I...

08/06 15:38
70
HIVE字符串处理技巧【总结】

==*定期更新,获取更多,欢迎[star](AlexanLee/ads-papers)。另外欢迎关注[计算广告实验](AlexanLee/ads-ailab),我会总结一些实现。*== 一、准备 创建虚表: echo "X" >> dual.tsv hadoop fs -...

08/04 14:23
0
hive数据类型转换、字符串函数、条件判断

数据类型转换 同Java语言一样,Hive也包括 隐式转换(implicit conversions)和显式转换(explicitly conversions)。   Hive在需要的时候将会对numeric类型的数据进行隐式转换。比如我们对...

08/03 17:38
71
Hive中union使用详情

union语法 select_statement UNION [ALL | DISTINCT] select_statement UNION [ALL | DISTINCT] select_statement … 用来合并多个select的查询结果,需要保证select中字段须一致,每个selec...

ios
08/03 16:24
50
Kylin -- 增量构建 自动合并分区 自动删除Segment

增量构建应用场景 Kylin在每次Cube的构建都会从Hive中批量读取数据,而对于大多数业务场景来说,Hive中的数据处于不断增长的状态。为了支持Cube中的数据能够不断地得到更新,且无需重复地为已...

07/30 11:41
55
Kylin-Cube碎片(segment)管理

目录 增量构建的问题 管理Cube碎片 手动触发合并Segment 删除Segment 自动合并 配置保留Segment 增量构建的问题 日积月累,增量构建的Cube中的Segment越来越多,该Cube的查询性能也会越来越慢...

07/30 11:26
18
Kylin定时增量build

1、从 Kafka 流构建的 Cube cubeName=xxxxxxxx curl -X PUT -H "Authorization: Basic QURNSU46S1lMSU4=" -H 'Content-Type: application/json' -d '{ "sourceOffsetStart": 0, "sourceOffse...

kylin cube 增量和全量

全量构建与增量构建 全量构建 对数据模型中没有指定分割时间列信息的Cube,Kylin会采用全量构建,即每次从Hive中读取全部的数据来开始构建。通常它适用于以下两种情形。 事实表的数据不是按时...

HIVE 中 内连接 外连接 左外连接 右外连接 全外连接 联合操作

hive的join操作,只支持等值连接 创建customers和orders表,一对多关系 创建customers表 create table customers(id int,name string,age int) row format delimited fields TERMINATED by '...

07/27 14:06
13
Jenkins Pipeline 编译后端 Java 代码

需要安装的插件:Pipeline Maven Integration 安装 maven 系统管理 -> 全局工具配置 -> Maven 填入名字为 maven 3.3.9 ,版本选择 3.3.9 配置 Maven settings.xml: 系统管理 -> Management ...

07/23 18:03
42
Jenkins Pipeline示例

Pipeline Job 示例 通过 Web 页面创建 jenkinsfile 1、登录到 jenkins 主页面,点击左侧菜单栏的 New Item 2、进入到新建 Job 页面,输入 job 名称,在下面选择 Pipeline 类型,然后点击 OK...

pentaho-aggdesigner-algorithm jar包问题

<!-- jar包地址上传到私服: https://repository.mapr.com/nexus/content/groups/mapr-public/conjars/org/pentaho/pentaho-aggdesigner-algorithm/5.1.5-jhyde/ --> <dependency> <groupId>...

07/19 18:17
209
Hive 自定义UDF函数

Hive的SQL可以通过用户定义的函数(UDF),用户定义的聚合(UDAF)和用户定义的表函数(UDTF)进行扩展。 当Hive提供的内置函数无法满足你的业务处理需要时,此时就可以考虑使用用户自定义函...

JAVA API调用OOZIE作业运行

import java.io.IOException; import java.security.PrivilegedExceptionAction; import java.util.Properties; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部