加载中
sparkcore离线性能调优

1.常规调优 1.1 最优资源配置 Spark 性能调优的第一步,就是为任务分配更多的资源,在一定范围内,增加资源的分配与性能的提升是成正比的,实现了最优的资源配置后,在此基础上再考虑进行后面...

2020/12/11 10:15
1.4K
xxl-job的源码分析

最近一段时间研究了下xxl-job,自己研究了一下源代码。 xxl-job-admin调度中心流程 1.调度中心说明 调度中心主要负责提供UI界面进行任务的配置工作,配置好任务之后,只要点击了启动,任务就会发...

2020/12/02 16:53
467
flink1.12通过kerberos认证读取kafka数据

说明 一般我们在使用kafka的时候很少经过kerberos认证,通过flink消费kafka数据的时候相对比较容易,一般很容易测通。 但是如果kafka有kerberos的认证,相对比较麻烦,结合官网进行说明。 官方...

oracle的sum函数丢失精度问题

问题 在使用oracle的sum函数的时候,如果存在小数位,比如2.57, 3.60 将这些数据聚合的时候,会发现结果只保留了一位小数, 但我们想要精度准确的结果,那该怎么办(这种情况出现的还无规律,...

04/27 13:41
14
hive官方文档的函数库

1. 输入该网址http://hive.apache.org/ 2.点击该上图圈中地址 3.继续点击 最终地址: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF......

vue.js项目win10 npm install的时候报错

报错情况如下 这个时候切换成命令 npm i --unsafe-perm 原因 npm 出于安全考虑不支持以 root 用户运行,即使你用 root 用户身份运行了,npm 会自动转成一个叫 nobody 的用户来运行,而这个用...

02/22 14:08
44
跟我一起学hadoop

1.hadoop学习 https://gitee.com/hanrentong/hadoopopr.git 2.python学习 https://gitee.com/hanrentong/base-python.git 3.spark在线教育项目 https://gitee.com/hanrentong/education-onl...

PyCharm导入python的模块报红线

现象 导入该模块后,代码是可以运行的,就是有一个红线看着比较碍眼 解决 1.找到File->Settings->Python Console 2.标记为源码目录 3.此时即可

01/14 15:55
166
idea初次提交项目到gitee报错 Push to origin/master was rejected

起因 我在gitee上创建了自己的一个仓库项目,创建的时候一开始我选择了.ignore的文件,后来创建 完成后,我感觉这个文件比较多余,所以就在gitee上直接将该文件删除了,这个时候其实在gitee 上已...

git常用命令

仓库 # 在当前目录新建一个Git代码库 $ git init # 新建一个目录,将其初始化为Git代码库 $ git init [project-name] # 下载一个项目和它的整个代码历史 $ git clone [url] 配置 # 显示当前的...

2020/12/24 10:00
52
(二)msyql杂项配置

1.杂项配置 1.1 设置大小写不敏感 查看大小写是否敏感 mysql> show variables like '%lower_case_table_names%' 提示:windows系统默认大小写不敏感,但是linux系统是大小写敏感的 设置大小写...

(一)msyql修改字符集

1.修改字符集常用语句 SQL语句 描述 备注 show databases 列出所有数据库 create database 库名 创建一个数据库 create database 库名 character set utf8 创建数据库,顺便执行字符集为utf...

2020/12/23 09:12
62
hive常用sql语句

hive常用sql 1.数据类型 Hive数据类型 Java数据类型 长度 例子 TINYINT byte 1byte有符号整数 20 SMALINT short 2byte有符号整数 20 INT int 4byte有符号整数 20 BIGINT long 8byte有符号整数...

2020/12/18 15:55
40
maven依赖oracle jar包的解决办法

maven项目使用oracle的jar包的时候,会发现从仓库中找不到对应jar包。 此时需要我们自己到官网下载oracle的jar包并利用maven去发布到仓库中 mvn install:install-file -DgroupId=com.oracle ...

2020/12/18 14:15
248
java8Stream的使用

1.使用Stream java8使用stream可以方便对数据集进行各种处理,显得程序不是那么冗余,Stream使用一般都包含这三个步骤。 定义一个数据源 定义中间操作形成流水线 定义终端操作,执行流水线,生...

2020/12/17 15:40
48
linux并发执行shell脚本模版以及案例

模版 #!/bin/bash #扫描环境文件,根据需要设置 source /root/gsql_env_v2.sh echo "################################################################" temp_fifo_file=/tmp/$$.fifo mkfi...

2020/12/15 14:07
76
flink实战总结

1.OperatorChain 1.1 OperatorChain的优点 1.1.1 减少线程切换 1,1.2 减少序列化与反序列化 1.1.3 减少数据在缓冲区的交换 1.1.4 减少延迟并且提高吞吐能力 1.2 OperatorChain组成条件 1.2....

2020/12/14 15:06
88
hutool-cache模块使用

Hutool-cache使用文档 1.概述 1.1 介绍 1.1.1 FIFOCache FIFO(first in first out) 先进先出策略。元素不停的加入缓存直到缓存满为止,当缓存满时,清理过期缓存对象,清理后依旧满则删除先入...

2020/12/11 14:12
1.7K
hutool-http使用

Hutool-http使用文档 1.概述 1.1 介绍 Hutool-http针对JDK的HttpUrlConnection做一层封装,简化了HTTPS请求、文件上传、Cookie记忆等操作,使Http请求变得无比简单。 Hutool-http的核心集中在...

2020/12/10 16:35
4.9K
hutool-system使用文档

Hutool-system使用文档 /** * Java Virtual Machine Specification信息 * JavaVM Spec. Name: Java Virtual Machine Specification * JavaVM Spec. Version: 1.8 * JavaVM Spec. Vendor: Ora...

2020/12/09 16:51
354

没有更多内容

加载失败,请刷新页面

返回顶部
顶部