加载中
JDK版本错误:Unsupported major.minor version 51.0 / 52.0

java.lang.UnsupportedClassVersionError: com/zaxxer/hikari/HikariConfig : Unsupported major.minor version 51.0 JDK版本的问题,比如本机的JDK为1.6,但是项目编译时用的JDK为1.7那么就...

JDK
07/24 09:47
13
Spark SQL—1(执行流程)

应用举例及流程概述 //初始化SparkSession val spark = SparkSession.builder().appName("example").master("local").getOrCreate() val person = spark.read.text("examples/src/main/reso...

07/10 16:29
17
Spark—4(Spark核心组件)

1、Spark Streaming Spark Sreaming基于Spark Core实现了可扩展、高吞吐和容错的实时数据流处理。现在支持的数据源和处理后的结果存储如下图所示。 Spark Streaming将流式计算分解成一系列短...

Druid.io——基本概念

1、数据 Druid在数据摄入之前,首先需要定义一个datasource,类似于数据库中表的概念。每个DataSource包括三个部分: 时间序列(Timestamp),Druid既是内存数据库,又是时间序列数据库,每个数...

07/09 15:13
31
Druid.io——架构

Druid采用多进程,分布式的架构;其架构易于运维及部署,便于部署在云环境中。每个Druid进程都可以被独立地配置和横向扩展,这种设计一方面赋予了Druid集群最大的灵活性和可扩展性,另一方面...

07/09 15:12
7
Druid.io——概述

概述 1、Druid是什么? Druid 是一个分布式的支持实时分析的数据存储系统(Data Store)。在处理数据的规模、数据处理的实时性方面,比传统的OLAP 系统有了显著的性能改进,而且拥抱主流的开...

07/09 15:09
13
spark—3(Spark Scheduler)

Spark的核心是根据RDD来实现的,Spark Scheduler则为Spark核心实现的重要一环,其作用就是任务调度。Spark的任务调度就是如何组织任务去处理RDD中每个分区的数据,根据RDD的依赖关系构建DAG...

05/14 20:00
13
com.alibaba.druid.sql.parser.ParserException: ERROR. pos 64, line 4, column 18, token SHOW

使用druid的SqlParser解析sql语句时报如下错误: Exception in thread "main" com.alibaba.druid.sql.parser.ParserException: ERROR. pos 64, line 4, column 18, token SHOW at com.aliba...

05/07 20:35
74
Spark-2(RDD)

定义 RDD全称叫做弹性分布式数据集(Resilient Distributed Datasets),它是一种分布式的内存抽象,表示一个只读的分区记录的集合,它只能就业在稳定物理存储钟的数据集和其他已有的RDD转换而...

04/29 15:14
22
Spark-1(概念)

1. 什么是Spark? Apache Spark™是用于大规模数据处理的统一分析引擎。 spark是一个实现快速通用的集群计算平台。【注:集群计算-把一台电脑无法解决的问题,放到多台电脑组成的集群上进行解...

ZooKeeper的选主机制

1. Zookeeper ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。ZooKeeper是Hadoop的一...

04/28 15:23
11
HDFS——HDFS+Zookeeper搭建高可用HDFS

问题说明 NameNode是HDFS集群的单点故障点,每一个集群只有一个NameNode,如果这个机器或进程不可用,整个集群就无法使用。为解决这一问题提供了两种解决方法:NFS(采用网络共享文件模式)和...

04/28 14:21
12
HDFS-原理

1. 写操作 客户端要向HDFS写数据,首先要跟Namenode通信以确认可以写文件并获得接收文件block的Datanode,然后,客户端按顺序将文件逐个block传递给相应Datanode,并由接收到block的Datanod...

04/25 18:38
10
HDFS-概念

1. 简介 HDFS:Hadoop分布式文件系统,主要用来解决海量数据的存储问题,通过统一的命名空间——目录树来定位文件。 在现代的企业环境中,单机容量往往无法存储大量数据,需要跨机器存储。统...

04/25 16:53
25
Spring源码阅读——4

BeanDefinitionHolder的创建 Spring框架中BeanDefinition的继承结构如下图: BeanDefinition是配置文件<bean>元素标签在容器中内部表示形式。<bean>元素标签拥有class、scope、lazy-init等配...

2018/08/18 21:49
55
Spring源码阅读——3

Spring IoC容器 1、IoC容器概述 控制反转、IoC容器、依赖注入 控制反转:不是什么技术,而是一种设计思想。Ioc意味着将你设计好的对象交给容器控制,而不是传统的在你的对象内部直接控制。 ...

2018/08/18 14:34
787
Spring源码阅读——2

在阅读源码之前,先了解下Spring的整体架构: 1、Spring的整体架构 1. Ioc(控制反转) Spring核心模块实现了Ioc的功能,它将类与类之间的依赖从代码中脱离出来,用配置的方式进行依赖关系描...

Spring源码阅读——1

开始读Spring源码吧,看再多的技术博客,不如自己看一下~~~~~ Spring源码目前在github中,新版本基于gradle构建。所以阅读源码需要先安装github和gradle。 spring中git地址 1、安装git(略)...

常见NoSQL的对比及使用场景(Redis,memcached,mongodb)

1. NoSQL NoSQL(Not Only SQL),泛指非关系型的数据库(mysql、oracle、sqlserver都是关系型数据库)。 1.1 NoSQL特点 数据之间无关系,随意扩展 数据存储简单,可以存在内存中,读写速度快...

Elasticsearch索引的增删改查原理

1. Elasticsearch的index Elasticsearch的索引(index)是用于组织数据的逻辑命名空间(如数据库)。Elasticsearch的索引有一个或多个分片(shard)(默认为5)。分片是实际存储数据的Lucene索引...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部