加载中
大数据框架之Flume

一、什么是Flume Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据...

elasticSearch(五)——SpringBoot集成Elasticsearch

代码下载地址:https://github.com/tazhigang/big-data-github.git 代码查看地址:https://github.com/tazhigang/big-data-github/tree/master/elasticsearch-parent/springboot-elasticsea...

MongoDB(四)——SpringBoot集成mongodb

代码下载地址:https://github.com/tazhigang/big-data-github.git 代码查看地址:https://github.com/tazhigang/big-data-github/tree/master/mongodb-parent/springboot-mongodb 一、项目结...

elasticSearch(四)——java操作ES的API

代码下载地址:https://github.com/tazhigang/big-data-github/tree/master/elasticsearch-parent 一、pom中添加的依赖 <dependencies> <dependency> <groupId>junit</groupId> ......

elasticSearch(三)——Centos7.x_64位上安装

一、安装elasticSearch(linux:192.168.0.120 ;user:es) 下载elasticsearch-5.2.2.tar.gz:https://github.com/elastic/elasticsearch/releases?after=v5.2.2 安装jdk8(省略) 将elasticse...

elasticSearch(二)——核心概念

一、近实时 近实时,两个意思,从写入数据到数据可以被搜索到有一个小延迟(大概1秒);基于es执行搜索和分析可以达到秒级。 二、Cluster(集群) 集群包含多个节点,每个节点属于哪个集群是...

elasticSearch(一)——概述

一、什么是搜索 搜索,就是在任何场景下,找寻你想要的信息,这个时候,会输入一段你要搜索的关键字,然后就期望找到这个关键字相关的有些信息,在互联网里面;当提到搜索,我们首先会想到的就...

分层架构及SOA架构

一、分层架构 二、SOA架构

07/20 14:26
10
可扩展模式

一、概述 硬件软件最大的区别在于,软件具有可扩展性,硬件从制造出来就不会进行改变直到硬件损坏!软件天生具有可扩展性的这一特点虽然独一无二,同样的也是他的一大难点 二、可扩展思想 可...

07/20 14:25
8
Hive(五)——Sqoop导入数据

一、Sqoop的安装与配置 下载安装包:sqoop-1.4.5-cdh5.3.6.tar.gz 解压到linux指定目录 备份./conf/sqoop-env-template.sh文件,cp sqoop-env-template.sh sqoop-env.sh 修改配置文件: #Set...

Hive(四)——Hive框架基础(二)

一、Hive创建表的方式 使用create命令创建一个新表 例如:create table if not exists dbname.tbname(字段) partitioned by (date string,hour string) ## 分区 row format delimited field...

07/17 09:04
17
CAP

一、概述 C(Consistance):一致性--对客户端来说,读操作保证能够返回最新的写操作的结果 A (Availability):可用性--非故障节点在合理的时间内,返回合理的响应(不是错误和超时响应) P(P...

07/16 23:31
9
Hive(三)——Hive框架基础

一、Hive的MapReduce任务 相关配置: <property> <name>hive.fetch.task.conversion</name> <value>more</value> <description> Some select queries can be converted to single FETCH task...

07/14 23:13
19
Hive(二)——Hive的安装与部署

一、安装前的说明 hive相当于MapReduce的客户端,所以hive只有在hadoop环境下正常运行,这里说明一下,本博客今后的案例都会将hive安装在hadoop-ip-101的机器上 hive依赖java,hadoop,mysql...

Hive(一)——Hive基础知识

一、数据库与数据仓库 在讲述Hive之前先了解一下数据库和数据仓库的含义 数据库:是一种逻辑概念,用来存放数据的仓库,通过数据库软件来实现。数据库由很多表组成,表是二维的,一张表里面有...

MongoDB(三)——java集成mongodb

代码下载地址:https://github.com/tazhigang/big-data-github.git 一、项目结构 二、pom.xml mongodb-parent----->pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http:/...

MongoDB(二)——MongoDB的基本语法

1.进入test数据库 //查看当前mongodb有哪些数据库 show dbs //进入test数据库 use test //查看当前所在的数据库名称 db 2.向数据库的user集合中插入一个文档 /* db.collection.insert() ......

没有更多内容

加载失败,请刷新页面

返回顶部
顶部