文档章节

Elasticsearch 5.3 搭建过程

柯里昂
 柯里昂
发布于 2017/04/05 20:02
字数 585
阅读 21
收藏 0

笔者百度云下载地址 官方下载地址

Elasticsearch配置项2 Elasticsearch配置项1

计划在6个节点上部署ES。 节点host分别是master,worker1,worker2,worker3,worker4,worker5 IP依次是169.254.7.160~165

在6个节点上执行如下命令

useradd es # 创建 用户es,启动需要用到

# 在 /etc/security/limits.conf 文件最后新增 如下信息

# 配合es 启用 memory_lock ,需修改 /etc/security/limits.conf
# https://www.elastic.co/guide/en/elasticsearch/reference/current/setup-configuration-memory.html
es soft memlock unlimited
es hard memlock unlimited

# 最大文件打开数
# https://www.elastic.co/guide/en/elasticsearch/reference/current/file-descriptors.html
es soft nofile 65536
es hard nofile 65536

# 最大线程数
# https://www.elastic.co/guide/en/elasticsearch/reference/current/_maximum_number_of_threads_check.html
es soft nproc 2048 
es hard nproc 2048 

# Maximum size virtual memory check (mmap)
# https://www.elastic.co/guide/en/elasticsearch/reference/current/max-size-virtual-memory-check.html
es soft as unlimited
es hard as unlimited

# /etc/security/limits.conf 修改完成

# 修改 /etc/sysctl.conf
vm.max_map_count=262144

# /etc/sysctl.conf 修改成功


在master中执行


# 修改 mmap counts
# https://www.elastic.co/guide/en/elasticsearch/reference/current/vm-max-map-count.html
sysctl -w vm.max_map_count=262144

tar -zxvf elasticsearch-5.3.0.tar.gz -C /usr/local # 解压至 /usr/local

cd /usr/local # 进入安装目录
ln -s elasticsearch-5.3.0 elasticsearch # 创建软连

# 将ES_HOME 加入环境变量并生效。

# 修改配置文件
vi $ES_HOME/conf/elasticsearch.yml

# 如下为配置文件 $ES_HOME/conf/elasticsearch.yml 内的修改

node.name:    ${HOSTNAME}
path.data: /home/es/data
path.logs: /home/es/logs
# 启用 禁止交换
bootstrap.memory_lock: true

# 6/2 +1 = 4
discovery.zen.minimum_master_nodes: 4

# 此配置每个节点都不同
network.host: 169.254.7.160

discovery.zen.ping.unicast.hosts:
   - master
   - worker1
   - worker2
   - worker3
   - worker4
   - worker5

# 配置文件 $ES_HOME/conf/elasticsearch.yml 修改完成

# 其他几个节点也类似操作。也可以用scp。scp后各节点的$ES_HOME/conf/elasticsearch.yml 中的 network.host 参数需要修改下。

# 在每个节点中启动
# 切换到 es 用户启动 elasticsearch
su es

# Xms和Xmx 大小保持一致,避免震荡堆
# ES_JAVA_OPTS="-Xms2g -Xmx2g" ./bin/elasticsearch

# -d daemon
# 参数使用 -E
./bin/elasticsearch -d -p /home/es/es.pid -Ecluster.name=my_cluster  # 启动

# 在同网段访问
curl -XGET 'localhost:9200/_cat/health?v&pretty' # 检查es健康 状况

# 检查是否启用 bootstrap.memory_lock
curl -XGET 'localhost:9200/_nodes?filter_path=**.mlockall&pretty'


安装 kibana 官网tar.gz下载

tar -zxvf kibana-5.3.0-linux-x86_64.tar.gz -C /usr/local
cd /usr/local
ln -s kibana-5.3.0-linux-x86_64 kibana

cd config/
# 修改配置文件
vi kibana.yml

server.host: "master"
elasticsearch.url: "http://master:9200"
# kibana.yml 修改完成

# 启动kibana
cd ../bin
./kibana 

# 访问kibana
http://master:5601

安装sense

# 下载 https://download.elasticsearch.org/elastic/sense/sense-latest.tar.gz


© 著作权归作者所有

共有 人打赏支持
柯里昂
粉丝 24
博文 169
码字总数 81236
作品 0
徐汇
技术主管
CTO详细讲解海量日志处理ELK

ELK实时日志分析平台之Elasticsearch简介 Elasticsearch是一个高度灵活的开源全文检索和分析引擎。它能够迅速(几乎是实时地)地存储、查找和分析大规模数据。通常被用在有复杂的搜索要求的系...

Java架构分享
05/23
0
0
渣渣菜鸡为什么要看 ElasticSearch 源码?

前提 人工智能、大数据快速发展的今天,对于 TB 甚至 PB 级大数据的快速检索已然成为刚需,大型企业早已淹没在系统生成的浩瀚数据流当中。大数据技术业已集中在如何存储和处理这些海量的数据...

Java小铺
08/10
0
0
I-team 博客全文检索 Elasticsearch 实战

一直觉得博客缺点东西,最近还是发现了,当博客慢慢多起来的时候想要找一篇之前写的博客很是麻烦,于是作为后端开发的楼主觉得自己动手丰衣足食,也就有了这次博客全文检索功能Elasticsearch...

haifeiWu
07/23
0
0
ELK环境搭建(ElasticSearch+Logstash+kibana)

ELK是指Elasticsearch + Logstash + Kibaba三个组件的组合。本文讲解一个基于日志文件的ELK平台的搭建过程,有关ELK的原理以及更多其他信息,会在接下来的文章中继续研究。   在这个系统中...

阿恒灬
2017/10/31
0
0
Elasticsearch中文分词研究

一、ES分析器简介 ES是一个实时搜索与数据分析引擎,为了完成搜索功能,必须对原始数据进行分析、拆解,以建立索引,从而实现搜索功能; ES对数据分析、拆解过程如下: 首先,将一块文本分成...

zhaipengfei1231
04/18
0
0

没有更多内容

加载失败,请刷新页面

加载更多

70.shell的函数 数组 告警系统需求分析

20.16/20.17 shell中的函数 20.18 shell中的数组 20.19 告警系统需求分析 20.16/20.17 shell中的函数: ~1. 函数就是把一段代码整理到了一个小单元中,并给这个小单元起一个名字,当用到这段...

王鑫linux
今天
2
0
分布式框架spring-session实现session一致性使用问题

前言:项目中使用到spring-session来缓存用户信息,保证服务之间session一致性,但是获取session信息为什么不能再服务层获取? 一、spring-session实现session一致性方式 用户每一次请求都会...

WALK_MAN
今天
6
0
C++ yield()与sleep_for()

C++11 标准库提供了yield()和sleep_for()两个方法。 (1)std::this_thread::yield(): 线程调用该方法时,主动让出CPU,并且不参与CPU的本次调度,从而让其他线程有机会运行。在后续的调度周...

yepanl
今天
4
0
Java并发编程实战(chapter_3)(线程池ThreadPoolExecutor源码分析)

这个系列一直没再写,很多原因,中间经历了换工作,熟悉项目,熟悉新团队等等一系列的事情。并发课题对于Java来说是一个又重要又难的一大块,除非气定神闲、精力满满,否则我本身是不敢随便写...

心中的理想乡
今天
42
0
shell学习之获取用户的输入命令read

在运行脚本的时候,命令行参数是可以传入参数,还有就是在脚本运行过程中需要用户输入参数,比如你想要在脚本运行时问个问题,并等待运行脚本的人来回答。bash shell为此提 供了read命令。 ...

woshixin
今天
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部