elasticsearch简单的安装以及集群配置详解

首先要确保有java8的环境,安装方法如下(centos)

1  wget --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie" http://download.oracle.com/otn-pub/java/jdk/8u161-b12/2f38c3b165be4555a1fa6e98c45e0808/jdk-8u161-linux-x64.rpm
2 npm -ivh  jdk-8u161-linux-x64.rpm

环境安装完毕,下载elesticsearch

1 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.2.zip

解压elasticsearch-5.5.2.zip

1 unzip elasticsearch-5.5.2.zip

如果没有unzip这个命令的话可以先运行

1 yum install unzip

elasticsearch不能直接用root账户运行,所以需要创建一个用户,而且需要将elasticsearch文件夹属主修改为新创建的这个用户,不然的话启动的时候会有一些权限引起的错误

因为这时候并不知道root的密码,所以先给root创建一个密码

1 passwd root

然后输入密码

接着创建用户并修改文件夹属主和属组

groupadd elasticsearchuseradd elasticsearch
passwd  elasticsearch
chown -R  elasticsearch:elasticsearch  elasticsearch

打开位于elasticsearch文件夹中/conifg目录下的 elasticsearch.yml配置文件修改配置

cluster.name: elas_cluster   集群的名字

node.name: node-q1   节点的名称

node.master: true
node.data: true

配置文件中给出了三种配置高性能集群拓扑结构的模式,如下:

1. 如果你想让节点从不选举为主节点,只用来存储数据,可作为负载器

node.master: false

node.data: true

2. 如果想让节点成为主节点,且不存储任何数据,并保有空闲资源,可作为协调器

node.master: true

node.data: false

3. 如果想让节点既不称为主节点,又不成为数据节点,那么可将他作为搜索器,从节点中获取数据,生成搜索结果等

node.master: false

node.data: false

默认情况是两个都是true,如果没几台服务器的话就用默认的就可以了。

network.host: 192.168.0.1 绑定的ip,设置为0.0.0.0后可以用外网访问

network.publish_host: 192.168.0.1  指定elasticsearch节点对外的监听地址,就是外网地址,搭建集群的时候最好指定一下,否则可能集群没办法启动,默认应该是去监听内网地址的

node.attr.rack: r2  给节点添加额外属性,这个暂时没发现什么用处

path.data: /path/to/data    数据保存的目录
path.logs: /path/to/logs    日志保存的目录

bootstrap.memory_lock: true  禁止内存交换,最好设置为false,不然非常影响性能,如果因为这个启动的时候报错,可以去修改limits.conf,配置下面有说

http.port:9200     路由地址端口

transport.tcp.port:9300     TCP协议转发地址端口,像java使用这个端口去操作

注:ES默认的HTTP监听端口是9200,如果当前被占用,则在9200~9300范围内递增;另外TCP的默认监听端口是9300,如果当前被占用,则再9300~9400范围内递增。所以单机少量节点,不配置具体端口的话,也是可以运行的。

discovery.zen.ping.unicast.hosts: ["192.168.36.130", "192.168.36.132:9300"]      单播的地址,配置集群中其他节点的ip,新加入的节点通过这些ip同步到集群,这里的端口应该使用transport.tcp.port端口

discovery.zen.minimum_master_nodes: 2        master节点是选取出来的,一个集群只能有一个,以上node.master: true配置是说该节点具有被选举的权利,而现在这个配置就是告诉 Elasticsearch 当没有足够 master 候选节点的时候,就不要进行 master 节点选举,等 master 候选节点足够了才进行选举。(因为你是一台台去启动服务器的) 这样是为了防止集群中同时存在两个master,这个数值应该配置为 ( master 候选节点个数 / 2) + 1。所以要高可用的话至少三台以上有被选举权。

gateway.recover_after_nodes: 2  通俗来说就是等集群有几个节点启动起来了再来选举master,分配分片数据什么的,这里配得不好可能有的问题就是启动的时候可能会多耗点性能

index.number_of_shards: 5       设置索引的分片数,默认为5    分片的意思就是一整个索引文档,分成5个部分去保存

index.number_of_replicas: 1      设置索引的副本数,默认为1  1个副本相当于一个备份

配置一下

1 vi /etc/security/limits.conf

添加如下内容:

*  soft nofile 65536

* hard nofile 131072

* soft nproc 2048

* hard nproc 4096

*  soft memlock unlimited

* hard memlock unlimited

再敲个命令

1 ulimit -l unlimited

修改 /etc/sysctl.conf

文件末尾添加 vm.max_map_count=262144

报存后退出

敲命令

sysctl -w vm.max_map_count=262144

一切就绪后启动

elasticsearch目录下bin中运行  ./elasticsearch

启动的时候发现报错,而且可能一次又一次,一次好几个错,错误这里就不说了,主要都是因为账户权限,内存线程什么引起的,网上的解决方法很多,贴几个链接

https://blog.csdn.net/gongpulin/article/details/78568595

https://blog.csdn.net/u013083576/article/details/78499884

单个成功访问ip地址加端口后,端口是http.port端口

集群健康查看 ip加端口加上/_cluster/health

原文地址:https://www.cnblogs.com/shaozm/p/8732842.html

时间: 2024-10-07 05:32:04

elasticsearch简单的安装以及集群配置详解的相关文章

Apache + Tomcat集群配置详解

Apache + Tomcat集群配置详解 一.软件准备 Apache 2.2 : http://httpd.apache.org/download.cgi,下载msi安装程序,选择no ssl版本 Tomcat 6.0 : http://tomcat.apache.org/download-60.cgi,下载Tomcat 6.0.18 zip文件 注意:由于Apache和Tomcat项目与集群相关的模块均处于持续发展和优化过程中,因此笔者不保证本文配置方法对所有Apache和Tomcat版本均

Apache + Tomcat集群配置详解 (1)

一.软件准备 Apache 2.2 : http://httpd.apache.org/download.cgi,下载msi安装程序,选择no ssl版本 Tomcat 6.0 : http://tomcat.apache.org/download-60.cgi,下载Tomcat 6.0.18 zip文件 注意:由于Apache和Tomcat项目与集群相关的模块均处于持续发展和优化过程中,因此笔者不保证本文配置方法对所有Apache和Tomcat版本均适用. 二.软件安装 把Apache安装为运

使用apache和nginx代理实现tomcat负载均衡及集群配置详解

实验环境: 1.nginx的代理功能 nginx proxy: eth0: 192.168.8.48 vmnet2 eth1: 192.168.10.10 tomcat server1: vmnet2 eth0: 192.168.10.20 tomcat server2: vmnet2 eth0: 192.168.10.30 # yum install -y nginx-1.8.1-1.el6.ngx.x86_64.rpm # vim /etc/nginx/conf.d/default.conf

Hadoop 2.6.0 HA高可用集群配置详解

1 Hadoop HA架构详解 1.1 HDFS HA背景 HDFS集群中NameNode 存在单点故障(SPOF).对于只有一个NameNode的集群,如果NameNode机器出现意外情况,将导致整个集群无法使用,直到NameNode 重新启动. 影响HDFS集群不可用主要包括以下两种情况:一是NameNode机器宕机,将导致集群不可用,重启NameNode之后才可使用:二是计划内的NameNode节点软件或硬件升级,导致集群在短时间内不可用. 为了解决上述问题,Hadoop给出了HDFS的高

Mysql Cluster集群配置详解

一. MySQL集群简介 MySQL群集技术在分布式系统中为MySQL数据提供了冗余特性,增强了安全性,使得单个MySQL服务器故障不会对系统产生巨大的负面效应,系统的稳定性得到保障.MySQL群集需要有一组计算机,每台计算机的角色可能是不一样的.MySQL群集中有三种节点:管理节点.数据节点和SQL节点.群集中的某计算机可能是某一种节点,也可能是两种或三种节点的集合.这三种节点只是在逻辑上的划分,所以它们不一定和物理计算机是一一对应的关系. 管理节点(也可以称管理服务器)主要负责管理数据节点和

Application Request Route实现IIS Server Farms集群负载详解

Application Request Route实现IIS Server Farms集群负载详解 序言 随着公司业务的发展,后台业务就变的越来越多,然而服务器的故障又像月经一样,时不时的汹涌而至,让我们防不胜防.那么后台的高可用,以及服务器的处理能力就要做一个横向扩展的方案,以使后台业务持续的稳定可用,平复人心. 由于我们的后台业务,清一色都是.net应用程序,加上总监的一致推荐,我们的负载均衡其中一个方案就选用了微软与iis集成的反向代理Application Request Route.A

codis-3.2.8集群部署详解

codis-3.2.8集群部署详解 一.概要 Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有明显的区别 (不支持的命令列表https://github.com/CodisLabs/codis/blob/release3.1/doc/unsupported_cmds.md), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请求的转发, 不停机的数据迁移等工作, 所有后边的

Hadoop集群WordCount详解

Hadoop集群WordCount详解 MapReduce理论介绍 MapReduce处理过程 MapReduce代码 1.MapReduce 理论介绍 1.1 MapReduce编程模型 MapReduce采用"分而治之"的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果.简单地说,MapReduce就是"任务的分解与结果的汇总". 在Hadoop中,用于执行MapReduce任务的机器角色有两

Zookeeper 安装及集群配置注意点

Zookeeper在ubuntu下安装及集群搭建,关于集群搭建,网上很多文章 可以参考:https://www.ibm.com/developerworks/cn/opensource/os-cn-zookeeper/index.html 总结几点: a.  zookeeper启动依赖与java环境. b. zookeeper 启动文件是在其bin目录下zkServer.sh,启动方法:zkServer.sh start c.  查看zookeeper 启动状态 zkServer.sh stat