Elasticsearch集群搭建1Welcome to my ELK world！

系统环境：

jdk1.8环境
ubuntu16.04系统 172.20.1.10 node-1
ubuntu16.04系统 172.20.1.20 node-2
ubuntu16.0.4系统 172.20.1.30 node-3

安装elasticsearch版本：elasticsearch-6.2.2.tar.gz
安装包下载路径（里边有6.2.2版本、6.4.2版本和jdk1.8的包）：
https://pan.baidu.com/s/1bTBb6n27wcunwAFCRB5yNQ 密码：8raw
1.安装elasticsearch参考：http://www.cnblogs.com/hanyinglong/p/5409003.html
说一下我自己的做法
查看一下自己的java环境换成jdk1.8，这个网上一大堆参考文档。

这里大概说一下，就是解压包然后配置环境变量

路径根据自己解压的位置去指定。最后source /etc/profile

mkdir -p /data/software/elasticsearch

创建用户，因为启动es不能用root用户。

sudo adduser es

然后敲个Y完事。
cd /home/下看一下有没有家目录。

然后到下载包存放路径解压包。

sudo tar -zxvf elasticsearch-2.3.1.tar.gz
sudo mv elasticsearch-2.3.1 /data/software/elasticsearch
sudo chown -R es.es /data/software/elasticsearch

我们看一下es的文件结构：

我们每个机器上做一个es，这个不是建议也不是什么经验之谈，因为你是运维（背锅侠），你的要注意都做一台机器上万一机器宕机了，数据可就全没了。最普通小白安全的做法就是3台机器每个服务器上只做一个节点（此做法允许且只允许任意一台服务器宕机），不了解es为什么这样做的请读我的技术点篇。
接下来我们修改elasticsearch的配置文件。

修改完成以后我们切换到es用户去启动es，记住：切换到es用户！切换到es用户！！切换到es用户！！！
要不就会出现如下情况：

但是你可能会遇到如下情况哈哈，不要慌：基本操作。

[1]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
等问题，修改几个配置文件：

/etc/profile文件最后边添加：ulimit -SHn 65536
/etc/security/limits.conf文件最后添加：

  • soft nofile 65536
  • hard nofile 65536
  • soft nproc 4096
  • hard nproc 4096

然后我们把这些配置应用到es用户可以看一下ulimit -Hn
一切正常后我们再启动

我们在网页访问ip:9200出来如下内容表示成功

其他的2个节点按上边的操作正常操作完毕（可能会出现的一个问题启动前先删除/data/software/elasticsearch/data/节点目录下的数据），出现如上图恭喜你成功了.
接下来就是安装比较麻烦又low的elasticsearch-head，也给大家操作一下吧，（生产环境能不用head插件尽量别用，因为安全性特别差暴露给别人，别人可以上你的es对节点进行操作）
elasticsearch 5.x之后不支持直接plugin安装head插件，而是将head作为一个独立的服务安装的，首先需要安装依赖的node，npm，grunt
apt-get install npm
apt-get install nodejs-legacy
npm install -g grunt
npm install -g grunt-cli
下载elasticsearch-head，我解压到目录/data/software/elasticsearch-head，将目录用户改为es
然后修改配置

1.修改head的连接地址 elasticsearch-head/_site/app.js

this.base_uri = this.config.base_uri || this.prefs.get("app-base_uri") || "http://localhost:9200";

localhost改为自己的ip
2.修改服务器的监听地址elasticsearch-head/Gruntfile.js

connect: {
           server: {
               options: {
                   port: 9100,
                   base: ‘.‘,
                   keepalive: true
               }
           }
       }

options中添加 hostname: ‘*‘
3.修改elasticseach的配置文件elasticsearch.yml, 修改对应的ip以及跨域的设置，添加：

http.cors.enabled: true

http.cors.allow-origin: "*"
3 在elasticsearch-head下运行: grunt server
3.1 但是会出现错误提示（当时命令敲的npm start，应该是一样的）：

[email protected]:/usr/local/kencery/elasticsearch-head# npm start

> [email protected] start /usr/local/kencery/elasticsearch-head
> grunt server

grunt-cli: The grunt command line interface (v1.2.0)

Fatal error: Unable to find local grunt.

If you‘re seeing this message, grunt hasn‘t been installed locally to
your project. For more information about installing and configuring grunt,
please see the Getting Started guide:

http://gruntjs.com/getting-started

npm ERR! Linux 4.4.0-62-generic
npm ERR! argv "/usr/bin/nodejs" "/usr/bin/npm" "start"
npm ERR! node v4.2.6
npm ERR! npm v3.5.2
npm ERR! code ELIFECYCLE
npm ERR! [email protected] start: grunt server
npm ERR! Exit status 99
npm ERR!
npm ERR! Failed at the [email protected] start script ‘grunt server‘.
npm ERR! Make sure you have the latest version of node.js and npm installed.
npm ERR! If you do, this is most likely a problem with the elasticsearch-head package,
npm ERR! not with npm itself.
npm ERR! Tell the author that this fails on your system:
npm ERR! grunt server
npm ERR! You can get information on how to open an issue for this project with:
npm ERR! npm bugs elasticsearch-head
npm ERR! Or if that isn‘t available, you can get their info via:
npm ERR! npm owner ls elasticsearch-head
npm ERR! There is likely additional logging output above.
npm ERR! Please include the following file with any support request:
npm ERR! /usr/local/kencery/elasticsearch-head/npm-debug.log

看提示大概有提到版本不是最新的问题，所以就抱着试一试的心态去升级npm以及node

npm cache clean -f
npm install -g n
n stable
npm install [email protected] -g

再查看下版本，会看到

[email protected]:~$ node -v
v10.4.0
[email protected]:~$ npm -v
6.1.0

3.2 但是运行grunt server依然报错：

grunt hasn‘t been installed locally to your project

参考 https://segmentfault.com/q/1010000004172559/a-1020000004193932， 执行：

npm install grunt --save-dev

3.3 再次运行，依然报错：
[email protected]:/usr/local/kencery/elasticsearch-head$ grunt server

Local Npm module "grunt-contrib-clean" not found. Is it installed?
Local Npm module "grunt-contrib-concat" not found. Is it installed?
Local Npm module "grunt-contrib-watch" not found. Is it installed?
Local Npm module "grunt-contrib-connect" not found. Is it installed?
Local Npm module "grunt-contrib-copy" not found. Is it installed?
Local Npm module "grunt-contrib-jasmine" not found. Is it installed?
Warning: Task "connect:server" not found. Use --force to continue.

然后我干脆把有关grunt的都装了一遍最新的：

npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]
npm install [email protected]

4.4 最后grunt server终于可以启动了：

[email protected]:/usr/local/kencery/elasticsearch-head$ grunt server
(node:1527) ExperimentalWarning: The http2 module is an experimental API.
Running "connect:server" (connect) task
Waiting forever...
Started connect web server on http://localhost:9100

可以看到elasticsearch服务的端口是9200，head插件服务的端口是9100，我们访问head然后head再访问的elasticsearch。

参考文档：
1https://blog.csdn.net/shm839218753/article/details/80618073

原文地址：http://blog.51cto.com/13120271/2308902

时间： 2024-10-11 06:48:22

Elasticsearch集群搭建1Welcome to my ELK world！的相关文章

和我一起打造个简单搜索之ElasticSearch集群搭建

我们所常见的电商搜索如京东,搜索页面都会提供各种各样的筛选条件,比如品牌.尺寸.适用季节.价格区间等,同时提供排序,比如价格排序,信誉排序,销量排序等,方便了用户去找到自己心里理想的商品. 站内搜索对于一个网站几乎是标配,只是搜索的强大与否的区别,有的网站只支持关键词模糊搜索,而淘宝,京东提供了精细的筛选条件,同时支持拼音搜索等更方便的搜索方式. 由于笔者在一家做网络文学的公司工作,所以实现就是以小说为商品的搜索,具体可以参考起点网小说的搜索. 如图所示,起点网的搜索提供了关键词搜索和排序条件以

ElasticSearch集群搭建

一.前言 先介绍ElasticSearch的几个核心概念. 集群(cluster): 一个集群就是由一个或多个节点组织在一起,它们共同持有你整个的数据,并一起提供索引和搜索功能.一个集群由一个唯一的名字标识,这个名字默认就是"elasticsearch".这个名字是重要的,因为一个节点只能通过指定某个集群的名字,来加入这个集群. 节点(node): 一个节点是你集群中的一个服务器,作为集群的一部分,它存储你的数据,参与集群的索引和搜索功能.和集群类似,一个节点也是由一个名字来标识的,默

elasticsearch集群搭建实例

下个月又开始搞搜索了,几个月没动这块还好没有落下. 晚上在自己虚拟机上搭建了一个简易搜索集群,分享一下. 操作系统环境: Red Hat 4.8.2-16 elasticsearch : elasticsearch-1.4.1 集群搭建方式: 一台虚拟机上2个节点. 集群存放路径:/export/search/elasticsearch-cluster 必备环境:  java运行环境 集群搭建实例展示: 1. 解压tar包,创建集群节点 #进入到集群路径 [[email protected] e

1：elasticsearch集群搭建

PS:这里使用的ES版本为1.3.0 ES的集群搭建比较简单,主要是修改conf/elasticsearch.yml文件 ##################### Elasticsearch Configuration Example ##################### # This file contains an overview of various configuration settings, # targeted at operations staff. Applicati

基于swarm的elasticsearch集群搭建

es集群构建: 1.安装head插件: for Elasticsearch 5.x: docker run -p 9100:9100 mobz/elasticsearch-head:5 ( docker run -p 9100:9100 10.211.121.26/library/elasticsearch-head ) 出现问题 head主控页面是可以显示的,但是显示连接失败 "集群健康值: 未连接" 解决方案 修改elasticsearch.yml文件 vim $ES_HOME$/

elasticsearch 集群搭建

需要编辑的文件是config/elasticsearch.yml文件 需要配置的项目有: # Use a descriptive name for your cluster: # cluster.name: Hadoop # # ------------------------------------ Node ------------------------------------ # # Use a descriptive name for the node: # #node.name: n

elasticsearch集群搭建 kafka filebeat logstach收集日志高可用方案

文档在很久之前写的了,这里留个记录,我的码云地址    点击查看 原文地址:https://www.cnblogs.com/LDDXFS/p/12052072.html

手把手教你搭建一个Elasticsearch集群

一.为何要搭建 Elasticsearch 集群 凡事都要讲究个为什么.在搭建集群之前,我们首先先问一句,为什么我们需要搭建集群?它有什么优势呢? (1)高可用性 Elasticsearch 作为一个搜索引擎,我们对它的基本要求就是存储海量数据并且可以在非常短的时间内查询到我们想要的信息.所以第一步我们需要保证的就是 Elasticsearch 的高可用性,什么是高可用性呢?它通常是指,通过设计减少系统不能提供服务的时间.假设系统一直能够提供服务,我们说系统的可用性是 100%.如果系统在某个时

搭建一个Elasticsearch集群

一.为何要搭建 Elasticsearch 集群 凡事都要讲究个为什么.在搭建集群之前,我们首先先问一句,为什么我们需要搭建集群?它有什么优势呢? (1)高可用性 Elasticsearch 作为一个搜索引擎,我们对它的基本要求就是存储海量数据并且可以在非常短的时间内查询到我们想要的信息.所以第一步我们需要保证的就是 Elasticsearch 的高可用性,什么是高可用性呢?它通常是指,通过设计减少系统不能提供服务的时间.假设系统一直能够提供服务,我们说系统的可用性是 100%.如果系统在某个时