Chapter2 ElasticSearch的安装

Chapter2 ElasticSearch的安装 2.1 下载/安装elasticsearch 2.1.1 安装包下载

Elasticsearch官网： Elasticsearch: The Official Distributed Search & Analytics Engine | Elastic

Elasticsearch 6.6.0 | Elastic

下载好后拷贝到/opt/module/目录下

2.1.2 修改配置文件

.../elasticsearch-6.6.0/config/elasticsearch.yml

修改yml配置的注意事项: 每行必须顶格，不能有空格

“：”后面必须有一个空格

1）集群名称，同一集群名称必须相同

cluster.name: my-es

2）单个节点名称 

node.name: node-1

3）网络部分  改为当前的ip地址  ，端口号保持默认9200就行

network.host: linux102

http.port: 9200

4）把bootstrap自检程序关掉

bootstrap.memory_lock: false

bootstrap.system_call_filter: false

5）自发现配置：新节点向集群报到的主机名

discovery.zen.ping.unicast.hosts: ["linux102","linux103"]

2.1.3 修改linux配置

为什么要修改linux配置？

       默认elasticsearch是单机访问模式，就是只能自己访问自己。

       但是我们之后一定会设置成允许应用服务器通过网络方式访问。这时，elasticsearch就会因为嫌弃单机版的低端默认配置而报错，甚至无法启动。

       所以我们在这里就要把服务器的一些限制打开，能支持更多并发。

问题1：max file descriptors [4096] for elasticsearch process likely too low, increase to at least [65536] elasticsearch

原因：系统允许 Elasticsearch 打开的最大文件数需要修改成65536

解决：vi /etc/security/limits.conf

添加内容：

* soft nofile 65536
* hard nofile 131072
* soft nproc 2048
* hard nproc 65536

注意：“*” 不要省略掉

问题2：max number of threads [1024] for user [judy2] likely too low, increase to at least [4096]  （CentOS7.x  不用改）

原因：允许最大进程数修该成4096

解决：vi /etc/security/limits.d/90-nproc.conf  

# 修改如下内容：
* soft nproc 1024
# 修改为
* soft nproc 4096

问题3：max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144] （CentOS7.x  不用改）

原因：一个进程可以拥有的虚拟内存区域的数量。

解决：在 /etc/sysctl.conf 文件最后添加一行

vm.max_map_count=262144
即可永久修改

重启linux

2.1.4 环境启动优化

       ES是用在Java虚拟机中运行的，虚拟机默认启动占用2G内存。但是如果是装在PC机学习用，实际用不了2个G。所以可以改小一点内存。

vim  /opt/module/elasticsearch-6.6.0/config/jvm.options

2g修改为256m

-Xms256m

-Xmx256m

2.1.5 重启linux 

reboot

2.1.6 集群模式

es天然就是集群状态。

1）把ES的安装包分发给其他两台机器

2）根据第一台机器的linux系统配置，修改其他两台机子

3）在三台机器能够独立启动的情况下，修改/etc/elasticsearch/elasticsearch.yml

设置新主机的“报道中心” 就行了

1）node-xx

2）network-host linux102

discovery.zen.ping.unicast.hosts: ["linux102","linux103"]

还要记得把三台主机的node.name改成各自的

2.1.7 集群启动脚本

#!/bin/bash
es_home=/opt/module/elasticsearch-6.6.0
kibana_home=/opt/module/kibana-6.6.0-linux-x86_64
case $1 in
 "start") {
  for i in linux102 linux103 linux104
  do
    ssh $i "source /etc/profile;${es_home}/bin/elasticsearch >/dev/null 2>&1 &"
   done
};;
"stop") {
  for i in linux102 linux103 linux104
  do
      ssh $i "ps -ef|grep $es_home |grep -v grep|awk '{print $2}'|xargs kill" >/dev/null 2>&1
  done
};;
esac

2.1.8 测试

[hadoop@linux102 ~]$ curl http://linux102:9200/_cat/node?v
ip             heap.percent ram.percent cpu load_lm load_5m load_15m node.role master name
192.168.10.131      54          60       1   0.48     0.68    0.52      mdi      -    node-1
192.168.11.132      56          58       1   0.81     0.72    0.50      mdi      -    node-2
192.168.11.133      96          47       3   1.23     1.22    0.85      mdi      -    node-3

2.1.9 如果启动未成功

如果启动未成功，请去查看相关日志

vim /opt/module/elasticsearch6.6.0/logs/my-es.log

2.2 Kibana 2.2.1 安装配置（简洁版）

1）安装：下载好后放到指定目录 /opt/module 解压即可

[hadoop@linux102 kibana]$ tar -zxvf kibana-6.6.0-linux-x86_64.tar.gz
[hadoop@linux102 kibana]$ cd kibana-6.6.0-linux-x86_64/config

2）kibana配置：

配置文件在config文件夹下

Kibana.yml 常用配置说明

server.host: "0.0.0.0"
elasticsearch.hosts: ["http://linux102:9200"]

Server.host/server.port:访问的端口号和地址(地址设置后才能被外网访问)

elasticsearch.hosts:访问elasticserach的地址

3）启动命令：

nohup /opt/module/kibana/bin/kibana > /opt/module/kibana/logs/kibana.log 2>&1 &

4）测试访问：http://lunux102:5601/

2.2.2 kibana功能简介

Discover:数据搜索查看

Visualize:图标制作

Dashboard:仪表盘制作

Timeline:时序数据的高级可视化分析

DevTools:开发者工具

Management:kibana相关配置