ElasticSearch搜索与分析引擎-Linux离线环境安装教程

一、下载安装包

网盘链接:

二、安装流程及遇到的问题和解决方案

（1）JDK安装

（2）Elasticsearch安装

（3）Kibana安装

（4）Ik分词器安装

三、启动过程中的问题

（1）日志输出

（2）日志一直输出

（3）告警日志

（4）设置密码

（5）failed to authencated user [xxxx]

（6）Es和Kibana启动停止命令

一、下载安装包

Jdk官网：Java Downloads | Oracle

Es+Kibana官网：Download Elasticsearch | Elastic

Ik分词器：https://github.com/medcl/elasticsearch-analysis-ik

网盘链接:

Es链接: https://pan.baidu.com/s/1u4a_3w_2271jkdbgoD9pXg 提取码: 865r 
Kibana链接: https://pan.baidu.com/s/1pwBk5gIjgegzFg4eAOPoew 提取码: 7zz4 
Ik分词器链接: https://pan.baidu.com/s/10wK4TOfGJsAItRoewQPN0Q 提取码: 3gzx 
JDK11链接: https://pan.baidu.com/s/1m1IpkF6ResRyb1WQveeZJQ 提取码: bwk8

二、安装流程及遇到的问题和解决方案

（1）JDK安装

（1）将下载好的jdk安装包放到/usr/local/java目录下，解压缩：tar -zxvf jdk-11.0.22_linux-x64_bin.tar.gz

（2）修改环境变量配置文件：vim /etc/profile

    export JAVA_HOME=/usr/local/java/jdk-11.0.22  
    export JRE_HOME=${JAVA_HOME}/jre  
    export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib  
    export PATH=${JAVA_HOME}/bin:$PATH

（3）保存：source /etc/profile

（4）查看是否安装成功：java -version

PS : JDK这个安装过程，可装可不装，Es有自己封装好的jdk。

（2）Elasticsearch安装

（2.1） 将下载好的安装包，放到服务器上，例如：/app/elastic目录下，然后解压缩：tar -zxvf elasticsearch-7.16.3-linux-x86_64.tar.gz

（2.2）进入elasticsearch目录下，再进入config目录，编辑配置文件：vim elasticsearch.yml，修改好配置文件后，wq保存并退出

    #设置集群名和节点名
    cluster.name: my-es
    node.name: node-1

    #控制节点是否允许从单个目录启动多个实例。这个参数的目的是防止多个节点共享相同的数据路径，以            
    #防止数据丢失
    node.max_local_storage_nodes: 256

    #设置es的data和log目录，data和log目录如果不存在，可以自己创建，然后制定对应的路径
    path.data: /app/es/es-test/data
    path.logs: /app/es/es-test/logs

    #es启动时，会检测是否有内存锁定的配置，不开启时，启动日志中可能会报错，打开注释后，同步需要        
    #更改一些系统文件的配置项
    bootstrap.memory_lock: true

    #设置对外可访问的地址及端口号
    network.host: 0.0.0.0
    http.port: 9200

    #开启集群模式时，需要指定一个初始化的主节点
    cluster.initial_master_nodes: ["node-1"]

    #设置用户名和密码，具体设置请看（三-4）
    xpack.security.enabled: true
    xpack.security.enrollment.enabled: true

    #离线环境，需要将该配置项设为false，这样不会默认去官网更新
    ingest.geoip.downloader.enabled: false

（2.3）启动es,进入bin目录，执行：./elasticsearch

安装Es的时候，会有以下几个常见的问题：

（p1）can not run elasticsearch as root

[2023-01-31T17:42:42,296][WARN ][o.e.b.ElasticsearchUncaughtExceptionHandler] [] uncaught exception in thread [main]
org.elasticsearch.bootstrap.StartupException: java.lang.RuntimeException:can not run elasticsearch as root

（S1）更换一个普通用户

Es出于系统安全设置考虑，不允许root用户启动实例，需要创建一个普通用户

# 新建用户组和密码
1. groupadd elsearch#用户组
   useradd elsearch#普通用户 -g elsearch#用户组 -p elasticsearch#用户密码

# 授予普通用户权限
2.chown -R elsearch:elsearch  elasticsearch#Es目录

# 切换到elsearch用户
3.su elsearch

# 启动es
4. cd /bin
   ./elasticsearch

# 查看是否启动成功
5. 服务器请求：
    curl http://ip:9200
   浏览器请求：
    http://ip:9200
若启动成功，可以看到es版本号等信息

（p2）bootstrap checks failed

ERROR: [3] bootstrap checks failed
[1]: max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]
[2]: max number of threads [3780] for user [es] is too low, increase to at least [4096]
[3]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
[2018-12-12T21:54:57,353][INFO ][o.e.n.Node               ] [PlbSkhz] stopping ...
[2018-12-12T21:54:57,413][INFO ][o.e.n.Node               ] [PlbSkhz] stopped
[2018-12-12T21:54:57,413][INFO ][o.e.n.Node               ] [PlbSkhz] closing ...
[2018-12-12T21:54:57,473][INFO ][o.e.n.Node               ] [PlbSkhz] closed
[2018-12-12T21:54:57,488][INFO ][o.e.x.m.j.p.NativeController] [PlbSkhz] Native controller process has stopped - no new native processes can be started

（S2）修改系统文件中的部分配置项

如果非root用户创建es的话，普通用户就需要root授予sudo权限，用于修改一些系统文件的配置。

#查询当前用户是否有sudo权限
sudo cat /etc/sudoers

# max virtual memory areas vm.max_map_count [65530] is too low,increase to at least 262144]
修改命令：
    打开文件:sudo vi /etc/sysctl.conf 
        添加内容：vm.max_map_count = 262144
    保存修改：sysctl -p

# max file descriptors [4096] for elastic process is too low,increase to at least [65536]
修改命令：
    打开文件：sudo vi /etc/security/limits.conf
        添加内容：* soft nofile 65536
                 * hard nofile 65536
                 * soft nproc 65536
                 * hard nproc 65536
                 * soft memlock unlimited
                 * hard memlock unlimited

# es默认的内存大小可能需要手动修改，如果启动日志中有告警提示的话，可以酌情修改参数值
修改命令：
    打开文件：vi /es/config/jvm.options
        修改内容：-Xms 2g
                  -Xmx 2g

（P3）es自7.x之后，都有自带的jdk环境，如果安装版本和服务器本机jdk版本不符，可以使用es自带的jdk。

（S3）如图

（P4）安装ik重启后报错

# org.elasticsearch.bootstrap.StartupException: 
    java.lang.IllegalStateException: failed to obtain node locks,
    tried [[/data/elasticsearch/data/elasticsearch]] with lock id [0]; 
    maybe these locations are not writable or multiple nodes were started 
    without increasing [node.max_local_storage_nodes] (was [1])?

（S4）解决方案，设置节点数

# 打开config/elasticsearch.yml
    添加内容：node.max_local_storage_nodes: 256
    保存，重启es