Linux环境下Elasticsearch相关软件安装

news2024/11/24 7:52:40

Linux环境下Elasticsearch相关软件安装

本文将介绍在linux(Centos7)环境下安装Elasticsearch相关的软件。

1、安装Elasticsearch

1.1 Elasticsearch下载

首先去Elasticsearch官网下载相应版本的安装包，下载之后传输到linux服务器上。

官网地址：https://www.elastic.co/cn/downloads/past-releases

我这里下载的是elasticsearch-7.12.1-linux-x86_64.tar.gz

国内加速下载地址：https://www.newbe.pro/tags/Mirrors/

将下载好的tar包传到服务器上指定位置，解压。

在这里插入图片描述

在这里插入图片描述

解压后出现elasticsearch文件夹，一般来讲直接启动就行了，但就是有时候会有问题。

启动命令，直接使用bin下的命令：

./bin/elasticsearch 或者是

./bin/elasticsearch -d

-d代表的是后台运行

在这里插入图片描述

原因是Elasticsearch不能使用root启动，需要新建其它用户进行启动。

# 创建一个叫zsx242030的用户
useradd zsx242030
# 给zsx242030用户设置一个密码，输入两次密码
passwd *************
# 切换zsx242030用户
su zsx242030

切换用户登录重新启动：
在这里插入图片描述

发现存在上面问题，是因为elasticsearch用户没有该文件夹的权限，需要对新用户赋予对目录的操作权限：

# 切换到root用户
su root
# zsx243040是当前登陆用户
chown -R zsx242030:zsx242030 /home/zhangshixing/elasticsearch/elasticsearch-7.12.1
# 或者
chown -R zsx242030 /home/zhangshixing/elasticsearch/elasticsearch-7.12.1

然后再尝试启动，发现没有报错：

在这里插入图片描述

# 查看进程
ps -ef|grep elasticsearch

在这里插入图片描述

我们测试一下：

curl localhost:9200

在这里插入图片描述

此时我们在浏览器试一下，把 localhost: 改成服务器 ip：

在这里插入图片描述

访问不了，因为 elasticsearch 默认只有 localhost 能访问，怎么办呢，修改配置文件：

vim config/elasticsearch.yml

1、打开network.host的注释， 改成 0.0.0.0

2、打开 node.name的注释

3、打开cluster .initial_master_nodes的注释，设置为node-1

4、最下边加两行，允许跨域。

http.cors.enabled: true
http.cors.allow-origin: "*"

重启服务，先kill, 在重启。如果没有问题，会看到下面的界面：

在这里插入图片描述

在这里插入图片描述

如果再次重启的时候有问题，请参考下面遇到的问题，很大概率上是下面的问题。

如果能够正常重启，但是还是无法通过浏览器访问，先进行下面的操作。

那么是防火墙的问题，开放9200端口：

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9200/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

1.2 安装Elasticsearch遇到的问题

期间还可能遇到的问题：

在这里插入图片描述

需要修改一些系统参数， 先切换回root用户

错误1： max file descriptors [4096] for elasticsearch process is too low, increase to least [65535]

解决： vim /etc/security/limits.conf 最下面加两行

* soft nofile 65536
* hard nofile 65536

在这里插入图片描述

nofile是单个进程允许打开的最大文件个数，soft nofile是软限制，hard nofile是硬限制。

退出回话，重新连接，执行ulimit -Hn 验证。

在这里插入图片描述

错误2：max number of threads [1024] for user [es] is too low, increase to at least [4096]

解决： vim /etc/security/limits.d/20-nproc.conf

在这里插入图片描述

错误3： max virtual memory areas vm.max_map_count [65530] is too low, increase to at least

解决： vim /etc/sysctl.conf，增加配置vm.max_map_count=262144

在这里插入图片描述

执行下面命令，修改内核参数马上生效sysctl -p

如果不生效，重新启动虚拟机reboot

在这里插入图片描述

1.3 安装Elasticsearch-head插件

head插件主要是一个可以用于监控和操作es的一个图形化界面，安装这个插件，需要先安装node.js 从官网下载

最新的稳定版安装包，上传到服务器。

1.3.1 安装node

在这里插入图片描述

解压：tar -xvf node-v16.13.1-linux-x64.tar.gz

在这里插入图片描述

然后配置两个软链，也可以配置环境变量：

ln -s /home/zhangshixing/nodejs/node-v16.13.1-linux-x64/bin/npm /usr/local/bin/npm

ln -s /home/zhangshixing/nodejs/node-v16.13.1-linux-x64/bin/node /usr/local/bin/node

主要目的就是可是识别node，npm命令，执行完毕之后验证一下：

node -v

npm -v

看版本信息是否出现：

在这里插入图片描述

如果nodejs安装过程中出现缺包，yum安装一下。

1.3.2 安装head

下载head插件： 地址 https://github.com/mobz/elasticsearch-head

可以下载zip包传到服务器上解压， 如果机器上有git , 也可以使用git clone 复制下来。
在这里插入图片描述

# 解压
unzip elasticsearch-head-master.zip

下载下来解压之后，cd 进入head 目录

在这里插入图片描述

npm install -g grunt --registry=https://registry.npm.taobao.org

在这里插入图片描述

#检测是否安装成功，如果执行命令后出现版本号就表明成功
./grunt -version

在这里插入图片描述

然后使用npm install 进行编译。

在这里插入图片描述

然后要改一个配置，把localhost改为ip地址，否则head监控的是localhost的地址，如果head和es不在一台机器上

会有问题。

修改Gruntfile.js文件，修改为ES服务器IP：
在这里插入图片描述

connect: {
			server: {
				options: {
                    hostname:'192.168.2.186',
					port: 9100,
					base: '.',
					keepalive: true
				}
			}
		}

在这里插入图片描述

最后使用 npm run start 执行，也可以使用 grunt server启动。

在这里插入图片描述

需要关闭防火墙，开放9100端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9100/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

在这里插入图片描述

连接 http://192.168.2.186:9200/

在这里插入图片描述

1.4 Elasticsearch分词器Elasticsearch-Analysis-ik安装

这个比较简单，下载之后，解压到es安装目录下的plugin目录中即可，注意下载相应的版本。

ik地址：https://github.com/medcl/elasticsearch-analysis-ik

在这里插入图片描述

新建一个ik目录，mkdir ik

解压：unzip -d ik/ elasticsearch-analysis-ik-7.12.1.zip

在这里插入图片描述

在这里插入图片描述

将ik拷贝到elasticsearch的plugins目录下：

在这里插入图片描述

在这里插入图片描述

然后重启es，进行分词测试。

在这里插入图片描述

2、安装ElasticHD

打开Xshell，连接到Linux系统中；

第一步：我们来下载程序压缩包

wget https://github.com/360EntSecGroup-Skylar/ElasticHD/releases/download/1.4/elasticHD_linux_amd64.zip

也可以提前下载好上传到服务器上elasticHD_linux_amd64.zip。

在这里插入图片描述

第二步：解压

unzip elasticHD_linux_amd64.zip

提示

Archive: elasticHD_linux_amd64.zip
inflating: ElasticHD

说明解压成功；

在这里插入图片描述

在这里插入图片描述

第三步：授权

chmod 0777 ElasticHD

第四步：启动

./ElasticHD -p 192.168.2.186:9800

在这里插入图片描述

说明启动成功了，需要关闭防火墙，开放9800端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9800/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

我们用浏览器测试下：

在这里插入图片描述

3、安装Kibana

1、下载kibana

wget https://artifacts.elastic.co/downloads/kibana/kibana-7.12.1-linux-x86_64.tar.gz

也可以提前下载好，传输到linux服务器上。

在这里插入图片描述

2、解压

tar -zxvf kibana-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、修改配置文件

vim config/kibana.yml

# 放开注释,将默认配置改成如下
server.port: 5601
server.host: "0.0.0.0"
elasticsearch.hosts: "http://192.168.2.186:9200"
kibana.index: ".kibana"

4、启动

./bin/kibana

在这里插入图片描述

切换到新建的普通用户

在这里插入图片描述

# 使用root用户赋予权限
chown -R zsx242030:zsx242030 /home/zhangshixing/elasticsearch/kibana-7.12.1-linux-x86_64

然后重新启动：

在这里插入图片描述

5、访问

需要关闭防火墙，开放5601端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=5601/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

http://192.168.87.120:5601

在这里插入图片描述

在这里插入图片描述

可以在config/kibana.yml配置文件中配置：

i18n.locale: "zh-CN"

让界面中文展示：

在这里插入图片描述

4、安装Logstash

1、下载Logstash

本人是从本地上传到服务器上的，使用的7.12.1。

logstash-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

2、解压Logstash

进入上传目录解压Logstash

tar -zxvf logstash-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、启动

./bin/logstash -e 'input { stdin { } } output { stdout {} }'

在这里插入图片描述

在这里插入图片描述

具体的使用案例请参考《Windows环境下Elasticsearch相关软件安装》。

5、安装Filebeat

1、下载安装包

https://www.elastic.co/cn/downloads/beats/filebeat

在这里插入图片描述

根据自己的需要，点击View past releases →下载相应的版本，这里我下载的是这个版本filebeat-7-12-1

2、上传服务器解压

$ tar -xvf filebeat-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、修改配置文件

编辑filebeat.yml配置文件：

a：配置 filebeat:inputs:path ，这里的路径是所要收集日志的路径

在这里插入图片描述

b：配置 enabled: true 这个配置很重要，只有配置为true之后配置才可生效，否则不起作用。

在这里插入图片描述

c：配置Outputs ，这里的Outputs有elasticsearch，logstash。按照配置文件下面的示例配置即可，只能配置一

个输出，默认是ElasticSearch。

在这里插入图片描述

4、启动

./filebeat -e -c filebeat.yml

在这里插入图片描述

正常情况下，应该有个链接ES的过程，将数据输出到es。

在这里插入图片描述

5、测试

用以下命令向beat.log文件写入内容，以下内容是全量覆盖，不是追加往里面写内容，若想改成追加内容，把下

面的>符号改成 >>即可。

echo "2020-10-31 08:55:09,578 [8] INFO  test.Logging - 2017-06-11 08:55:09--System.ArgumentOutOfRangeException" > /home/zhangshixing/elasticsearch/filebeat-7.12.1-linux-x86_64/logs/beat.log

后台打印信息：

在这里插入图片描述

用kinaba查看，多了一个索引：

在这里插入图片描述

默认情况下，Filebeat写事件到名为filebeat-7.12.1-yyyy.MM.dd的索引，其中yyyy.MM.dd是事件被索引的日

期。为了用一个不同的名字，你可以在Elasticsearch输出中设置index选项。

在这里插入图片描述

在这里插入图片描述

到目前为止，和Elasticsearch相关的一些常用的软件都介绍完毕。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/781369.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Sony索尼CMOS图像传感器SubLVDS与SLVS-EC接口FPGA开发方案

Sony索尼CMOS图像传感器SubLVDS与SLVS-EC接口FPGA开发方案

索尼Sony公司的工业CMOS图像传感器主要有3种接口：Sub-LVDS、SLVS、SLVS-EC。 Sub-LVDS接口的CMOS主要是IMX2XX系列和IMX3XX系列的一部分型号，例如IMX250，IMX252、IMX255、IMX392、IMX304等。 SLVS与SLVS-EC接口的CMOS主要是IMX3XX系列的一部分…
阅读更多...
ReviewTools-iOS混淆工具

ReviewTools-iOS混淆工具

ReviewTools-iOS混淆工具 下载 一键混淆 拖拽或点击上传项目，然后选择一个代码库即可开始对项目混淆。 一键混淆默认开启了所有的混淆选项，开启字符串加密功能需要手动选择一种加密方式。混淆单词以及垃圾代码均来自于大量Github项目，完美解决…
阅读更多...
使用css给图片添加酷炫标题的几种方式

使用css给图片添加酷炫标题的几种方式

使用css给图片添加酷炫标题的几种方式 在本文章中，将会向大家展示如何使用 CSS3 创建具有各种过渡动画的图像标题。 浏览器支持情况 这些方式将在很大程度上依赖于css3的transform和transition属性，这些属性是相对较新的功能，因此&#xf…
阅读更多...
设计模式原则

设计模式原则

1、设计模式七大原则 1.1 设计模式的目的 编写软件过程中，程序员面临着来自 耦合性，内聚性以及可维护性，可扩展性，重用性，灵活性 等多方面的挑战，设计模式是为了让程序(软件)，具有更好 代码重…
阅读更多...
抖音短视频seo矩阵系统源码解析与技术实现

抖音短视频seo矩阵系统源码解析与技术实现

抖音短视频SEO矩阵系统源码解析与技术实现涉及到多个方面的技术，包括算法、网络爬虫、数据挖掘、自然语言处理、数据库设计等。 一、 以下是一些实现此系统的技术要点和步骤： 数据采集和处理 首先，需要对抖音短视频进行数据采集。这可以通过编…
阅读更多...
【Linux进程】进程控制(上) {进程创建：fork的用法，fork的工作流程，写时拷贝；进程终止：3种退出情况，退出码，常见的退出方法}

【Linux进程】进程控制(上) {进程创建：fork的用法，fork的工作流程，写时拷贝；进程终止：3种退出情况，退出码，常见的退出方法}

一、进程创建 1.1 fork的初步认识和基本使用 在linux中fork函数是非常重要的函数&#xff0c;它从已存在进程中创建一个新进程。新进程为子进程&#xff0c;而原进程为父进程。 #include <unistd.h> pid_t fork(void);返回值&#xff1a;子进程中返回0&#xff0c;父进…
阅读更多...
批量AI智剪：让您的短视频制作更加轻松有趣！

批量AI智剪：让您的短视频制作更加轻松有趣！

在如今的社交媒体时代&#xff0c;短视频已经成为了人们表达创意和分享生活的重要方式。然而&#xff0c;对于许多人来说&#xff0c;短视频制作却是一项繁琐且技术要求较高的任务。幸运的是&#xff0c;现在有了AI智剪&#xff0c;让您的短视频制作变得更加轻松有趣&#xff0…
阅读更多...
java小区物业管理系统

java小区物业管理系统

java小区物业管理系统 计算机小区物业管理系统 ssh小区物业管理系统 基于javasshmysql小区物业管理系统的设计与实现 运行环境&#xff1a; JAVA版本&#xff1a;JDK1.8 IDE类型&#xff1a;IDEA、Eclipse都可运行 数据库类型&#xff1a;MySql&#xff08;8.x版本都可&a…
阅读更多...
3.18 Bootstrap 列表组(List Group)

3.18 Bootstrap 列表组(List Group)

文章目录 Bootstrap 列表组&#xff08;List Group&#xff09;向列表组添加徽章向列表组添加链接向列表组添加自定义内容 Bootstrap 列表组&#xff08;List Group&#xff09; 本章我们将讲解列表组。列表组件用于以列表形式呈现复杂的和自定义的内容。创建一个基本的列表组的…
阅读更多...
使用 Solon Cloud 的 Jaeger 做请求链路跟踪

使用 Solon Cloud 的 Jaeger 做请求链路跟踪

<dependency><groupId>org.noear</groupId><artifactId>jaeger-solon-cloud-plugin</artifactId> </dependency>1、描述 分布式扩展插件。基于 jaeger 适配的 solon cloud 插件。基于 opentracing 开放接口提供链路跟踪支持。 2、配置示…
阅读更多...
vulnhub打靶--raven

vulnhub打靶--raven

目录 vulnhub--raven1.nmap扫描端口服务2.点击主页service发现wordpress目录&#xff0c;识别为wordpress3.使用wpscan扫描4.扫描网站发现两个用户5.简单尝试下发现michael用户名和密码一致6.提权7.总结 vulnhub–raven 下载地址&#xff1a;raven 1.nmap扫描端口服务 2.点击…
阅读更多...
Spring：xml 配置

Spring：xml 配置

Bean 配置xml 配置反射模式工厂方法模式Factory Bean 模式配置 在 Spring 中，配置 bean 实例一般使用 xml 配置方式或注解（Annontation） 方式进行配置。 xml 配置 在 xml 配置中分为三种方式，分别为反射模式、工厂方法模式和 Factory Bean 模式。 反射模式：指通过指定 …
阅读更多...
IMU和视觉融合学习笔记

IMU和视觉融合学习笔记

利用纯视觉信息进行位姿估计&#xff0c;对运动物体、光照干扰、场景纹理缺失等情况&#xff0c;定位效果不够鲁棒。当下&#xff0c;视觉与IMU融合(VI-SLAM&#xff09;逐渐成为常见的多传感器融合方式。视觉信息与IMU 数据进行融合&#xff0c;根据融合方式同样可分为基于滤波…
阅读更多...
【NLP】视觉变压器与卷积神经网络

【NLP】视觉变压器与卷积神经网络

一、说明 本篇是 变压器因其计算效率和可扩展性而成为NLP的首选模型。在计算机视觉中&#xff0c;卷积神经网络&#xff08;CNN&#xff09;架构仍然占主导地位&#xff0c;但一些研究人员已经尝试将CNN与自我注意相结合。作者尝试将标准变压器直接应用于图像&#xff0c;发现在…
阅读更多...
4.2 Bootstrap HTML编码规范

4.2 Bootstrap HTML编码规范

文章目录 Bootstrap HTML编码规范语法HTML5 doctype语言属性IE 兼容模式字符编码引入 CSS 和 JavaScript 文件HTML5 spec links 实用为王属性顺序布尔&#xff08;boolean&#xff09;型属性减少标签的数量JavaScript 生成的标签 Bootstrap HTML编码规范 语法 用两个空格来代替…
阅读更多...
【Verilog】乒乓操作

【Verilog】乒乓操作

文章目录 乒乓操作乒乓操作简单介绍乒乓操作的处理流程代码参考功能代码testbench波形文件 乒乓操作应用场景何时考虑使用乒乓操作乒乓操作的三个优点具体实现分析不间断地处理数据&#xff0c;无缝缓冲与处理可以节约缓冲区空间用低速模块处理高速数据流 乒乓操作 乒乓操作简…
阅读更多...
光电器件的种类、原理和应用

光电器件的种类、原理和应用

光电器件是指能够将光信号转换成电信号或者将电信号转换成光信号的器件。它们广泛应用于通信、计算机、医疗、能源和环保等领域。本文将从光电器件的种类、原理和应用三个方面进行论述。 一、光电器件的种类 根据其功能和结构特点&#xff0c;光电器件可以分为多种类型&#…
阅读更多...
【基于CentOS 7 的iscsi服务】

【基于CentOS 7 的iscsi服务】

目录 一、概述 1.简述 2.作用 3. iscsi 4.相关名称 二、使用步骤 - 构建iscsi服务 1.使用targetcli工具进入到iscsi服务器端管理界面 2.实现步骤 2.1 服务器端 2.2 客户端 2.2.1 安装软件 2.2.2 在认证文件中生成iqn编号 2.2.3 开启客户端服务 2.2.4 查找可用的i…
阅读更多...
Spring Boot-3

Spring Boot-3

学习笔记&#xff08;今天又读了好多篇的博客&#xff0c;做个今天的总结&#xff0c;加油&#xff01;&#xff01;&#xff01;&#xff09; PS&#xff1a;快到中伏了&#xff0c;今天还是好热 使用阿里巴巴 FastJson 的设置 1、jackson 和 fastJson 的对比 有很多人已经…
阅读更多...
spmvc基本要求

spmvc基本要求

Mvc第一天 今天目标就是将所有的接口相关的注解理解,并且所有的注解都举例写出代码(cdsn上查) 1 mvc的基本概念: mvc: model,view,Controller,简单解释就是模型,视图,控制器.面试会问,md文档这些描述很到位,你可以看看 2 接口注解: (1) Controller/RestController表示当前…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023