Linux环境下Elasticsearch相关软件安装

Linux环境下Elasticsearch相关软件安装

本文将介绍在linux(Centos7)环境下安装Elasticsearch相关的软件。

1、安装Elasticsearch

1.1 Elasticsearch下载

首先去Elasticsearch官网下载相应版本的安装包，下载之后传输到linux服务器上。

官网地址：https://www.elastic.co/cn/downloads/past-releases

我这里下载的是elasticsearch-7.12.1-linux-x86_64.tar.gz

国内加速下载地址：https://www.newbe.pro/tags/Mirrors/

将下载好的tar包传到服务器上指定位置，解压。

在这里插入图片描述

在这里插入图片描述

解压后出现elasticsearch文件夹，一般来讲直接启动就行了，但就是有时候会有问题。

启动命令，直接使用bin下的命令：

./bin/elasticsearch 或者是

./bin/elasticsearch -d

-d代表的是后台运行

在这里插入图片描述

原因是Elasticsearch不能使用root启动，需要新建其它用户进行启动。

# 创建一个叫zsx242030的用户
useradd zsx242030
# 给zsx242030用户设置一个密码，输入两次密码
passwd *************
# 切换zsx242030用户
su zsx242030

切换用户登录重新启动：
在这里插入图片描述

发现存在上面问题，是因为elasticsearch用户没有该文件夹的权限，需要对新用户赋予对目录的操作权限：

# 切换到root用户
su root
# zsx243040是当前登陆用户
chown -R zsx242030:zsx242030 /home/zhangshixing/elasticsearch/elasticsearch-7.12.1
# 或者
chown -R zsx242030 /home/zhangshixing/elasticsearch/elasticsearch-7.12.1

然后再尝试启动，发现没有报错：

在这里插入图片描述

# 查看进程
ps -ef|grep elasticsearch

在这里插入图片描述

我们测试一下：

curl localhost:9200

在这里插入图片描述

此时我们在浏览器试一下，把 localhost: 改成服务器 ip：

在这里插入图片描述

访问不了，因为 elasticsearch 默认只有 localhost 能访问，怎么办呢，修改配置文件：

vim config/elasticsearch.yml

1、打开network.host的注释， 改成 0.0.0.0

2、打开 node.name的注释

3、打开cluster .initial_master_nodes的注释，设置为node-1

4、最下边加两行，允许跨域。

http.cors.enabled: true
http.cors.allow-origin: "*"

重启服务，先kill, 在重启。如果没有问题，会看到下面的界面：

在这里插入图片描述

在这里插入图片描述

如果再次重启的时候有问题，请参考下面遇到的问题，很大概率上是下面的问题。

如果能够正常重启，但是还是无法通过浏览器访问，先进行下面的操作。

那么是防火墙的问题，开放9200端口：

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9200/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

1.2 安装Elasticsearch遇到的问题

期间还可能遇到的问题：

在这里插入图片描述

需要修改一些系统参数， 先切换回root用户

错误1： max file descriptors [4096] for elasticsearch process is too low, increase to least [65535]

解决： vim /etc/security/limits.conf 最下面加两行

* soft nofile 65536
* hard nofile 65536

在这里插入图片描述

nofile是单个进程允许打开的最大文件个数，soft nofile是软限制，hard nofile是硬限制。

退出回话，重新连接，执行ulimit -Hn 验证。

在这里插入图片描述

错误2：max number of threads [1024] for user [es] is too low, increase to at least [4096]

解决： vim /etc/security/limits.d/20-nproc.conf

在这里插入图片描述

错误3： max virtual memory areas vm.max_map_count [65530] is too low, increase to at least

解决： vim /etc/sysctl.conf，增加配置vm.max_map_count=262144

在这里插入图片描述

执行下面命令，修改内核参数马上生效sysctl -p

如果不生效，重新启动虚拟机reboot

在这里插入图片描述

1.3 安装Elasticsearch-head插件

head插件主要是一个可以用于监控和操作es的一个图形化界面，安装这个插件，需要先安装node.js 从官网下载

最新的稳定版安装包，上传到服务器。

1.3.1 安装node

在这里插入图片描述

解压：tar -xvf node-v16.13.1-linux-x64.tar.gz

在这里插入图片描述

然后配置两个软链，也可以配置环境变量：

ln -s /home/zhangshixing/nodejs/node-v16.13.1-linux-x64/bin/npm /usr/local/bin/npm

ln -s /home/zhangshixing/nodejs/node-v16.13.1-linux-x64/bin/node /usr/local/bin/node

主要目的就是可是识别node，npm命令，执行完毕之后验证一下：

node -v

npm -v

看版本信息是否出现：

在这里插入图片描述

如果nodejs安装过程中出现缺包，yum安装一下。

1.3.2 安装head

下载head插件： 地址 https://github.com/mobz/elasticsearch-head

可以下载zip包传到服务器上解压， 如果机器上有git , 也可以使用git clone 复制下来。
在这里插入图片描述

# 解压
unzip elasticsearch-head-master.zip

下载下来解压之后，cd 进入head 目录

在这里插入图片描述

npm install -g grunt --registry=https://registry.npm.taobao.org

在这里插入图片描述

#检测是否安装成功，如果执行命令后出现版本号就表明成功
./grunt -version

在这里插入图片描述

然后使用npm install 进行编译。

在这里插入图片描述

然后要改一个配置，把localhost改为ip地址，否则head监控的是localhost的地址，如果head和es不在一台机器上

会有问题。

修改Gruntfile.js文件，修改为ES服务器IP：
在这里插入图片描述

connect: {
			server: {
				options: {
                    hostname:'192.168.2.186',
					port: 9100,
					base: '.',
					keepalive: true
				}
			}
		}

在这里插入图片描述

最后使用 npm run start 执行，也可以使用 grunt server启动。

在这里插入图片描述

需要关闭防火墙，开放9100端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9100/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

在这里插入图片描述

连接 http://192.168.2.186:9200/

在这里插入图片描述

1.4 Elasticsearch分词器Elasticsearch-Analysis-ik安装

这个比较简单，下载之后，解压到es安装目录下的plugin目录中即可，注意下载相应的版本。

ik地址：https://github.com/medcl/elasticsearch-analysis-ik

在这里插入图片描述

新建一个ik目录，mkdir ik

解压：unzip -d ik/ elasticsearch-analysis-ik-7.12.1.zip

在这里插入图片描述

在这里插入图片描述

将ik拷贝到elasticsearch的plugins目录下：

在这里插入图片描述

在这里插入图片描述

然后重启es，进行分词测试。

在这里插入图片描述

2、安装ElasticHD

打开Xshell，连接到Linux系统中；

第一步：我们来下载程序压缩包

wget https://github.com/360EntSecGroup-Skylar/ElasticHD/releases/download/1.4/elasticHD_linux_amd64.zip

也可以提前下载好上传到服务器上elasticHD_linux_amd64.zip。

在这里插入图片描述

第二步：解压

unzip elasticHD_linux_amd64.zip

提示

Archive: elasticHD_linux_amd64.zip
inflating: ElasticHD

说明解压成功；

在这里插入图片描述

在这里插入图片描述

第三步：授权

chmod 0777 ElasticHD

第四步：启动

./ElasticHD -p 192.168.2.186:9800

在这里插入图片描述

说明启动成功了，需要关闭防火墙，开放9800端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=9800/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

我们用浏览器测试下：

在这里插入图片描述

3、安装Kibana

1、下载kibana

wget https://artifacts.elastic.co/downloads/kibana/kibana-7.12.1-linux-x86_64.tar.gz

也可以提前下载好，传输到linux服务器上。

在这里插入图片描述

2、解压

tar -zxvf kibana-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、修改配置文件

vim config/kibana.yml

# 放开注释,将默认配置改成如下
server.port: 5601
server.host: "0.0.0.0"
elasticsearch.hosts: "http://192.168.2.186:9200"
kibana.index: ".kibana"

4、启动

./bin/kibana

在这里插入图片描述

切换到新建的普通用户

在这里插入图片描述

# 使用root用户赋予权限
chown -R zsx242030:zsx242030 /home/zhangshixing/elasticsearch/kibana-7.12.1-linux-x86_64

然后重新启动：

在这里插入图片描述

5、访问

需要关闭防火墙，开放5601端口。

# 查看开放的端口号 
firewall-cmd --list-all
# 设置开放的端口号
firewall-cmd --add-port=5601/tcp --permanent
# 重启防火墙 
firewall-cmd --reload

http://192.168.87.120:5601

在这里插入图片描述

在这里插入图片描述

可以在config/kibana.yml配置文件中配置：

i18n.locale: "zh-CN"

让界面中文展示：

在这里插入图片描述

4、安装Logstash

1、下载Logstash

本人是从本地上传到服务器上的，使用的7.12.1。

logstash-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

2、解压Logstash

进入上传目录解压Logstash

tar -zxvf logstash-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、启动

./bin/logstash -e 'input { stdin { } } output { stdout {} }'

在这里插入图片描述

在这里插入图片描述

具体的使用案例请参考《Windows环境下Elasticsearch相关软件安装》。

5、安装Filebeat

1、下载安装包

https://www.elastic.co/cn/downloads/beats/filebeat

在这里插入图片描述

根据自己的需要，点击View past releases →下载相应的版本，这里我下载的是这个版本filebeat-7-12-1

2、上传服务器解压

$ tar -xvf filebeat-7.12.1-linux-x86_64.tar.gz

在这里插入图片描述

3、修改配置文件

编辑filebeat.yml配置文件：

a：配置 filebeat:inputs:path ，这里的路径是所要收集日志的路径

在这里插入图片描述

b：配置 enabled: true 这个配置很重要，只有配置为true之后配置才可生效，否则不起作用。

在这里插入图片描述

c：配置Outputs ，这里的Outputs有elasticsearch，logstash。按照配置文件下面的示例配置即可，只能配置一

个输出，默认是ElasticSearch。

在这里插入图片描述

4、启动

./filebeat -e -c filebeat.yml

在这里插入图片描述

正常情况下，应该有个链接ES的过程，将数据输出到es。

在这里插入图片描述

5、测试

用以下命令向beat.log文件写入内容，以下内容是全量覆盖，不是追加往里面写内容，若想改成追加内容，把下

面的>符号改成 >>即可。

echo "2020-10-31 08:55:09,578 [8] INFO  test.Logging - 2017-06-11 08:55:09--System.ArgumentOutOfRangeException" > /home/zhangshixing/elasticsearch/filebeat-7.12.1-linux-x86_64/logs/beat.log

后台打印信息：

在这里插入图片描述

用kinaba查看，多了一个索引：

在这里插入图片描述

默认情况下，Filebeat写事件到名为filebeat-7.12.1-yyyy.MM.dd的索引，其中yyyy.MM.dd是事件被索引的日

期。为了用一个不同的名字，你可以在Elasticsearch输出中设置index选项。

在这里插入图片描述

在这里插入图片描述

到目前为止，和Elasticsearch相关的一些常用的软件都介绍完毕。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/42617.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

在自定义数据集上微调Alpaca和LLaMA

在自定义数据集上微调Alpaca和LLaMA

本文将介绍使用LoRa在本地机器上微调Alpaca和LLaMA，我们将介绍在特定数据集上对Alpaca LoRa进行微调的整个过程，本文将涵盖数据处理、模型训练和使用流行的自然语言处理库(如Transformers和hugs Face)进行评估。此外还将介绍如何使用grado应用程序部署和…
阅读更多...
STM32MP157驱动开发——LED驱动（设备树）

STM32MP157驱动开发——LED驱动（设备树）

文章目录 设备树驱动模型如何使用设备树写驱动程序设备树节点要与 platform_driver 能匹配设备树节点指定资源，platform_driver 获得资源 LED 模板驱动程序的改造：设备树驱动模型修改设备树，添加 led 设备节点修改 platform_driver 的源码编译…
阅读更多...
设计模式再探——状态模式

设计模式再探——状态模式

目录 一、背景介绍二、思路&方案三、过程1.状态模式简介2.状态模式的类图3.状态模式代码4.状态模式还可以优化的地方5.状态模式的项目实战，优化后 四、总结五、升华 一、背景介绍 最近产品中有这样的业务需求，不同时间(这里不是活动的执行时间&…
阅读更多...
前端学习——Vue (Day1)

前端学习——Vue (Day1)

Vue 快速上手 Vue 是什么 创建 Vue 实例 Vue2官网&#xff1a;https://v2.cn.vuejs.org/ <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta http-equiv"X-UA-Compatible" content"IEedge…
阅读更多...
基于单片机的语音识别智能垃圾桶垃圾分类的设计与实现

基于单片机的语音识别智能垃圾桶垃圾分类的设计与实现

功能介绍 以51单片机作为主控系统&#xff1b;液晶显示当前信息和状态&#xff1b;通过语音识别模块对当前垃圾种类进行语音识别&#xff1b; 通过蜂鸣器进行声光报警提醒垃圾桶已满&#xff1b;采用舵机控制垃圾桶打开关闭&#xff1b;超声波检测当前垃圾桶满溢程度&#xff1…
阅读更多...
【目标跟踪】2、FairMOT | 平衡多目标跟踪中的目标检测和 Re-ID 任务 | IJCV2021

【目标跟踪】2、FairMOT | 平衡多目标跟踪中的目标检测和 Re-ID 任务 | IJCV2021

文章目录 一、背景二、方法2.1 Backbone2.2 检测分支2.3 Re-ID 分支2.4 训练 FairMOT2.5 Online Inference 三、效果3.1 数据集3.2 实现细节3.3 消融实验3.4 最终效果 论文&#xff1a;FairMOT: On the Fairness of Detection and Re-Identification in Multiple Object Tracki…
阅读更多...
大模型开发(十)：Chat Completion Models API 详解

大模型开发(十)：Chat Completion Models API 详解

全文共8000余字&#xff0c;预计阅读时间约18~28分钟 | 满满干货(附代码案例)&#xff0c;建议收藏&#xff01; 本文目标&#xff1a;详解Chat Completion Models的参数及应用实例&#xff0c;并基于该API实现一个本地知识库的多轮对话智能助理 代码&文件下载点这里 一、…
阅读更多...
【前端｜CSS系列第4篇】CSS布局之网格布局

【前端｜CSS系列第4篇】CSS布局之网格布局

前言 最近在做的一个项目前台首页有一个展示词条的功能&#xff0c;每一个词条都以一个固定大小的词条卡片进行展示&#xff0c;要将所有的词条卡片展示出来&#xff0c;大概是下面这种布局 每一行的卡片数目会随着屏幕大小自动变化&#xff0c;并且希望整个卡片区域周围不要…
阅读更多...
ChatGPT 4.0 —— Code Interpreter

ChatGPT 4.0 —— Code Interpreter

&#x1f4ce;产品销售数据集.csv 选取以上的数据集作为输入&#xff0c;对Code Interpreter 进行测试 1.输入指定数据集&#xff0c;要求给出该数据集的概貌 2.请分析销售的总金额和其他变量的关系 Python Script: # Import required libraries import matplotlib.pyplot a…
阅读更多...
java项目之网络视频播放器（ssm+mysql+jsp）

java项目之网络视频播放器（ssm+mysql+jsp）

风定落花生&#xff0c;歌声逐流水&#xff0c;大家好我是风歌&#xff0c;混迹在java圈的辛苦码农。今天要和大家聊的是一款基于ssm的网络视频播放器。技术交流和部署相关看文章末尾&#xff01; 开发环境&#xff1a; 后端&#xff1a; 开发语言&#xff1a;Java 框架&a…
阅读更多...
vs2015 工程组织与动态加载

vs2015 工程组织与动态加载

10.Visual Studio动态加载_哔哩哔哩_bilibili 1.工程组织 ① researcher.cpp #include "nn/nn.h"#include "nn/factory.h" #include "nn/factory_impl/factory_impl.h"#include <iostream>int main() {int ret 0;factory_i* fct new f…
阅读更多...
Java实现获取客户端真实IP方法小结

Java实现获取客户端真实IP方法小结

Java实现获取客户端真实IP方法小结 在jsP里&#xff0c;获取客户端的IP地址的方法是&#xff1a;request.getRemoteAddr()&#xff0c;这种方法在大部分情况下都是有效的。但是在通过了Apache,Squid等反向代理软件就不能获取到客户端的真实IP地址了。如果使用了反向代理软件&am…
阅读更多...
【数据挖掘】bytewax 与 ydata工具可实时了解您的数据

【数据挖掘】bytewax 与 ydata工具可实时了解您的数据

一、说明 在这篇博文中&#xff0c;我们将介绍如何将开源流式处理解决方案 bytewax 与 ydata 分析相结合并加以利用&#xff0c;以提高流式处理流的质量。 STream 处理支持在传输中和存储之前对数据进行实时分析&#xff0c;并且可以是有状态的&#xff0c;也可以是无状态的。 …
阅读更多...
双向循环链表的基本操作（创建节点，头插，头删，尾插，尾删）

双向循环链表的基本操作（创建节点，头插，头删，尾插，尾删）

头定义&#xff1a; typedef char datatype[20];//datatypechar[20] typedef struct Node {//数据域 数据元素datatype data;//指针域 下一个节点地址struct Node* next;//指针域 上一个节点地址struct Node* prev; }*DoubleLink; 创建链表节点&#xff1a; DoubleLink crea…
阅读更多...
轻量级Web报表工具ActiveReportsJS全新发布v4.0，支持集成更多前端框架！

轻量级Web报表工具ActiveReportsJS全新发布v4.0，支持集成更多前端框架！

ActiveReportsJS 是一款基于 JavaScript 和 HTML5 的轻量级Web报表工具&#xff0c;采用拖拽式设计模式&#xff0c;不需任何服务器和组件支持&#xff0c;即可在 Mac、Linux 和 Windows 操作系统中&#xff0c;设计多种类型的报表。ActiveReportsJS 同时提供跨平台报表设计、纯…
阅读更多...
第五章 编程之免交互

第五章 编程之免交互

免交互&#xff1a;不需要人为控制就可以完成的自动化操作&#xff08;自动化运维&#xff09; shell脚本和面交互是一个概念&#xff0c;但是两种写法 shell&#xff1a;默认解释器是bash 使用i/o&#xff08;输入/输出&#xff09;重定向的方式&#xff0c;将命令的列表提供…
阅读更多...
Flask 定制日志并输出到文件

Flask 定制日志并输出到文件

Flask 定制日志并输出到文件 定制日志器flask缺省日志器配置自定义日志器 定制日志器 flask缺省日志器配置 flask自带的日志系统&#xff0c;缺省配置dictConfig()&#xff0c;但必须在Flask()应用之前使用 # flask缺省配置 from logging.config import dictConfig dictConfig…
阅读更多...
文心千帆大模型测评分享，效果超出预期

文心千帆大模型测评分享，效果超出预期

一、前言 现如今&#xff0c;随着ChatGPT的爆火越来越多的人开始关注人工智能领域了&#xff0c;大家都在尝试使用它来帮助自己在工作上提高效率亦或是解决一些问题。但ChatGPT是有一定的使用门槛的&#xff1a;首先需要我们“科学上网”才能访问&#xff0c;其次GPT4的价格相…
阅读更多...
C语言库函数 — 错误信息报告函数

C语言库函数 — 错误信息报告函数

前言 本文介绍错误信息报告函数 错误信息报告函数的作用&#xff1a; 帮助程序员快速定位代码中的错误&#xff0c;以便更快地进行调试和修复问题。 文章目录 前言一、错误信息报告函数什么是错误信息报告函数错误信息报告函数的作用strerror函数介绍strerror函数使用错误码对应…
阅读更多...
Data Structure, Algorithm,and Applications in C++

Data Structure, Algorithm,and Applications in C++

在学习这本书进阶内容之前&#xff0c;我们可以跟着它的第一章部分再巩固和复习。本书由Sartaj Sahni撰写&#xff0c;由王立柱和刘志红翻译。全书通俗易懂&#xff0c;内容丰富&#xff0c;是巩固C内容的不二选择。希望本文对各位有所帮助。 目录 1.函数与参数 1.1.传值参数…
阅读更多...
最新文章

Copyright @ 2022~2023