Java elasticsearch安装以及部署教程


Posted in Java/Android onJune 28, 2021

1 概述

1.1 Elastic Stack的核心

The Elastic Stack,包括ElasticSearch,Kibana,Beats和Logstash(也称为ELK Stack)
能够安全可靠的获取任何来源,任何格式的数据,然后实时的对诗句进行搜索,分析和可视化
Elasticsearch,简称ES,ES是一个开源的高扩展的分布式全文搜索引擎
是整个Elastic Stack技术栈的核心,它可以近乎实时的存储,检索数据

1.2 Elasticsearch And Solr(对比图)

Java elasticsearch安装以及部署教程

2 入门

2.1 安装

官网下载: 7.8.0 Windows版

直接进入bin目录启动
9300端口为Elasticsearch集群间组件的通信端口
9200 端口为浏览器访问的 http协议 RESTful 端口
浏览器访问: localhost:9200

2.2 数据格式

将 Elasticsearch 里存储文档数据和关系型数据库 MySQL 存储数据的概念进行一个类比

Java elasticsearch安装以及部署教程

Elasticsearch 7.X 中, Type 的概念已经被删除了

2.3 java操作api

引用其他文章

3 环境

3.1 Linux单机版

#解压
tar -zxf elasticsearch-7.8.0-linux-x86_64.tar.gz
#移动
mv elasticsearch-7.8.0 /opt/
#创建用户(es不能用root用户启动)
adduser chen
#修改文件所有者
chown -R chen /opt/elasticsearch-7.8.0/
#进入配置文件目录
cd /opt/elasticsearch-7.8.0/config/
#修改配置文件
vim elasticsearch.yml

Java elasticsearch安装以及部署教程

#修改内存占用
vim jvm.options

Java elasticsearch安装以及部署教程

#修改系统配置
vim /etc/security/limits.conf
#在文件末尾中增加下面内容
#nproc  : 是操作系统级别对每个用户创建的进程数的限制
#nofile : 是每个进程可以打开的文件数的限制
# 每个进程可以打开的文件数的限制( * ,代表所有用户,也可以是具体的某一个用户)
*  soft nproc  65536
*  hard nproc  65536
*  soft nofile 65536
*  hard nofile 65536
#修改系统配置
#操作系统级别对每个用户创建的进程数的限制
vim /etc/security/limits.d/20-nproc.conf
#文件末尾同样添加
*  soft nproc  65536
*  hard nproc  65536
*  soft nofile 65536
*  hard nofile 65536
#修改系统配置
vim /etc/sysctl.conf 
# 在文件中增加下面内容
# 一个进程可以拥有的 VMA(虚拟内存区域)的数量,默认值为 65536
vm.max_map_count=655360
#重新加载
sysctl -p
#进入bin目录
cd /opt/elasticsearch-7.8.0/bin/
#使用用户chen启动es
su chen ./elasticsearch
#如果报错,再执行一遍
chown -R chen /opt/elasticsearch-7.8.0/

Java elasticsearch安装以及部署教程

3.2 Linux集群部署

节点 ip
es-node01 192.168.59.141
es-node02 192.168.59.142
es-node03 192.168.59.143

就用刚刚的es环境,在上面进行修改

#进入配置文件夹
cd /opt/elasticsearch-7.8.0/config/
#编辑配置文件
vim elasticsearch.yml
#全部删除
ggvGd

替换成以下内容

#集群名称
cluster.name: es-cluster
#节点名称,每个节点的名称不能重复
node.name: es-node01
#ip 地址,每个节点的地址不能重复
network.host: es-node01
#是不是有资格主节点
node.master: true
node.data: true
http.port: 9200
transport.tcp.port: 9300
#head 插件需要这打开这两个配置
http.cors.allow-origin: "*" 
http.cors.enabled: true
http.max_content_length: 200mb
#es7.x 之后新增的配置,初始化一个新的集群时需要此配置来选举 master
cluster.initial_master_nodes: ["es-node01"]
#es7.x 之后新增的配置,节点发现
discovery.seed_hosts: ["es-node01:9300","es-node02:9300","es-node03:9300"]
gateway.recover_after_nodes: 2
network.tcp.keep_alive: true
network.tcp.no_delay: true
transport.tcp.compress: true
#集群内同时启动的数据任务个数,默认是 2 个
cluster.routing.allocation.cluster_concurrent_rebalance: 16
#添加或删除节点及负载均衡时并发恢复的线程个数,默认 4 个
cluster.routing.allocation.node_concurrent_recoveries: 16
#初始化数据恢复时,并发恢复线程的个数,默认 4 个
cluster.routing.allocation.node_initial_primaries_recoveries: 16

修改hosts文件

cat >> /etc/hosts << EOF
192.168.59.141 es-node01
192.168.59.142 es-node02
192.168.59.143 es-node03
EOF

拿当前Linux服务器作为范本,克隆两台虚拟机(完整克隆)
开机分别修改服务器ip(142 and 143)

Java elasticsearch安装以及部署教程

设置主机名(分别设置)

hostnamectl set-hostname es-node01
hostnamectl set-hostname es-node02
hostnamectl set-hostname es-node03

修改node02 and node03的节点名称和ip

Java elasticsearch安装以及部署教程

因为是克隆来的,所以前面的些新增用户,修改系统配置,给权限什么的也被继承过来了,现在只需要启动服务即可

Java elasticsearch安装以及部署教程

3.1 elasticsearch-head chrome插件安装

插件获取网址

下载压缩包,解压。
接着点击Chrome右上角选项->工具->管理扩展(或则地址栏输入chrome://extensions/),选择打开“开发者模式”,让后点击“加载已解压得扩展程序”,选择elasticsearch-head/_site,即可完成chrome插件安装。

3.2 kibana安装

kibana7.8 Windows版下载

进入config目录,文件末尾添加

#默认端口
server.port: 5601
#es服务器地址
elasticsearch.hosts: ["http://localhost:9200"]
#索引名
kibana.index: ".kibana"
#中文	
i18n.locale: "zh-CN"

进入bin目录启动

到此这篇关于elasticsearch安装以及部署教程的文章就介绍到这了,更多相关elasticsearch框架部署内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Java/Android 相关文章推荐
SpringAop日志找不到方法的处理
Jun 21 Java/Android
SpringBoot实现异步事件驱动的方法
Jun 28 Java/Android
浅谈自定义校验注解ConstraintValidator
Jun 30 Java/Android
dubbo集成zipkin获取Traceid的实现
Jul 26 Java/Android
Logback 使用TurboFilter实现日志级别等内容的动态修改操作
Aug 30 Java/Android
idea以任意顺序debug多线程程序的具体用法
Aug 30 Java/Android
正则表达式拆分url实例代码
Feb 24 Java/Android
Java后端 Dubbo retries 超时重试机制的解决方案
Apr 14 Java/Android
JAVA 线程池(池化技术)的实现原理
Apr 28 Java/Android
Android存储中最基本的文件存储方式
Apr 30 Java/Android
Java中Dijkstra(迪杰斯特拉)算法
May 20 Java/Android
httpclient调用远程接口的方法
Aug 14 Java/Android
Java 数组内置函数toArray详解
Java集成swagger文档组件
死磕 java同步系列之synchronized解析
Jun 28 #Java/Android
利用Java设置Word文本框中的文字旋转方向的实现方法
Springboot集成阿里云OSS上传文件系统教程
简单总结SpringMVC拦截器的使用方法
SpringBoot实现异步事件驱动的方法
Jun 28 #Java/Android
You might like
ThinkPHP使用心得分享-分页类Page的用法
2014/05/15 PHP
php实现微信支付之现金红包
2018/05/30 PHP
JavaScript 直接操作本地文件的实现代码
2009/12/01 Javascript
Javascript控制页面链接在新窗口打开具体方法
2013/08/16 Javascript
自定义ExtJS控件之下拉树和下拉表格附源码
2013/10/15 Javascript
js实现文本框中焦点在最后位置
2014/03/04 Javascript
jquery自定义下拉列表示例
2014/04/25 Javascript
jQuery学习笔记之jQuery.fn.init()的参数分析
2014/06/09 Javascript
javascript实现动态统计图开发实例
2015/11/21 Javascript
Bootstrap中的表单验证插件bootstrapValidator使用方法整理(推荐)
2016/06/21 Javascript
原生和jQuery的ajax用法详解
2017/01/23 Javascript
微信小程序开发之选项卡(窗口底部TabBar)页面切换
2017/04/12 Javascript
Vue源码学习之初始化模块init.js解析
2017/11/02 Javascript
Electron中实现大文件上传和断点续传功能
2018/10/28 Javascript
webpack开发环境和生产环境的深入理解
2018/11/08 Javascript
vue使用Google地图的实现示例代码
2018/12/19 Javascript
[50:28]LGD女子学院第三期 DOTA2复仇之魂教学
2013/12/24 DOTA
python操作MySQL数据库具体方法
2013/10/28 Python
python学习之面向对象【入门初级篇】
2017/01/21 Python
Python实现爬虫从网络上下载文档的实例代码
2018/06/13 Python
python程序运行进程、使用时间、剩余时间显示功能的实现代码
2019/07/11 Python
numpy 声明空数组详解
2019/12/05 Python
python路径的写法及目录的获取方式
2019/12/26 Python
Django接收照片储存文件的实例代码
2020/03/07 Python
如何向scrapy中的spider传递参数的几种方法
2020/11/18 Python
使用OpenCV实现人脸图像卡通化的示例代码
2021/01/15 Python
CSS3制作轮播图的一种方法
2019/11/11 HTML / CSS
写自荐信有哪些不宜?
2013/10/17 职场文书
运输服务质量承诺书
2014/03/27 职场文书
2014年小学数学工作总结
2014/12/12 职场文书
2015年先进个人自荐书
2015/03/24 职场文书
2015年英语教研组工作总结
2015/05/23 职场文书
2019年大学生学年自我鉴定!
2019/03/25 职场文书
导游词之苏州盘门景区
2019/11/12 职场文书
python munch库的使用解析
2021/05/25 Python
Redis RDB技术底层原理详解
2021/09/04 Redis