Java elasticsearch安裝以及部署教程
1 概述
1.1 Elastic Stack的核心
The Elastic Stack,包括ElasticSearch,Kibana,Beats和Logstash(也稱為ELK Stack)
能夠安全可靠的獲取任何來源,任何格式的數據,然後實時的對詩句進行搜索,分析和可視化
Elasticsearch,簡稱ES,ES是一個開源的高擴展的分佈式全文搜索引擎
是整個Elastic Stack技術棧的核心,它可以近乎實時的存儲,檢索數據
1.2 Elasticsearch And Solr(對比圖)
2 入門
2.1 安裝
官網下載: 7.8.0 Windows版
直接進入bin目錄啟動
9300端口為Elasticsearch集群間組件的通信端口
9200 端口為瀏覽器訪問的 http協議 RESTful 端口
瀏覽器訪問: localhost:9200
2.2 數據格式
將 Elasticsearch 裡存儲文檔數據和關系型數據庫 MySQL 存儲數據的概念進行一個類比
Elasticsearch 7.X 中, Type 的概念已經被刪除瞭
2.3 java操作api
引用其他文章
3 環境
3.1 Linux單機版
#解壓 tar -zxf elasticsearch-7.8.0-linux-x86_64.tar.gz #移動 mv elasticsearch-7.8.0 /opt/ #創建用戶(es不能用root用戶啟動) adduser chen #修改文件所有者 chown -R chen /opt/elasticsearch-7.8.0/ #進入配置文件目錄 cd /opt/elasticsearch-7.8.0/config/ #修改配置文件 vim elasticsearch.yml
#修改內存占用 vim jvm.options
#修改系統配置 vim /etc/security/limits.conf #在文件末尾中增加下面內容 #nproc : 是操作系統級別對每個用戶創建的進程數的限制 #nofile : 是每個進程可以打開的文件數的限制 # 每個進程可以打開的文件數的限制( * ,代表所有用戶,也可以是具體的某一個用戶) * soft nproc 65536 * hard nproc 65536 * soft nofile 65536 * hard nofile 65536 #修改系統配置 #操作系統級別對每個用戶創建的進程數的限制 vim /etc/security/limits.d/20-nproc.conf #文件末尾同樣添加 * soft nproc 65536 * hard nproc 65536 * soft nofile 65536 * hard nofile 65536 #修改系統配置 vim /etc/sysctl.conf # 在文件中增加下面內容 # 一個進程可以擁有的 VMA(虛擬內存區域)的數量,默認值為 65536 vm.max_map_count=655360 #重新加載 sysctl -p #進入bin目錄 cd /opt/elasticsearch-7.8.0/bin/ #使用用戶chen啟動es su chen ./elasticsearch #如果報錯,再執行一遍 chown -R chen /opt/elasticsearch-7.8.0/
3.2 Linux集群部署
節點 | ip |
---|---|
es-node01 | 192.168.59.141 |
es-node02 | 192.168.59.142 |
es-node03 | 192.168.59.143 |
就用剛剛的es環境,在上面進行修改
#進入配置文件夾 cd /opt/elasticsearch-7.8.0/config/ #編輯配置文件 vim elasticsearch.yml #全部刪除 ggvGd
替換成以下內容
#集群名稱 cluster.name: es-cluster #節點名稱,每個節點的名稱不能重復 node.name: es-node01 #ip 地址,每個節點的地址不能重復 network.host: es-node01 #是不是有資格主節點 node.master: true node.data: true http.port: 9200 transport.tcp.port: 9300 #head 插件需要這打開這兩個配置 http.cors.allow-origin: "*" http.cors.enabled: true http.max_content_length: 200mb #es7.x 之後新增的配置,初始化一個新的集群時需要此配置來選舉 master cluster.initial_master_nodes: ["es-node01"] #es7.x 之後新增的配置,節點發現 discovery.seed_hosts: ["es-node01:9300","es-node02:9300","es-node03:9300"] gateway.recover_after_nodes: 2 network.tcp.keep_alive: true network.tcp.no_delay: true transport.tcp.compress: true #集群內同時啟動的數據任務個數,默認是 2 個 cluster.routing.allocation.cluster_concurrent_rebalance: 16 #添加或刪除節點及負載均衡時並發恢復的線程個數,默認 4 個 cluster.routing.allocation.node_concurrent_recoveries: 16 #初始化數據恢復時,並發恢復線程的個數,默認 4 個 cluster.routing.allocation.node_initial_primaries_recoveries: 16
修改hosts文件
cat >> /etc/hosts << EOF 192.168.59.141 es-node01 192.168.59.142 es-node02 192.168.59.143 es-node03 EOF
拿當前Linux服務器作為范本,克隆兩臺虛擬機(完整克隆)
開機分別修改服務器ip(142 and 143)
設置主機名(分別設置)
hostnamectl set-hostname es-node01 hostnamectl set-hostname es-node02 hostnamectl set-hostname es-node03
修改node02 and node03的節點名稱和ip
因為是克隆來的,所以前面的些新增用戶,修改系統配置,給權限什麼的也被繼承過來瞭,現在隻需要啟動服務即可
3.1 elasticsearch-head chrome插件安裝
插件獲取網址
下載壓縮包,解壓。
接著點擊Chrome右上角選項->工具->管理擴展(或則地址欄輸入chrome://extensions/),選擇打開“開發者模式”,讓後點擊“加載已解壓得擴展程序”,選擇elasticsearch-head/_site,即可完成chrome插件安裝。
3.2 kibana安裝
kibana7.8 Windows版下載
進入config目錄,文件末尾添加
#默認端口 server.port: 5601 #es服務器地址 elasticsearch.hosts: ["http://localhost:9200"] #索引名 kibana.index: ".kibana" #中文 i18n.locale: "zh-CN"
進入bin目錄啟動
到此這篇關於elasticsearch安裝以及部署教程的文章就介紹到這瞭,更多相關elasticsearch框架部署內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet!
推薦閱讀:
- 使用Docker Compose搭建部署ElasticSearch的配置過程
- logstash將mysql數據同步到elasticsearch方法詳解
- docker安裝elastic search的詳細過程
- Docker Compose一鍵ELK部署的方法實現
- 基於Docker搭建ELK 日志系統的方法