一. 搭建 elasticsearch 創(chuàng)新互聯(lián)建站總部坐落于成都市區(qū),致力網(wǎng)站建設(shè)服務(wù)有成都網(wǎng)站建設(shè)、成都做網(wǎng)站、網(wǎng)絡(luò)營銷策劃、網(wǎng)頁設(shè)計(jì)、網(wǎng)站維護(hù)、公眾號搭建、微信小程序開發(fā)、軟件開發(fā)等為企業(yè)提供一整套的信息化建設(shè)解決方案。創(chuàng)造真正意義上的網(wǎng)站建設(shè),為互聯(lián)網(wǎng)品牌在互動(dòng)行銷領(lǐng)域創(chuàng)造價(jià)值而不懈努力! 1. 上傳 jdk-8u181-linux-x64.tar.gz 和 elasticsearch-6.1.4.tar.gz 文件到系統(tǒng)任意目錄, 安裝 java 解壓jdk-8u181-linux-x64.tar.gz文件 tar -zxvf jdk-8u181-linux-x64.tar.gz 編輯profile文件,添加jdk環(huán)境變量 vim /etc/profile 在最后添加 #JDK環(huán)境變量
引用環(huán)境變量 source /etc/profile 直接執(zhí)行java –version 確定java已可用 解壓 elasticsearch-6.1.4.tar.gz 文件 tar –zxvf elasticsearch-6.1.4.tar.gz 編輯修改 elasticsearch 的配置文件 elasticsearch.yml vim elasticsearch-6.1.4/config/elasticsearch.yml 主要修改以下信息(數(shù)據(jù)存放目錄以及日志存放目錄需要添加執(zhí)行權(quán)限,) 配置文件解析如下: 開啟服務(wù)(可以使用 -d 后臺(tái)啟用) /usr/local/elasticsearch-6.1.4/bin/elasticsearch 樂維 Tips:在啟動(dòng)服務(wù)時(shí),不能以 root 用戶開啟服務(wù), elasticsearch 需要以其他用戶開啟服務(wù); 1、 需要?jiǎng)?chuàng)建用戶; 添加 es 用戶 useradd es -m 設(shè)置 es 用戶密碼 passwd es 2、 需要修改elasticsearch-6.1.4目錄、數(shù)據(jù)存放目錄、日志存放目錄的所屬組和所屬用戶
3 、 ERROR:bootstrap checks failed : max file descriptors [4096] for elasticsearchprocess likely too low, increase to at least [65536] 原因:無法創(chuàng)建本地文件問題 , 用戶最大可創(chuàng)建文件數(shù)太小 解決方案: 切換到 root 用戶,編輯 limits.conf 配置文件, 添加類似如下內(nèi)容: vi/etc/security/limits.conf 添加如下內(nèi)容:
注: * 代表 Linux 所有用戶名稱 ( 比如 hadoop) 保存、退出、重新登錄才可生效 4 、 max virtualmemory areas vm.max_map_count [65530] likely too low, increase to at least[262144] 原因:最大虛擬內(nèi)存太小 解決方案:切換到 root 用戶下,修改配置文件 sysctl.conf vi /etc/sysctl.conf 添加下面配置: vm.max_map_count=655360 并執(zhí)行命令: sysctl -p 5 、 max number ofthreads [1024] for user [es] likely too low, increase to at least [2048] 原因:無法創(chuàng)建本地線程問題 , 用戶最大可創(chuàng)建線程數(shù)太小 解決方案: 切換到 root 用戶,進(jìn)入 limits.d 目錄下,修改 90-nproc.conf 配置文件。 vi /etc/security/limits.d/90-nproc.conf 修改 * soft nproc 1024 為 * soft nproc 2048 以 es 用戶啟動(dòng)服務(wù) (-d 可以后臺(tái)啟動(dòng) ) su es /usr/local/elasticsearch-6.1.4/bin/elasticsearch 開啟防火墻端口 9200 TCP firewall-cmd --zone=public --add-port=9200/tcp–permanent 在 WEB 上輸入 IP : 9200 測試是否可以正常訪問使用 二. 與 zabbix 對接 需要修改 zabbix_server 的配置文件 修改 HistoryStorageURL=http://192.168.150.10:9200 修改 zabbix.conf.php 文件 vi/usr/local/nginx/html/zabbix/conf/zabbix.conf.php 重啟 zabbix_server 同步成功后 方法 1 、 ElasticSearch Head 可以直接在谷歌瀏覽器上進(jìn)行安裝 (推薦) 直接把文件拖到擴(kuò)展程序進(jìn)行添加 方法 2 、這里介紹一個(gè) Elasticsearch 可視化的管理插件 elasticsearch-head ,可方便的查看,刪除,管理數(shù)據(jù) 安裝 elasticsearch-head 插件需要 nodejs 的支持 1. nodejs安裝 2. head安裝配置 請參考 https://blog.csdn.net/zoubf/article/details/79007908 三. Elasticsearch 常用命令 (由于沒有自帶的數(shù)據(jù)清理功能,需要手動(dòng)編寫腳本) 1 、 curl 命令的使用curl -X<VERB>'< PROTOCOL>://<HOST>:< PORT>/< PATH>?<QUERY_STRING>'-d '<BODY>'VERB HTTP 方法: GET, POST, PUT, HEAD, DELETE PROTOCOL http 或者 https 協(xié)議(只有在 Elasticsearch 前面有 https 代理的時(shí)候可用) HOST Elasticsearch 集群中的任何一個(gè)節(jié)點(diǎn)的主機(jī)名 PORT Elasticsearch HTTP 服務(wù)所在的端口,默認(rèn)為 9200 PATH API 路徑,資源路徑(例如 _count 將返回集群中文檔的數(shù)量) QUERY_STRING 一些可選的查詢請求參數(shù),例如 ?pretty 參數(shù)將返回易讀的 JSON 數(shù)據(jù) BODY 一個(gè) JSON 格式的請求主體(如果請求需要的話) 具體詳細(xì)方法,請參考 https://www.linuxidc.com/Linux/2016-10/136548.htm 添加索引( zabbix 為數(shù)據(jù)庫名) curl -XPUT'http://192.168.1.20:9090/zabbix?pretty' 創(chuàng)建成功后,默認(rèn)會(huì)分配五個(gè)主分片(創(chuàng)建后不可更改,通過算法將數(shù)據(jù)存放在這五個(gè)分片中的一個(gè),增刪改都是針對主分片的)和一個(gè)復(fù)制分片(可修改,每個(gè)主分片都對應(yīng)一個(gè)復(fù)制分片),這兩個(gè)默認(rèn)值都可以在配置文件中修改,也可以在創(chuàng)建的時(shí)候指定,如 curl -XPUT 'http://192.168.1.20:9090/zabbix?pretty'-d '{ "settings": { "number_of_shards" : 2, #2個(gè)主分片 "number_of_replicas" : 0 #0個(gè)復(fù)制分片 } }' 查看索引 curl -XGET'http://192.168.1.20:9090/zabbix?pretty' 查詢方式; 例如: 查詢所有文檔 curl -XGET 'http://localhost:9200/test/article/_search?pretty' -d ' { "query": { "match_all": {} } }'#返回 { # 用時(shí) 毫秒 "took" : 4 , "timed_out" : false , #分片信息 "_shards" : { "total" : 5 , "successful" : 5 , "failed" : }, "hits" : { #文檔數(shù) "total" : 3 , "max_score" : 1.0 , "hits" : [ { "_index" : "test" , "_type" : "article" , "_id" : "AVf_6fM1vEkwGPLuUJqp" , "_score" : 1.0 , "_source" : { "id" : 2 , "subject" : "第二篇文章標(biāo)題" , "content" : "第二篇文章內(nèi)容" , "author" : "jam" } }, { "_index" : "test" , "_type" : "article" , "_id" : "4" , "_score" : 1.0 , "_source" : { "id" : 4 , "subject" : "第四篇文章標(biāo)題" , "content" : "第四篇文章內(nèi)容-更新后" , "author" : "tomi" } }, { "_index" : "test" , "_type" : "article" , "_id" : "3" , "_score" : 1.0 , "_source" : { "id" : 3 , "subject" : "第三篇文章標(biāo)題" , "content" : "第三篇文章內(nèi)容" , "author" : "jam" } } } 查詢作者是名字包含“jam” 的文檔,返回id 是2和3 的文檔 curl -XGET 'http://localhost:9200/test/article/_search?pretty' -d ' { " query ": { " match ": { " author ": " jam " } } }' 查詢文章內(nèi)容包含“更新” 的文檔,返回id 是4 的文檔 curl -XGET 'http://localhost:9200/test/article/_search?pretty' -d ' { " query ": { " match ": { " content ": " 更新 " } } }' 查詢?nèi)克饕?/p> curl -XGET 'http://192.168.150.10:9200/_cat/indices/?v' 刪除所有數(shù)據(jù)包括自行添加的索引 curl -XDELETE 'http://192.168.150.10:9200/*' 2、 Elasticsearch 清理數(shù)據(jù) 由于 Elasticsearch 沒有自帶的數(shù)據(jù)刪除配置,所以需要腳本進(jìn)行清理數(shù)據(jù) 1 )刪除索引是會(huì)立即釋放空間的,不存在所謂的“標(biāo)記”邏輯。 2 )刪除文檔的時(shí)候,是將新文檔寫入,同時(shí)將舊文檔標(biāo)記為已刪除。磁盤空間是否釋放取決于新舊文檔是否在同一個(gè)segment file里面,因此ES后臺(tái)的segment merge在 合并segment file的過程中有可能觸發(fā)舊文檔的物理刪除 。 但因?yàn)橐粋€(gè)shard可能會(huì)有上百個(gè)segment file,還是有很大幾率新舊文檔存在于不同的segment里而無法物理刪除。想要手動(dòng)釋放空間,只能是定期做一下force merge,并且將max_num_segments設(shè)置為1 。 刪除文檔 釋放空間 配置計(jì)劃任務(wù) jdk-8u181-linux-x64.tar.gz、elasticsearch-6.1.4.tar.gz文件下載 密碼:x6I7 原文地址 教你搭建elasticsearch與實(shí)現(xiàn)zabbix對接 http://www.lwops.cn/forum.php?mod=viewthread&tid=70 (出處: 樂維_一站式運(yùn)維監(jiān)控管理平臺(tái)) |
新聞標(biāo)題:【Zabbix】教你搭建elasticsearch與實(shí)現(xiàn)zabbix對接
URL鏈接:http://m.rwnh.cn/article26/pcdojg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站收錄、Google、網(wǎng)站策劃、網(wǎng)站改版、軟件開發(fā)、響應(yīng)式網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)