濮阳杆衣贸易有限公司

主頁 > 知識庫 > 使用elasticsearch定時(shí)刪除索引數(shù)據(jù)

使用elasticsearch定時(shí)刪除索引數(shù)據(jù)

熱門標(biāo)簽:河南防封號電銷機(jī)器人是什么 宿城區(qū)電話機(jī)器人找哪家 福州企業(yè)電銷機(jī)器人排名 上海申請高400開頭的電話 10086外包用的什么外呼系統(tǒng) 麗江真人語音電話外呼系統(tǒng) 打400電話怎么辦理收費(fèi) 400電話辦理介紹信 怎么找到?jīng)]有地圖標(biāo)注的店

1、有的時(shí)候我們在使用ES

由于資源有限或業(yè)務(wù)需求,我們只想保存最近一段時(shí)間的數(shù)據(jù),所以有必要做定時(shí)刪除數(shù)據(jù)。

2、編寫腳本

vim del_es_by_day.sh
#!/bin/bash
#定時(shí)刪除elasticsearch索引
#author menard 2019-3-25
date=`date -d "-7 days" "+%Y.%m.%d"`
/usr/bin/curl -v --user elastic:password -XDELETE "http://192.168.10.201:9200/*-$date"

增加可執(zhí)行權(quán)限 chmod +x del_es_by_day.sh

3、創(chuàng)建用于測試的索引

put test-2019.03.18
put index-2019.03.18

4、執(zhí)行腳本測試結(jié)果,可以看到刪除成功

5、做定時(shí)任務(wù)

crontab -e
00 01 * * * /workspace/script/del_es_by_day.sh

補(bǔ)充:Elasticsearch定時(shí)備份索引數(shù)據(jù)與恢復(fù)

定時(shí)備份腳本

Linux定時(shí)任務(wù)功能使用cron服務(wù)來進(jìn)行

編寫定時(shí)任務(wù)的cron表達(dá)式

crontab -e #進(jìn)入cron定時(shí)任務(wù)編輯

定時(shí)任務(wù)

*/1 * * * * /opt/scheduler/es_bk.sh >> /opt/scheduler/bk_log.txt 2>&1

每隔1分鐘定時(shí)執(zhí)行 /opt/scheduler/目錄下的es_bk.sh腳本,將數(shù)據(jù)內(nèi)容寫入到 /opt/scheduler目錄下的bk.log.txt文件中

查看一下es_bk.sh腳本內(nèi)容

#! /bin/bash
echo '=================================start======================================'
#刪除備份的快照
curl -i -X DELETE localhost:9200/_snapshot/es_backup/snapshot01
#再次備份
curl -i -X PUT localhost:9200/_snapshot/es_backup/snapshot01
echo '==================================end======================================='

ES備份數(shù)據(jù)需要將要備份的索引數(shù)據(jù)快照一份,需要指定一個(gè)快照名,且不能使用相同的快照,所以在每次備份之前需要刪除舊的快照,再備份。

ES備份與恢復(fù)

創(chuàng)建一個(gè)備份倉庫(目錄)

mkdir -p /bk/es/data
#修改權(quán)限
chmod -R 777 bk

修改elasticsearch.yml文件,指定倉庫位置

發(fā)送初始化倉庫請求

curl -i -H ""'Content-Type:application/json;charset=UTF-8'"" -X PUT --data '{"type": "fs","settings": {"location": "/bk/es/data"}}' localhost:9200/_snapshot/es_backup

es_backup是備份命名空間,可以隨意指定

創(chuàng)建第一份快照

curl -i -X PUT localhost:9200/_snapshot/es_backup/snapshot01

將使用es_backup這個(gè)備份將es的所有索引數(shù)據(jù)備份到snapshot01這個(gè)快照下,當(dāng)然也可以只備份指定索引

curl -i -H ""'Content-Type:application/json;charset=UTF-8'"" -X PUT --data '{"indices": "'bk_user_index_server'"}' localhost:9200/_snapshot/es_backup/snapshot01

重啟定時(shí)任務(wù)

systemctl restart cron

恢復(fù)索引

恢復(fù)指定

curl -i -H ""'Content-Type:application/json;charset=UTF-8'"" -X POST --data '{"indices": "'bk_user_index_server'"}' localhost:9200/_snapshot/es_backup/snapshot01/_restore

恢復(fù)所有

curl -i -X POST localhost:9200/_snapshot/es_backup/snapshot01/_restore

以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教。

標(biāo)簽:遵義 荊門 朝陽 連云港 隴南 運(yùn)城 面試通知 雞西

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《使用elasticsearch定時(shí)刪除索引數(shù)據(jù)》,本文關(guān)鍵詞  使用,elasticsearch,定時(shí),刪除,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《使用elasticsearch定時(shí)刪除索引數(shù)據(jù)》相關(guān)的同類信息!
  • 本頁收集關(guān)于使用elasticsearch定時(shí)刪除索引數(shù)據(jù)的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    巴林右旗| 嘉兴市| 个旧市| 五大连池市| 西峡县| 阿拉善右旗| 牡丹江市| 翼城县| 淳化县| 玉溪市| 济源市| 彩票| 庆阳市| 商水县| 木兰县| 霞浦县| 福海县| 泉州市| 怀宁县| 应城市| 武陟县| 安义县| 黄骅市| 外汇| 永宁县| 喀喇沁旗| 达拉特旗| 霍城县| 新晃| 伊宁县| 衡山县| 阳高县| 白沙| 都江堰市| 北安市| 四子王旗| 河池市| 抚远县| 浠水县| 兴义市| 益阳市|