es命令删除索引数据_删除ES索引里面的数据

今天药忘吃喽~ 2023-01-01 05:56 391阅读 0赞

开发之前把接口日志写入ES时，感觉设计并不合理。当然，我也不知道怎么设计才是合理的。总之，就是无法像处理openresty日志那样，按天生成1个ES索引，这样就可以简单匹配月份，直接删除整个月的索引数据了。

但是，现在所有接口日志写入进1个索引里。我想删除几百天，比如200天前的数据，研究了好久。

![Image 1][]

下面的脚本，我找了2天，按照网上的文档，也修改了2天。正好最近第3次开始学习shell，发现结合shell知识，解决问题还是很有效果。

下面的脚本，就可以删除200天前的ES数据。\[\[email protected\]~\]\# cat /yqd/sh/Clean\_Elasticsearch\_Yqdlog.sh

\#!/bin/bash

curl  -X POST "10.253.40.87:9200/yqdlog/\_delete\_by\_query?pretty" -H 'Content-Type:application/json' -d '

\{

"query": \{

"range": \{

"bank\_interfacelog\_createTime": \{

"gte": "now-200d",

"lte": "now",

"format": "epoch\_millis"

\}

\}

\}

\}'

\#     echo "已清除$index 索引内200天前数据~"

第三列的“10.253.40.87:9200”：ES地址

第三列的“yqdlog”：索引名称

第七列的“bank\_interfacelog\_createTime”：指定删除的时间字段

第八列的“now-200d”：删除数据的时间范围，“-200d”，就是删除200天前的数据

第十列：默认，也可以自定义

执行脚本：\[\[email protected\]~\]\# sh /yqd/sh/Clean\_Elasticsearch\_Yqdlog.sh

\{

"took" : 2382512,

"timed\_out" : false,

"total" : 8817667,

"deleted" : 8817667,

"batches" : 8818,

"version\_conflicts" : 0,

"noops" : 0,

"retries" : \{

"bulk" : 0,

"search" : 0

\},

"throttled\_millis" : 0,

"requests\_per\_second" : -1.0,

"throttled\_until\_millis" : 0,

"failures" : \[ \]

\}

执行脚本过程中，ES的head插件显示“yqdlog”索引数据有明显下降趋势，但是，zabbix监控的磁盘空间反而有更大的占用。

网上的文档说，ES的删除，不会立即生效，后期会自动删除。这个问题，有待研究。

次日再看zabbix，磁盘空间好像是有下降了。

参考文档：

https://www.cnblogs.com/abkn/p/10302883.html——es定期删除数据

[Image 1]:

发表评论取消回复

表情：

评论列表（有 0 条评论，391人围观）

还没有评论，来说两句吧...

相关阅读

相关 ES(elasticsearch)删除指定索引

场景需要删除指定的索引语法执行命令 DELETE /索引名比如：DELETE /mysql-status\_-2023.06 执行结果：

柔光的暖阳◎/ 2024年03月16日 23:04/ 0 赞/ 59 阅读

相关 mysql索引 -＞创建索引、修改索引、删除索引的命令语句

　　查看表中已经存在 index：show index from table\_name; 　　创建和删除索引　　索引的创建可以在CREATE TABLE语句中进行，也可

Bertha 。/ 2023年09月24日 10:02/ 0 赞/ 107 阅读

相关 es命令删除索引数据_删除ES索引里面的数据

开发之前把接口日志写入ES时，感觉设计并不合理。当然，我也不知道怎么设计才是合理的。总之，就是无法像处理openresty日志那样，按天生成1个ES索引，这样就可以简单匹配月份

今天药忘吃喽~/ 2023年01月01日 05:56/ 0 赞/ 392 阅读

相关 es 索引操作（创建、查看、删除）

文章目录 es 索引操作（创建、查看、删除）创建判断索引是否存在查看索引批量查看索引

Bertha 。/ 2022年09月07日 06:09/ 0 赞/ 799 阅读

相关 ES批量删除指定id数据

ES批量删除指定id数据 //查询指定分页的待删除的数据 List<KnowledgeBase> knowledgeDeletes = knowledge

左手的ㄟ右手/ 2022年08月30日 05:29/ 0 赞/ 266 阅读

相关 solr 索引数据删除

删除solr索引数据，使用XML有两种写法： 1） <delete><id>1</id></delete> <commit/> 2) <d

矫情吗；*/ 2022年06月12日 15:12/ 0 赞/ 529 阅读

相关 solr删除全部索引数据

SOLR 删除全部索引数据： <delete><query>\:\</query></delete><commit/> ![Center][]

素颜马尾好姑娘i/ 2022年06月12日 13:42/ 0 赞/ 246 阅读

相关【Solr】solr删除全部索引数据

SOLR 删除全部索引数据： <delete><query>:</query></delete><commit/> ![这里写图片描述][SouthEast]

﹏ヽ暗。殇╰゛Y/ 2022年06月12日 07:17/ 0 赞/ 307 阅读

相关索引数据删除

删除solr索引数据，使用XML有两种写法： 1） <delete><id>1</id></delete> <commit/> 2) <d

素颜马尾好姑娘i/ 2022年06月08日 04:54/ 0 赞/ 305 阅读

相关 elasticSearch创建索引，创建映射，插入数据，删除索引，删除数据

\查询索引下的数据 GET /my_store/_search \删除索引 DELETE /my_store \创建索引 PUT /my_s

川长思鸟来/ 2021年09月28日 03:26/ 0 赞/ 517 阅读