prometheus删除数据，通过 API 接口删除指定数据

prometheus 通过 API 接口删除指定数据

前提：

#停止prometheus
ps -ef |grep -v grep | grep prometheus.yml | awk '{print $2}' | xargs kill
#增加--web.enable-admin-api后启动prometheus
nohup /home/xxx/prometheus-2.25.2.linux-amd64/prometheus --config.file=prometheus.yml --web.enable-admin-api --web.enable-lifecycle > nohup.out 2>&1 &

基本案例：

curl -X POST -g 'http://127.0.0.1:9090/api/v1/admin/tsdb/delete_series?start=1660723273&end=1667894433&match[]=node_cpu_seconds_total{mode="idle"}'

linux 可以使用 date +%s 获得当前的时间戳，可以使用 date -d "2019-12-22 00:00:00" +%s 将指定的日期转成时间戳，date -d "7 days ago" +%s 获取7天前的时间戳。

 

删除API 示例：

#删除与某个标签匹配的所有时间序列指标
curl -X POST -g 'http://localhost:9090/api/v1/admin/tsdb/delete_series?match[]={kubernetes_name="redis"}'

#删除 job 任务或者 instance 的数据指标：
curl -X POST -g 'http://localhost:9090/api/v1/admin/tsdb/delete_series?match[]={job="youjobname"}'
curl -X POST -g 'http://localhost:9090/api/v1/admin/tsdb/delete_series?match[]={instance="192.168.129.110:9090"}'

#Prometheus 中删除所有的数据，可以使用如下命令（正则）：
curl -X POST -g 'http://localhost:9090/api/v1/admin/tsdb/delete_series?match[]={__name__=~".+"}'
# 删除某个指标数据
curl -X POST -g 'http://127.0.0.1:9090/api/v1/admin/tsdb/delete_series?start=1660723273&end=1667894433&match[]=node_cpu_seconds_total{mode="idle"}'

 

使用数据删除接口虽然可以删除一定时间范围内的 Metric 数据，但实际的数据仍然存在于磁盘上，并在 prometheus 保存的数据到期后自动清除，可以通过数据清理接口显式地清除。

curl -X POST http://127.0.0.1:9090/api/v1/admin/tsdb/clean_tombstones

Prometheus 数据保存时长通过启动参数 --storage.tsdb.retention 设置。