elasticsearch - 如何轮转 ELK 日志？

Question

我在 3 个主机中总共有大约 250 GB 的索引，即 ELK 集群中的 750 GB 数据。

那么我如何轮换 ELK 日志以在我的 ELK 集群中保留三个月的数据，而较旧的日志应该推送到其他地方。

Answer 1

您可以使用“indexname-%{+YYYY.MM}”命名格式创建您的索引。这将每月创建一个不同的索引。

然后您可以使用 curator 等插件根据时间戳过滤此索引。 策展人可以帮助您设置 CRON 作业以清除那些旧索引或将它们备份到某个 s3 存储库中。

引用 - Backup or Restore using curator

此外，您甚至可以在需要时直接从 s3 存储库恢复这些备份索引以进行历史分析。