linux - Elasticsearch进程内存锁定失败

Question

我设置了 boostrap.memory_lock=true 更新/etc/security/limits.conf 为 Elasticsearch 用户添加了无限制的内存锁

我的 Elasticsearch 在好几个月内都运行良好。突然它在 1 天前失败了。在日志中我可以看到以下错误并且进程永远不会启动

错误: Bootstrap 检查失败 elasticsearch进程请求内存加锁但内存未加锁

我点击 ulimit -as，我可以看到最大锁定内存设置为无限。这里出了什么问题？我已经尝试了几个小时，但都是徒劳的。请帮忙。

操作系统是 RHEL 7.2 Elasticsearch 5.1.2

ulimit - 作为输出

core file size        (blocks -c) 0
data seg size         (kbytes -d) unlimited
scheduling policy            (-e) 0
file size            (blocks, -f) unlimited
pending signals              (-i) 83552
max locked memory    (kbytes, -l) unlimited
max memory size      (kbytes, -m) unlimited
open files                   (-n) 65536
pipe size         (512 bytes, -q) 8
POSIX message queues   (bytes,-q) 819200
real-time priority           (-r) 0
stack size            kbytes, -s) 8192
cpu time             seconds, -t) unlimited
max user processes           (-u) 4096
virtual memory       (kbytes, -v) unlimited
file locks                   (-x) unlimited

Answer 1

这是我在 RedHat/Centos 7 上锁定我的 ES 节点上的内存所做的工作(如果其他发行版使用 systemd，它将适用于其他发行版)。

您必须在 4 个不同的地方进行更改:

1) /etc/sysconfig/elasticsearch

在 sysconfig 上:/etc/sysconfig/elasticsearch 你应该有:

ES_JAVA_OPTS="-Xms4g -Xmx4g" 
MAX_LOCKED_MEMORY=unlimited

(根据建议用可用 RAM 的一半替换 4g here)

2) /etc/security/limits.conf

关于安全限制配置:/etc/security/limits.conf 你应该有

elasticsearch soft memlock unlimited
elasticsearch hard memlock unlimited

3) /usr/lib/systemd/system/elasticsearch.service

在服务脚本上:/usr/lib/systemd/system/elasticsearch.service 你应该取消注释:

LimitMEMLOCK=infinity

你应该在更改服务脚本后执行 systemctl daemon-reload

4) /etc/elasticsearch/elasticsearch.yml

最后在 elasticsearch 配置上:/etc/elasticsearch/elasticsearch.yml 你应该添加:

bootstrap.memory_lock: true

就是这样，重新启动您的节点，RAM 将被锁定，您应该会注意到一个重大的性能改进。