elasticsearch内存优化设置

提示：扫一扫查出行
【扫一扫了解最新限行尾号】
复制提示

1、禁用交换分区

最简单的选项是完全禁用交换，通常elasticsearch是在框上运行的唯一服务，内存由ES_HEAP_SIZE环境变量控制，设有必要启用交换分区

linux：swapoff -a 关闭交换分区

永久禁用：编辑/etc/fstab注释掉任何包含单词swap的行

windows：系统属性 -> 高级 -> 性能 -> 高级 -> 虚拟内存

完全禁用分页文件可以实现相同的功能

2、swappines配置

确保sysctl值vm.swappiness设置为0。这减少了内核交换的趋势，并且不应该导致在正常情况下交换，同时仍允许整个系统在紧急情况下交换

注意：内核版本3.5-rcl及以上版本，swappiness为0会导致OOM杀手杀死进程，而不允许交换，将swappiness设置为1，以便仍然允许在紧急情况下交换

3、mlockall

在linux系统上使用mlockall，或者在windows上使用virtualLock，以尝试将进程地址空间锁定到RAM，防止任何Elasticsearch内存被交换出来，可以添加到配置文件中，

bootstrap.mlockall:true

启动elasticsearch后，可以通过检查此请求的输出中mlockall的值来查看此设置是否已经成功应用：curl http://localhost:9200/_nodes/process?pretty

如果你看到mlockall是false，那么意味着mlockall请求失败，在linux/unix系统上最可能的原因是，运行elasticsearch的用户没有锁定内存的权限，这可能通过在启动elaticsearch之前以root身份运行ulimit -l unlimited来授予

mlockall可能失败的另一个原因是临时目录（通常为/tmp）使用noexec选项加载

这可以通过指定一个新的临时目录，通过启动elasticsearch来解决

/bin/elasticsearch -Djna tmpdir=/path/to/new/dir

注意：如果他试图分配的内存超过可用，mlockall可能会导致JVM或shell会话退出

Java虚拟机规范中描述了两种异常

1、如果线程请求的站深度大于虚拟机所允许的最大深度，将抛出StackOverflow Error异常，logstash的hs_err_pid4944

2、如果虚拟机在扩展栈时无法申请到足够的内存空间，则抛出OutofMemary Error异常