关于Elasticsearch 运行过程出现问题的相关思考

摘要: Elasticsearch

1 Direct Memory OOM问题

在服务端出现过,在客户端也出现过,都是netty在写数据时发生错误.

服务端出现时分为两部分: 1 merge阶段报出Direct buffrer memory异常,2是在客户端向服务端发送请求等待响应的过程中,报出Direct buffrer memory异常.

由于Elasticsearch版本为1.3.1 ,发现其报错位置在netty组件调用过程中,总结起来的过程就是当写入时,目标处理速率过低,和写入速率比,大幅落后的情况下,就会报出这个异常.

在客户端写入ES时,发现ES只分配1g内存,执行速度受gc影响较慢,大批量创建索引,客户端就会包这个异常,同时服务端会崩溃.