LogStash+ElasticSearch性能问题?
2014-06-26 12:00
309 查看
由于论坛上发不了帖子,只能在博客中提问了,还请见谅。
目前正在用ELK来做日志收集系统,
从其他地方了解到logstash可以处理每秒几万条的日志。
但是我的环境中,每台logstash服务器每秒只能处理将近2000条日志,如果加上filter的话,更少。
日志量多的时候大部分都积压在redis中,logstash侧也没用任何日志可以看。
cpu和mem都很充足,io也没用多少,不知道问题出在哪?有没有大神帮忙分析分析?
部署图如下:用了redis做缓存,不知道这个有什么用?感觉反而影响了性能。
目前正在用ELK来做日志收集系统,
从其他地方了解到logstash可以处理每秒几万条的日志。
但是我的环境中,每台logstash服务器每秒只能处理将近2000条日志,如果加上filter的话,更少。
日志量多的时候大部分都积压在redis中,logstash侧也没用任何日志可以看。
cpu和mem都很充足,io也没用多少,不知道问题出在哪?有没有大神帮忙分析分析?
部署图如下:用了redis做缓存,不知道这个有什么用?感觉反而影响了性能。
相关文章推荐
- KafKa+Logstash+Elasticsearch日志收集系统的吞吐量问题
- logstash+Elasticsearch-1.4.4+kibana-3.1.2 安装出现的问题
- Kibana+Logstash+Elasticsearch 日志查询系统
- Kibana + ElasticSearch + Logstash + Redis on RHEL 6
- elasticsearch+logstash+kibana 初探
- 使用logstash+elasticsearch+kibana快速搭建日志平台
- 安装logstash+elasticsearch+kibana
- logstash+ElasticSearch+Kibana VS Splunk
- logstash+elasticsearch+kibana日志处理平台
- 开源分布式搜索平台ELK(Elasticsearch+Logstash+Kibana)入门学习资源索引
- 使用logstash+elasticsearch+kibana快速搭建日志平台
- ElasticSearch + Logstash + Kibana 实时日志收集、查询和分析系统
- kibana+logstash+elasticsearch+redis 续(1)
- 使用logstash+elasticsearch+kibana快速搭建日志平台
- 使用logstash+elasticsearch+kibana快速搭建日志平台
- Kibana+Logstash+Elasticsearch 日志查询系统
- Kibana+Logstash+Elasticsearch 日志查询系统
- logstash+elasticsearch+kibana快速搭建日志平台
- Logstash+Redis+Elasticsearch+Kibana 快速搭建Nginx日志查询系统
- 安装logstash+kibana+elasticsearch+redis搭建集中式日志分析平台