Redis和kafka的选择
2019-11-20 18:17
1261 查看
都知道 Redis 是以 key 的 hash 方式来分散对列存储数据的,且 Redis 作为集群使用时,对应的应用对应一个 Redis,在某种程度上会造成数据的倾斜性,从而导致数据的丢失。
而从之前部署 Kafka 集群来看,kafka 的一个 topic(主题),可以有多个 partition(副本),而且是均匀的分布在 Kafka 集群上,这就不会出现 redis 那样的数据倾斜性。Kafka 同时也具备 Redis 的冗余机制,像 Redis 集群如果有一台机器宕掉是很有可能造成数据丢失,而 Kafka 因为是均匀的分布在集群主机上,即使宕掉一台机器,是不会影响使用。同时 Kafka 作为一个订阅消息系统,还具备每秒百万级别的高吞吐量,持久性的、分布式的特点等。
相关文章推荐
- ELK之消息队列选择redis_kafka_rabbitmq
- Springmvc+mybatis+shiro+Dubbo+ZooKeeper+Redis+KafKa j2ee分布式架构
- kafka zookeeper redis 搭建
- Kafka+Spark Streaming+Redis实时系统实践
- java原生程序redis连接(连接池/长连接和短连接)选择问题
- Spring Data Redis与Jedis的选择(转)
- Springmvc+mybatis+shiro+Dubbo+ZooKeeper+Redis+KafKa j2ee分布式架构核心技术
- 缓存技术PK:选择Memcached还是Redis?
- Springmvc+mybatis+shiro+Dubbo+ZooKeeper+Redis+KafKa j2ee分布式架构核心技术
- Kafka+Spark Streaming+Redis实时计算整合实践
- Redis和Memcache对比及选择
- Redis与memcached如何选择
- Storm编程之wordcount(kafka--》Jstorm--》redis)
- 缓存技术PK:选择Memcached还是Redis?
- Flume+Kafka+Storm+Redis实时分析系统基本架构
- Flume+Kafka+Storm+Redis实时分析系统基本架构
- 缓存技术PK:选择Memcached还是Redis?
- Redis和Memcache对比及选择
- Redis和Memcache对比及选择