如何高效在Centos7上部署Redis集群?
摘要:Redis简介 Redis(Remote Dictionary Server)是完全开源的、遵守BSD协议的、高性能的Key-Value数据库。 Redis与其他Key-Value缓存产品有一下三个特点: Redis支持数据的持久化,可以将
Redis简介
Redis(Remote Dictionary Server)是完全开源的、遵守BSD协议的、高性能的Key-Value数据库。
Redis与其他Key-Value缓存产品有一下三个特点:
Redis支持数据的持久化,可以将内存中的数据保存在磁盘中,重启的时候可以再次加载进行使用。
Redis不仅仅支持简单的Key-Value类型的数据,同时还提供List、Set、ZSet、Hash等数据结构的存储
Redis支持数据的备份,既Master-Slave模式的数据备份。
Redis优势
性能极高,因为Redis是针对内存来读写的。
丰富的数据类型String、List、Set、ZSet、Hash
原子,Redis的所有操作都是原子性的,意思就是要么成功要么失败完全不执行,单个操作是原子性的。多个操作也支持事务,通过MULTI和EXEC指令包起来。
丰富的特性 – Redis还支持 publish/subscribe, 通知, key 过期等等特性
Redis官网官方网站
Redis集群
为什么集群
随着大数据时代的到来,在大型系统应用中,几十上百G的数据很常见.而无论是物理机、云主机(虚拟机),内存资源往往是有限的,虽然目前硬件成本降低,几十G几十核的主机也很常见,但是对于redis这种工作进程为单线程模式的工具来说,一台主机只运行一个实例就有些浪费,且出现单点故障时影响范围很大。同时,redis管理大内存时不如管理相对较小的内存高效,据第三方测试,redis单进程内存分配达到20G后性能急剧下降,因此普遍使用的方式为单进程分配8G内存,单主机开启多个redis实例.
原理
Redis官方集群方案 Redis Cluster(服务端sharding)Redis cluster是一种在服务端sharding(分片)的技术,在redis3.0版本开始正式提供。Redis cluster的服务端sharding引入了slot(槽)的概念,一共分为16384(2^14)个slot,集群中的每个node节点负责分摊这些slot,每个进入redis的键值对,根据key进行hash运算,除以16384取模,匹配相应的slot,再分配进相应的node中的实例中。在redis cluster方案中,数据储存的粒度由原来的instance再次精细为slot。Redis cluster提供一种叫做cluster bus(集群总线)的功能特性,采用特殊的二进制协议,通信及响应速度极快。它提供节点故障检测、故障转移、新节点识别等节点管理功能,该功能的进程间通信端口号为服务端口号值+10000,例如redis对外提供服务的端口号为6555,则cluster bus的端口号则为16555。值得注意的是:redis cluster是官方在3.0以后的版本才正式推出的。
Redis集群部署
Redis集群中有多台Redis服务器不可避免会有服务器挂掉。Redis集群服务器之间通过互相的ping-pong判断是否节点可以连接上。如果有一半以上的节点去ping一个节点的时候没有回应,集群就认为这个节点宕机了。
上面就是我们常说的为了容错而生的redis集群投票机制。
因为集群投票机制redis要求至少3主3从共6个节点才能组成redis集群,每个主节点至少有一个从节点,测试环境可一台物理上启动6个redis节点,但生产环境至少要准备3台物理机。
