redis做负载均衡 redis 宕机了咋办,如何做到可用性和一致性的trad off?

本文目录一览：

• 1、redis中的bigkey该如何发现以及处理?
• 2、Redis分区指南:如何实现高可用与扩展性
• 3、利用nginx实现Redis的负载均衡,应该怎么配置?

redis中的bigkey该如何发现以及处理?

首先，可以采取“雨露均沾法”，通过将请求流量分散到多个服务器上，实现负载均衡。具体操作包括对大热Key进行后缀编号（如0-14），并针对编号进行随机访问，以此分散热点。此外，还可以采用“黄雀在后法”，即利用本地缓存来预处理大热Key，减少直接访问Redis Cluster的频率，进一步优化资源利用。

针对大key与热key的处理策略包括拆分、清理、监控与定期清理失效数据。大key可通过拆分、清理或监控内存使用率来解决。热key的处理则可利用Redis Cluster结构的复制功能或读写分离架构，但需考虑代码修改与架构复杂度的增加。通过合理处理大key与热key，可有效提升Redis服务性能与稳定性。

处理大key的常见方法有拆分、清理、监控内存、定期清理失效数据以及使用阿里云Tair服务。对于热key，策略包括在Redis集群中复制热key、采用读写分离架构或使用Tair的QueryCache特性。通过上述方法，我们可以有效识别并处理大key与热key，确保Redis服务稳定运行。

为了发现大key与热key，我们可以通过多种途径。Redis内置命令、开源工具、阿里云Redis控制台等手段都可帮助分析Key，而其中Redis的`MEMORY USAGE`命令和官方客户端的`bigkeys`、`hotkeys`参数提供了便利的分析方法。同时，业务层定位、使用`monitor`命令等手段也能有效找出热key。

如何发现 bigkey？使用 Redis 自带的 --bigkeys 参数来查找。使用命令 # redis-cli -p 6379 --bigkeys 来扫描整个 keyspace，查找最大的 key 及其占用的内存大小。此命令会影响 Redis 性能，需控制扫描频率，例如：redis-cli -p 6379 --bigkeys -i 3。

bigkey并非完全致命，如果它很少被访问，可能主要影响是内存空间的不均衡，但如果频繁访问，对系统性能影响显著。因此，监控和处理bigkey是维护系统性能和用户体验的关键。通过使用redis-cli --bigkeys命令，可以统计和查看bigkey的分布情况。

Redis分区指南:如何实现高可用与扩展性

最后，我们来看看官方推荐的RedisCluster。作为Redis官方推出的分布式解决方案，RedisCluster通过数据分片、复制和自动故障转移等功能，实现高可用性和可扩展性。其原理是将键空间划分为16384个Hash槽，并将每个槽映射到多个Redis节点，以实现数据的分片和复制。

水平扩容与性能优化是应对大数据集挑战的关键。通过分区或分片，将数据分散到不同节点，实现负载均衡。客户端根据数据路由和算法获取数据所在节点地址，高效访问数据。Redis Cluster通过集群支持数据分片，提供扩展性和高可用性。数据集被分成16384个slot，通过key计算slot位置，访问相应节点获取数据。

对于追求高性能、高可扩展性和强一致性的需求，Redis Cluster 将是最佳方案。Redis Cluster 通过将数据分散存储在多个节点上，实现负载均衡和故障转移，同时保证数据的一致性。此外，通过搭建 Redis 集群和使用 Redis Sentinel，可以进一步增强系统的高可用性。

redis高可用：如果你做主从架构部署，其实就是加上哨兵就可以了，就可以实现，任何一个实例宕机，自动会进行主备切换。redis高并发：主从架构，一主多从，一般来说，很多项目其实就足够了，单主用来写入数据，单机几万QPS，多从用来查询数据，多个从实例可以提供每秒10万的QPS。

Sentinel ： redis 自带的主从切换工具，我们通过 sentinel 实现集群高可用。客户端（ Smart Client ）：客户端通过约定查找 redis 实例在 ZooKeeper 中写入的地址。并且根据集群的 group 数，进行一致性哈希计算，确定 key 唯一落入的 group ，随后对这个 group 的主库进行操作。

利用nginx实现Redis的负载均衡,应该怎么配置?

使用Nginx实现负载均衡 负载均衡即是代理服务器将接收的请求均衡的分发到各服务器中。负载均衡的优势在访问量少或并发小的时候可能并不明显，且不说淘宝双1铁道部抢票这种级别的访问量、高并发，就是一般网站的抢购活动时，也会给服务器造成很大压力，可能会造成服务器崩溃。

安装并配置uwsgi以连接Nginx，接着修改Nginx配置文件，并重启服务。在lb01服务器上进一步配置Nginx，同时设置NFS服务器以共享session文件，确保所有web服务器挂载并进行测试。

老方式：通过jcoleman/tomcat-redis-session-manager实现。新方式：使用mrhop/tomcat-redis-session-manager-5来实现。值得注意的是，原作者已停止更新，因此我们通过重新编译新的包来解决问题，无需改动其他两个jar文件，确保了实现过程的简洁性和效率。

NGINX负载均衡可以用于很多服务负载均衡的实现，比如做Redis服务的负载均衡，配置upstream的IP列表再配置 proxy_pass 代理即可。

我们搭建一个基于SpringMVC ＋Spring + Mybaties框架的maven项目，搭建过程不加以赘述。功能很简单，就是能跳转到一个页面就行了，当然也可以使用别的框架。运行demo，我这tomcat端口是8080，在浏览器输入localhost：8080，出现我们的页面。