当前位置: 首页 > news >正文

商品中心关于缓存热key的解决方案

缓存热key一旦被击穿,流量势必会打到数据库,如果数据库崩了,游戏直接结束。

从两点来讨论:如何监控、如何解决。

如何监控

  1. 通过业务评估:比如营销活动推出的商品或者热卖的商品。
  2. 基于LRU的命令,redis-cli --hotkeys,通过任务调度定时去获取?
  3. 基于redis客户端、或者代理层、或者redis监控策略,利用大数据领域的流式计算技术(如Storm、Spark Streaming、Flink)进行实时数据访问次数的统计,一旦发现热点数据,即可进行处理。

分析

为什么不直接访问数据库获取数据?
因为数据库主要是为了增量数据持久化,资源宝贵;库的并发连接数也有瓶颈;不好抗啊。

为什么要使用缓存?
缓存可以抗住海量并发;内存操作,速度快;

怎么保证缓存性能?
缓存预热;

缓存中间抗不住怎么办?
采用多级缓存,先访问本地缓存,再访问Redis缓存,减轻压力;增加Redis节点;

本地缓存需要注意些什么?
缓存核心(最)热点的数据;控制好缓存数据量级;堆内存啊,别OOM了;

缓存失效怎么办?
在访问数据库的时候加锁,控制流量,允许一个请求访问数据库,其他流量等待。

加什么锁?jvm锁还是分布式锁?
加本地锁就够了,数据库还没那么不堪一击,而且本地锁无网络开销、轻量快捷。

缓存哪些数据?
上面说了如何监控热点数据;关于动态的热点数据也需要实时监控?

还有什么兜底方案吗?
针对数据库流量进行限流,做最后的防护;

怎么做流量预估?
业务评估;全链路压测;

怎么保证可用性?
止血方案(开关、配置);监控;降级策略;扩容;

如何应对RPC线程池溢出造成的QPS瓶颈问题?
在客户端做一层缓存,同服务端缓存的逻辑一样。

如何解决

  1. 评估流量(redis和mysql是否能扛得住)
  2. 热key进行拆分,分散到不同的redis节点;增加redis节点
  3. 多级缓存,本地缓存 -》 redis缓存
  4. 如下策略:加锁+限流

伪代码

public class Main {private static final ReentrantLock lock = new ReentrantLock();private static final  AtomicInteger retryCount = new AtomicInteger(0);public String getCacheValue(String key) throws Exception {try{String result = cache.get(key);if (result == null) {boolean b = lock.tryLock(200, TimeUnit.MILLISECONDS);if (b || retryCount.get() > 10) {String limit = limit.get(key);if (!limit.equals("限流")) {result = db.get(key);}} else {Thread.sleep(200);retryCount.incrementAndGet();result = this.getCacheValue(key);}}}finally{lock.unlock();}return result;}
}

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • web、http协议、apache服务、nginx服务
  • 汇舟问卷:轻松入门国外问卷调查工作室
  • springboot驾校管理系统-计算机毕业设计源码55471
  • 【Dash】Dash 应用的布局 app.layout
  • 【OSCP系列】OSCP靶机-BTRsys-2.1(原创)
  • Python写UI自动化--playwright(点击操作)
  • Qt基础 | 主机信息查询 | QHostInfo的介绍和使用 | QNetworkInterface的介绍和使用
  • React Native在移动端落地实践
  • 《动手做科研 》| 03. 如何阅读人工智能研究论文
  • matlab 小数取余 rem 和 mod有 bug
  • 需求跟踪矩阵:项目管理的“指南针”
  • C++ STL accumulate 用法
  • 2024西安铁一中集训DAY26 ---- 模拟赛(最短路 + 实数域二分 + 线段树 + 并查集(平面图欧拉定理))
  • C端与B端 - 第一弹 - 理解和区分C端与B端软件开发
  • vardaccico前端私有库
  • 分享一款快速APP功能测试工具
  • CSS3 变换
  • Java的Interrupt与线程中断
  • Laravel Telescope:优雅的应用调试工具
  • overflow: hidden IE7无效
  • quasar-framework cnodejs社区
  • Synchronized 关键字使用、底层原理、JDK1.6 之后的底层优化以及 和ReenTrantLock 的对比...
  • Tornado学习笔记(1)
  • Travix是如何部署应用程序到Kubernetes上的
  • Vultr 教程目录
  • Webpack4 学习笔记 - 01:webpack的安装和简单配置
  • 分享自己折腾多时的一套 vue 组件 --we-vue
  • 关于Flux,Vuex,Redux的思考
  • 官方新出的 Kotlin 扩展库 KTX,到底帮你干了什么?
  • 如何用vue打造一个移动端音乐播放器
  • 双管齐下,VMware的容器新战略
  • 鱼骨图 - 如何绘制?
  • 通过调用文摘列表API获取文摘
  • ​渐进式Web应用PWA的未来
  • # 睡眠3秒_床上这样睡觉的人,睡眠质量多半不好
  • #我与Java虚拟机的故事#连载04:一本让自己没面子的书
  • (06)金属布线——为半导体注入生命的连接
  • (4)STL算法之比较
  • (八十八)VFL语言初步 - 实现布局
  • (多级缓存)缓存同步
  • (过滤器)Filter和(监听器)listener
  • (一)基于IDEA的JAVA基础1
  • *算法训练(leetcode)第三十九天 | 115. 不同的子序列、583. 两个字符串的删除操作、72. 编辑距离
  • .bat批处理(八):各种形式的变量%0、%i、%%i、var、%var%、!var!的含义和区别
  • .NET 4 并行(多核)“.NET研究”编程系列之二 从Task开始
  • .net 获取某一天 在当月是 第几周 函数
  • .NET/C# 使用 SpanT 为字符串处理提升性能
  • .net安装_还在用第三方安装.NET?Win10自带.NET3.5安装
  • .Net开发笔记(二十)创建一个需要授权的第三方组件
  • .ui文件相关
  • @在php中起什么作用?
  • [ 云计算 | AWS 实践 ] 基于 Amazon S3 协议搭建个人云存储服务
  • [\u4e00-\u9fa5] //匹配中文字符
  • [012-1].第12节:Mysql的配置文件的使用
  • [BJDCTF 2020]easy_md5