当前位置: 首页 > news >正文

Nginx缓存之代理缓存配置

        Nginx 的缓存功能是集成在代理模块中的,当启用缓存功能时,Nginx 将请求返回的响应数据持久化在服务器磁盘中,响应数据缓存的相关元数据、有效期及缓存内容等信息将被存储在定义的共享内存中。当收到客户端请求时,Nginx 会在共享内存中搜索缓存信息,并把查询到的缓存数据从磁盘中快速交换到操作系统的页面缓存(Page Cache)中,整个过程的速度非常快。
        Nginx 缓存会缓存加载进程(Cache Loader Process)和库存管理(Cade Manger Process)进行管理。缓存加载进程只在 Nginx 启动时执行一次,将上一次 Nginx 运行时缓存有关数据的元数据加载到共享内存区域,加载结束后它将自动退出。
        为了避免缓存因加载缓存降低 Nginx 的性能,缓存加载进程会采用周期性迭代式加载缓存数据,且迭代加载的时间间隔、每次最大消耗时间和每次迭代加载的数量可以由配置指令 proxy_cache_path 的指令值参数设置。缓存管理进程则周期性的检查缓存的状态,负责清除在一段时间内未被访问的缓存文件,并对超出缓存存储最大值的缓存对象进行删除,缓存管理进程的删除操作也是周期性迭代执行的,并由配置指令 proxy_cache_path 的指令值参数设置。

1.缓存处理流程及状态

        当客户端发起请求到 Nginx 缓存服务器时,Nginx 会先检查本地是否已经有该请求的内容缓存,有的话会直接返回数据,缓存请求状态会被标记为 HIT,否则该缓存请求状态就会被标记为 MISS。
        如果指令 proxy_cache_lock 未被启用,则会直接向源服务器发起访问请求,如果被启用,则会先确认当前请求是不是第一个发起的请求,若不是,则等待;若是,则向源服务器发起访问请求。服务器响应数据返回后会先被存储在本地缓存,然后再返回给客户端。缓存处理流程如下图所示。

        Nginx 在处理缓存过程中,客户端请求的缓存请求状态会被记录在变量 $upstream_cache_status 中,缓存请求状态如下表所示:

缓存请求状态状态说明
MISS缓存未命中,从源服务器获取响应数据
HIТ缓存命中,从本地缓存获取数据
BYPASSproxy_cache_bypass 生效,直接从源服务器获取响应数据
REVALIDATED启用 proxy_cache_revalidate 指令后,缓存将被源服务器服务端验证为有效状态,从本地缓存获取数据
EXPIRED缓存过期,从源服务器获取响应数据
UPDATING正在更新缓存,当前返回为旧缓存内容,在配置指令 proxy_cache_use_stale updating 时会存在该状态
STALE源服务器无法正常返回更新的内容,当前返回为旧缓存内容,在配置指令 proxy_cache_use_stale error timeout 时会存在该状态
SCARCE缓存节点被查询次数未达到配置指令 proxy_cache_min_uses 设定的值时,对此请求无法启用缓存机制,将从源服务器获取响应数据

2.缓存配置指令 

        Nginx 缓存配置指令如下表所示:

指令名称指令值格式默认值指令说明
proxy_storeon、off 或 stringoff设置是否将被代理服务器的响应数据在本地按照请求的 URL 建立目录结构镜像。当指令值为 on 时,存储路径的设置为 root 或 alias,响应数据先存储到临时文件后再复制或重命名保存
proxy_store_accessusers:permissions...user:rw设置创建本地镜像存储路径的文件夹权限
proxy_cachezone 或 offoff设置一个用以做缓存管理的共享内存区域
proxy_cache_pathpath 参数--设置缓存文件存储路径及参数。缓存数据以 URL 的 MD5 值命名存储在缓存目录中
proxy_cache_keystring$scheme
$proxy_host
$request_uri
设置缓存的关键字
proxy_cache_lockon 或 offoff是否启用缓存锁指令。当启用缓存锁机制时,每次只允许个向被代理服务器转发的请求,按照 proxy_cache_key 指令设置的标识增添新的缓存数据,其他相同的请求则将等待缓存中出现响应数据或该缓存锁被释放,其等待时间由 proxy_cache_lock_timeout 指令设置
proxy_cache_lock_agetime5s缓存锁有效时间。当启用缓存锁机制时,如果一个请求在该指令的时间内没有完成响应数据缓存的添加,缓存锁将会被释放,获取缓存锁的请求将被转发给被代理服务器由代理服务器负责生成缓存
proxy_cache_lock_timeouttime5s缓存锁等待超时时间。当启用缓存锁机制时,等待超过该时间的请求将直接从被代理服务器中读取响应,该请求响应不会被添加到缓存中
proxy_cache_max_range_offsetnumber--用以设置范围请求(byte-range)请求时的最大偏移量。超出该偏移量的请求将直接从被代理服务器中读取响应数据
proxy_cache_methodsGET 或 HEAD 或 POST...GET HEAD指定可被缓存的请求方法
proxy_cache_convert_headon 或 offon开启或禁用将请求方法 HEAD 转换为 GET,如果该功能被禁用,配置指令 proxy_cache_key 的指令值应该添加变量 $request_method
proxy_cache_min_usesnumberstring1响应数据超过设置请求次数后将被缓存
proxy_no_cachestring...--设置不生成缓存数据的条件,指定字符串的值不为空或不等于 0,则不将当前请求返回的响应数据进行缓存
proxy_cache_bypassstring...--设置不使用缓存数据的条件,指令值中至少有一个值不为空或不等于 0 时,当前请求不使用缓存中的响应数据,直接访问源应用服务器。它可以与 proxy_no_cache 指令一起使用
proxy_cache_revalidateon 或 offoff启用该指令后,如果缓存过期,则通过在 HTTP 头中添加字段属性 If-Modified-Since 和 If-None-Match 的方式发送给源服务器,从而进行缓存的服务端校验
proxy_cache_use_staleerror、timeout、
invalid_header、
updating、http_500、
http_503、http_403、
http_404、http_429、
off...
off当出现指定的条件时,使用已经过期的缓存响应数据
proxy_cache_background_updateon 或 offoff允许使用过期的响应数据时,设置是否启用后台子请求更新过期缓存,同时向客户端返回过期的缓存响应数据
proxy_cache_valid[code...] time--根据响应码设置缓存时间
proxy_cache_purgestring...--定义清除缓存请求条件,若指定的字符串不为空或 0,则将 proxy_cache_key 设置的标识的缓存进行清除。清除成功则返回状态码 204,仅商业版有效

关于上表有以下几点需要说明。

  • 该模块指令列表中指令的指令域范围都是 http、server、location;
  • proxy_cache_path 指令只能编写在 http 指令域中;
  • proxy_cache 与 proxy_store 指令不能在同一指令域中同时使用;
  • proxy_cache_path 指令值参数如下表所示。
参数名参数格式默认值参数说明
levelslevels--设置缓存目录的层级及命名方式
use_temp_pathon 或 offon参数值为 on,则使用 proxy_temp_path 设置作为临时文件目录。参数值为 off 时,则使用缓存目录做临时文件目录
keys_zonename:size--设置存储 cache_key 的共享内存 zone 及大小,1MB 可以存储 8000 个 key
inactivetime10 分钟设置时间内未被访问的缓存将被删除
max_sizesize--缓存数据的最大值,超出这个最大值时,缓存管理进程将执行迭代更新,即删除最近最少使用的缓存
manager_filesnumber100缓存管理进程执行一次迭代更新时,删除文件的最大数
manager_sleeptime50ms缓存管理进程每次更新缓存的迭代间隔时间
manager_thresholdtime200ms缓存管理进程执行一次迭代更新时,最大执行的时间,单位为 ms
loader_thresholdtime200ms缓存加载进程每次迭代加载时,加载数据的最大执行时间
loader_filesnumber100缓存加载进程每次迭代加载时,加载缓存目录中缓存数据的最大文件数
loader_sleeptime50ms缓存加载进程每次迭代的间隔时间
purgeron 或 offoff是否启用缓存清除功能。仅商业版有效
purger_filesnumber10每次迭代清除时,清除缓存目录中缓存数据的最大文件数。仅商业版有效
purger_sleeptime50ms连续两次迭代清除间的最少间隔时间。仅商业版有效
purger_thresholdtime50ms每次迭代清除时,最大执行的时间。仅商业版有效

3.HTTP 范围请求

        范围请求允许服务器只发送请求的一部分响应数据给客户端,通常对大文件传输时,用以实现断点续传、多线程下载等功能。若服务端响应信息头中包含字段 Accept-Ranges:bytes,则表示服务端支持范围请求,且节点范围的单位为字节(bytes)。
        在 Nginx 缓存默认配置下,Nginx 处理完一个大文件的初始请求后,后续的用户请求必须等待整个文件下载结束并存入缓存后才可以继续被处理,整个过程非常耗时。为解决这个问题,Nginx 提供了 ngx_http_slice_module 模块,用以缓存范围请求的支持。该模块将文件分成更小的切片(slices),客户端每个范围请求覆盖特定的切片,如果该范围没有缓存,则从源服务器请求后存入缓存,否则就从缓存中返回数据。
        http_slice 模块配置指令如下表所示:

名称切片指令
指令slice
作用域http、server、location
默认值0
指令说明设定范围请求切片的大小。默认为不启用该功能

         配置样例如下:

location / {slice             1m;                               # 切片大小为1MBproxy_cache       cache;                            # 缓存共享内存名称为cacheproxy_cache_key   $uri$is_args$args$slice_range;    # 设置缓存keyproxy_set_header  Range $slice_range;               # 添加头字段Range的字段值为# $slice_rangeproxy_cache_valid 200 206 1h;                       # 响应状态码为200及206的内容缓存有效期为1hproxy_pass        http://localhost:8000;
}

 

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • next是什么???
  • 【Docker实战】jenkins卡在编译Dockerfile的问题
  • Android OTA 升级基础知识详解+源码分析
  • 闲鱼商品详情API:深入解析与应用指南
  • 在 KubeSphere 上快速安装和使用 KDP 云原生数据平台
  • 架构设计 - Nginx Proxy Cache 缓存配置
  • 胡说八道(24.6.17)——STM32以及通信杂谈
  • vue修改node_modules打补丁步骤和注意事项_node_modules 打补丁
  • 数据库系统概述选择简答概念复习
  • 如何实现ElementUI动态表头?
  • TikTok账号养号的流程分享
  • windows修改hosts文件、windows刷新dns缓存
  • 【硬件开发】振铃
  • PHP框架详解:Symfony框架讲解
  • [C#]使用深度学习算法opencvsharp部署RecRecNet广角图像畸变矫正校正摄像广角镜头畸变图像
  • Consul Config 使用Git做版本控制的实现
  • CSS中外联样式表代表的含义
  • Docker 笔记(1):介绍、镜像、容器及其基本操作
  • express + mock 让前后台并行开发
  • extjs4学习之配置
  • HTML-表单
  • HTTP那些事
  • JavaSE小实践1:Java爬取斗图网站的所有表情包
  • JS函数式编程 数组部分风格 ES6版
  • rabbitmq延迟消息示例
  • React中的“虫洞”——Context
  • SpiderData 2019年2月23日 DApp数据排行榜
  • 从@property说起(二)当我们写下@property (nonatomic, weak) id obj时,我们究竟写了什么...
  • 理清楚Vue的结构
  • 排序算法学习笔记
  • 判断客户端类型,Android,iOS,PC
  • 嵌入式文件系统
  • 深入浏览器事件循环的本质
  • 思维导图—你不知道的JavaScript中卷
  • 通过npm或yarn自动生成vue组件
  • Java数据解析之JSON
  • kubernetes资源对象--ingress
  • LIGO、Virgo第三轮探测告捷,同时探测到一对黑洞合并产生的引力波事件 ...
  • 关于Android全面屏虚拟导航栏的适配总结
  • 京东物流联手山西图灵打造智能供应链,让阅读更有趣 ...
  • #1015 : KMP算法
  • #Java第九次作业--输入输出流和文件操作
  • #基础#使用Jupyter进行Notebook的转换 .ipynb文件导出为.md文件
  • $分析了六十多年间100万字的政府工作报告,我看到了这样的变迁
  • (2021|NIPS,扩散,无条件分数估计,条件分数估计)无分类器引导扩散
  • (3) cmake编译多个cpp文件
  • (4)(4.6) Triducer
  • (Java岗)秋招打卡!一本学历拿下美团、阿里、快手、米哈游offer
  • (Java企业 / 公司项目)点赞业务系统设计-批量查询点赞状态(二)
  • (LLM) 很笨
  • (zhuan) 一些RL的文献(及笔记)
  • (附源码)springboot优课在线教学系统 毕业设计 081251
  • (规划)24届春招和25届暑假实习路线准备规划
  • (回溯) LeetCode 78. 子集
  • (三) prometheus + grafana + alertmanager 配置Redis监控