CDN之浏览器 HTTP 协议缓存机制详解
haoteby 2024-11-15 19:29 6 浏览
前言
最近在准备优化日志请求时遇到了一些令人疑惑的问题，比如为什么响应头里出现了两个 cache-control、为什么明明设置了 no-cache 却还是发请求，为什么多次访问时有时请求里带了 etag，有时又没有带？等等。。。后来查了一些资料以及同事亲自验证，总算对这些问题有了个清晰的理解，现在整理出来以备忘。
大纲：
1、缓存的分类
2、浏览器缓存机制详解
2.1 HTML Meta标签控制缓存
2.2 HTTP头信息控制缓存
2.2.1 浏览器请求流程
2.2.2 几个重要概念解释
3、用户行为与缓存
4、Refer
缓存的分类
缓存分为服务端侧（server side，比如 Nginx、Apache）和客户端侧（client side，比如 web browser）。
服务端缓存又分为 代理服务器缓存 和 反向代理服务器缓存（也叫网关缓存，比如 Nginx反向代理、Squid等），其实广泛使用的 CDN 也是一种服务端缓存，目的都是让用户的请求走”捷径“，并且都是缓存图片、文件等静态资源。
客户端侧缓存一般指的是浏览器缓存，目的就是加速各种静态资源的访问，想想现在的大型网站，随便一个页面都是一两百个请求，每天 pv 都是亿级别，如果没有缓存，用户体验会急剧下降、同时服务器压力和网络带宽都面临严重的考验。
浏览器缓存机制详解
浏览器缓存控制机制有两种：HTML Meta标签 vs. HTTP头信息。
2.1 HTML Meta标签控制缓存
浏览器缓存机制，其实主要就是HTTP协议定义的缓存机制（如：Expires；Cache-control等）。但是也有非HTTP协议定义的缓存机制，如使用HTML Meta 标签，Web开发者可以在HTML页面的<head>节点中加入<meta>标签，代码如下：
<META HTTP-EQUIV="Pragma" CONTENT="no-cache">上述代码的作用是告诉浏览器当前页面不被缓存，每次访问都需要去服务器拉取。使用上很简单，但只有部分浏览器可以支持，而且所有缓存代理服务器都不支持，因为代理不解析HTML内容本身。而广泛应用的还是 HTTP头信息 来控制缓存，下面我主要介绍HTTP协议定义的缓存机制。
2.2 HTTP头信息控制缓存
2.2.1 浏览器请求流程
浏览器第一次请求流程图：
浏览器再次请求时：
2.2.2几个重要概念解释
Expires策略：Expires是Web服务器响应消息头字段，在响应http请求时告诉浏览器在过期时间前浏览器可以直接从浏览器缓存取数据，而无需再次请求。不过Expires 是HTTP 1.0的东西，现在默认浏览器均默认使用HTTP 1.1，所以它的作用基本忽略。Expires 的一个缺点就是，返回的到期时间是服务器端的时间，这样存在一个问题，如果客户端的时间与服务器的时间相差很大（比如时钟不同步，或者跨时区），那么误差就很大，所以在HTTP 1.1版开始，使用Cache-Control: max-age=秒替代。
Cache-control策略（重点关注）：Cache-Control与Expires的作用一致，都是指明当前资源的有效期，控制浏览器是否直接从浏览器缓存取数据还是重新发请求到服务器取数据。只不过Cache-Control的选择更多，设置更细致，如果同时设置的话，其优先级高于Expires。
（1）值可以是public、private、no-cache、no- store、no-transform、must-revalidate、proxy-revalidate、max-age
（2）各个消息中的指令含义如下：
（3）Public指示响应可被任何缓存区缓存。
（4）Private指示对于单个用户的整个或部分响应消息，不能被共享缓存处理。这允许服务器仅仅描述当用户的部分响应消息，此响应消息对于其他用户的请求无效。
（5）no-cache指示请求或响应消息不能缓存，该选项并不是说可以设置”不缓存“，容易望文生义~
（6）no-store用于防止重要的信息被无意的发布。在请求消息中发送将使得请求和响应消息都不使用缓存，完全不存下來。
（7）max-age指示客户机可以接收生存期不大于指定时间（以秒为单位）的响应。
（8）min-fresh指示客户机可以接收响应时间小于当前时间加上指定时间的响应。
（9）max-stale指示客户机可以接收超出超时期间的响应消息。如果指定max-stale消息的值，那么客户机可以接收超出超时期指定值之内的响应消息。
用户行为与缓存
浏览器缓存行为还有用户的行为有关，如果大家对强制刷新（Ctrl + F5） 还有印象的话应该能明白我的意思。
Refer
[1] 浏览器缓存机制
http://www.cnblogs.com/skynet/archive/2012/11/28/2792503.html
[2] Web开发人员需知的 Web 缓存知识
http://www.oschina.net/news/41397/web-cache-knowledge
[3] 浏览器缓存详解:expires,cache-control,last-modified,etag详细说明
http://blog.csdn.net/eroswang/article/details/8302191
[4] 在浏览器地址栏按回车、F5、Ctrl+F5刷新网页的区别
http://cloudbbs.org/forum.php?mod=viewthread&tid=15790
http://blog.csdn.net/yui/article/details/6584401
[5] Cache Control與 ETag
https://blog.othree.net/log/2012/12/22/cache-control-and-etag/
[6] 缓存的故事
http://segmentfault.com/blog/animabear/1190000000375344
[7] Google的PageSpeed网站优化理论中提到使用Etag可以减少服务器负担
https://developers.google.com/speed/docs/pss/AddEtags
[8] yahoo的Yslow法则中则提示谨慎设置Etag
http://developer.yahoo.com/performance/rules.html#etags
作者：京东科技 邢博文
相关推荐
- Python爬虫进阶教程(二):线程、协程
-
简介线程线程也叫轻量级进程，它是一个基本的CPU执行单元，也是程序执行过程中的最小单元，由线程ID、程序计数器、寄存器集合和堆栈共同组成。线程的引入减小了程序并发执行时的开销，提高了操作系统的并发性能...
- A320-V2500发动机系统FADEC介绍(2)
-
目的全权数字发动机控制（FADEC）系统在所有飞行和运行阶段提供全范围发动机控制。...
- 三国志战棋版:玩家“二叔”用这套群DOT在比武中拿下31胜5负
-
声明：本文首发于今日头条，而后发布于“鼎叔闯三棋”的微信公众号、抖音、哔哩哔哩和小红书平台，如果在其他平台就是抄袭。...
- 真正的独一无二:Dot One 推出 DNA 定制系列 139英镑起
-
相信很多人在挑选衣物时有着这样的困扰，综合了性价比、面料等因素后好不容易找到了心仪的款式，还要担心是否会撞衫，不管是擦肩而过的陌生人还是身边的熟人，都令人尴尬。小部分人为此热衷于购买少量的古着或者限量...
- 崩铁:周年庆福利再升级，老角色加强时间确定，3.xdot体系反转
-
#埃安UT大一圈高级很多#...
- Dotgo推出RBMHub，扩大了CPaaS提供商的覆盖范围和功能
-
据telecompaper网7月15日报道，用于商业消息传递的RichCommunicationServices（RCS）解决方案的领先提供商Dotgo宣布推出RBMHub。RBMHub的推出扩大了C...
- 深度解析:快照取消Dot职业的将何去何从
-
写在前面曾几何时，术士的出现便被冠以dot大师的名头，从远古时期的献祭腐蚀虹吸不如暗牧一个痛，到TBC上满dot=荣誉击杀+1，到wlk接近全暴击的冰晶腐蚀，再到CTM就算了吧MOP的各种变态吸x放...
- 星穹铁道:抽卡芙卡之前，你必须了解什么是dot!
-
卡妈终于上线了，可还是有很多人不明白什么是dot伤害，抽了卡妈直接玩起了直伤流，把一个持续伤害的引爆器玩成了打手，卡妈打dot伤害是远高于直伤的，有了卡妈的玩家一直了解dot，不然这卡妈就真被玩成四不...
- 游戏界的闪耀星辰陨落:悼念知名游戏博主″dotα牛娃″
-
无尽哀思！在数字时代浪潮中，游戏不仅是消遣娱乐的代名词，更是连接心灵的桥梁，构筑了无数人的青春回忆。在这片浩瀚无垠的游戏宇宙中，有这样一位博主，他以独特的风采、深邃的洞察力和无尽的热情，成为了玩家心中...
- 直击2017新加坡同性恋聚会Pink Dot，自由爱!
-
今年的“粉红点”又来啦~这个支持LGBT群体（男女同志、双性恋、跨性别等）群体的活动，从2009年起，已经在新加坡举办8年了！”这个非营利的同性恋权益活动，主要是希望大家了解到，不管一个人的性倾向或...
- python-dotenv,一款超级实用处理环境变量python库
-
python-dotenv,一款超级实用处理环境变量python库python-dotenv概述：...
- 亚马逊语音助手毫无征兆发笑 诡异至极吓坏用户
-
来源:新华网美国电商亚马逊7日承诺，将更改名下“亚历克萨”语音系统设置，令它不会莫名发笑，免得吓坏用户。“亚历克萨”是亚马逊开发的语音助手软件，可服从用户语音指令完成对话、播放音乐等任务。依照原来设计...
- 2022最火英文网名男女生
-
精选好听英文昵称带翻译1．moveon（离开）2．Monster（怪物）3．Solo吉他手4．Finish.（散场）...
- 智能家具 RecycleDot 的出现给传统家具厂商带来新的挑战
-
从可穿戴手环、手表到智能衣服，智能硬件逐步渗透到每一个领域。最近有一对父子MikeSandru和JohnSandru在自家的车库中设计了一款智能家具RecycleDot，给日渐萧条的家具行...
- 欧洲通信卫星公司 OneWeb 敦促印度DoT尽早批准提供卫星宽带服务
-
据telecomtalk2月17日报道，欧洲通信卫星公司EutelsatOneWeb近日敦促印度电信部（DoT）尽快批准其在印度部署双地球站网关的计划，以便连接其近地轨道（LEO）全球卫星星座，并...