HTTP 发展的前世今生

作者: godliness | 来源:发表于2019-12-24 20:30 被阅读0次

    网络优化系列专题,聊一聊面对复杂多变的移动网络,我们需要掌握哪些网络基础知识,以及该如何做好网络优化这项工作。


    网络优化系列专题
    • 网络优化背景知识(待完善)

    关于 5G,你应该知道的发展史
    HTTP 发展的前世今生
    网络安全 — HTTPS
    关于网络优化,你需要了解什么?
    HTTP 的第一次变革 — HTTP/2
    《展望更好 — HTTP/3》

    • 如何优化网络性能(待更)

      ...


    如今,打开手机或电脑,只要你上网,不论是选择哪个操作系统,不论是用浏览器还是 App,不论是看新闻、短视频还是听音乐...,总会有 HTTP 在后台默默为你服务。

    在享受如此便捷舒适的网络生活时,你是否有想过,HTTP 协议是怎么来的?它最开始是什么样子的?又是如何发展到今天,几乎“统治”整个互联网世界的呢?

    今天我们就来聊一聊 HTTP 的发展历程,了解下它的成长轨迹。


    诞生

    1989 年 3 月 12 日,任职于 CERN(欧洲核子研究中心)的 Tim Berners-Lee(蒂姆.伯纳斯 - 李)提交了一篇名为《Information Management : a proposal》(关于信息化管理的建议)文章,提出了在互联网上构建超链接文档系统的构想,初步阐述了后来被称为 World Wide Web(万维网) 的信息管理概念,该篇文章中他确立了三项关键技术:

    1. URI(Uniform Resource Identifier):即统一资源标识符,作为互联网上资源的唯一身份;

    2. HTML(Hypertext Markup Language):超文本标记语言,描述超文本文档;

    3. HTTP(Hypertext Transfer Protocol):即超文本传输协议,用来传输超文本。

    基于它们,就可以把超文本系统完美地运行在互联网上,让各地的人们能够自由地共享信息,这也是我们现在所熟知的 Web。

    所以在这一年,HTTP 诞生了,从此开始了它的光辉之路。由于该篇文章,1989 年也被认为是蒂姆.博纳斯 - 李发明 World Wide Web 的年份。


    HTTP/0.9

    20 世纪 90 年代初期的互联网世界非常简陋,计算机处理能力弱,存储容量小,网速很慢,还是一片“信息荒漠”。网络上绝大多数的资源都是纯文本,很多通信协议也都使用纯文本,所以 HTTP 的设计也不可避免地受到了时代的限制。

    这一时期的 HTTP 被定为 0.9 版本,结构比较简单,为了便于服务器和客户端处理,它也采用纯文本格式。蒂姆.博纳斯 - 李最初设想系统里的文档都是只读的,所以只允许用 “GET” 操作从服务器上获取 HTML 文档,并且在响应请求之后立即关闭连接,功能非常有限。

    HTTP/0.9 虽然很简单,但它作为一个“原型”,充分验证了 Web 服务的可行性,而“简单”也正式它的优点,因为这蕴含了后来进化和扩展的可能性:把简单的系统变复杂,要比把复杂的系统变简单容易得多

    第一个网站

    1990 年 12 月 20 日,蒂姆.博纳斯 - 李架设了人类历史上第一个网站,域名为 Info.cern.ch,它被用于 CERN 内部;所使用的服务器则是他的个人 NeXT 电脑,直到今天,这台 NeXT 电脑依然被作为人类首个网站的服务器,当然这个网站也被 CERN 保留了下来。

    1991 年 8 月 6 日,蒂姆.博纳斯 - 李又将与 World Wide Web 项目相关的总结文档上传至互联网,这是第一个出现在互联网上的 Web 网站,距离现在已经整整 28 周年了。


    HTTP / 1.0

    但是在当时,World Wide Web 并没有迅速获得世人的认可。尽管博纳斯·李坚信自己的发明将会“统治世界”,但是到了 1992 年,他的论文还是被“超文本会议”拒绝了。

    而这时,正在美国伊利诺大学 NCSA(美国国家超级计算应用中心) 学习(兼职)的马克.安德森出现了,年仅 22 岁的他已经对互联网颇为熟悉了;他觉得在 World Wide Web 加上图形更有意思,就与人合作开发出第一个可以图文混排的浏览器 Mosaic。该浏览器一经发布就受到了热烈欢迎。但由于 Mosaic 是由大学的资金和设备开发的,所以它的所有权归 NCSA 所有。

    注意,Mosaic 并不是第一个图形接口浏览器,比它更早的例如由蒂姆.博纳斯 - 李本人开发的 WorldWideWeb(世界上第一个网页浏览器,后更名为 Nexus)、鲜为人知的 Erwise 和 ViolaWWW。但是 Mosaic 却是第一个可以在文字中嵌入图片,而不是在单独窗口中显示图片的浏览器

    同一时期,计算机多媒体技术也有了新的发展,1992 年 JPEG(联合图像专家小组) 图像格式诞生,1995 年发明了 MP3(动态影像专家压缩标准音频层面3)音乐格式。

    这些新软件,新技术一经推出立刻就吸引了广大网民的热情,更多的人开始认识互联网,开始使用互联网,研究 HTTP 并提出改进意见,甚至实验性地往协议里添加各种新特性,从用户需求的角度促进了 HTTP 的发展。

    于是在这些已有实践的基础上,经过一系列的草案,HTTP/1.0 版本在 1996 年正式发布,它在多方面增强了 0.9 版本,形式上已经和我们现在的 HTTP 差别不大了,例如:

    1. 增加了 HEAD、POST 等新方法;
    2. 增加了响应状态码,标记可能的错误原因;
    3. 引入协议版本号概念;
    4. 引入了 HTTP Header 的概念,让 HTTP 处理请求和响应更加灵活;
    5. 传输数据不在仅限于文本。

    但是 HTTP/1.0 并不是一个标准,只是记录已有实践和模式的一份参考文档,不具有实际的约束力,就有点类似于备忘录。

    所以 HTTP 1.0 的发布,对于当时正在蓬勃发展的互联网来说,并没有太多的实际意义,各方“势力”仍然按照自己的意图继续在市场上奋力“拼杀”。


    HTTP / 1.1

    前面我们有提到,第一个图文混排的浏览器 Mosaic 由马克.安德森与他人合作开发,但是它的所有权归 NCSA 所有,而 NCSA 最后决定将 Mosaic 交给了 Spyglass (实际是 NCSA 的一个分支,旨在将 NCSA 技术商业化)用于商业用途和运营。

    于是,1994 年马克.安德森离开 NCSA,与人合作创办了 Netscape,也就是网景公司(最初叫做 Mosaic 公司,为了规避与 NCSA 的法律纠葛,同年 11 月公司最终变更为 Netscape),专门用来开发用于商业运作的图形浏览器,公司的产品也更名为网景浏览器。同年 12 月 15 日网景浏览器 1.0 正式发布,软件改名为 NetScape Navigator(网景导航者)。

    网景浏览器是第一个大获成功的商业浏览器,它将蒂姆.博纳斯 - 李发明的 World Wide Web 从实验室带到了公众视野;正如博纳斯 - 李预言的那样,World Wide Web 开始了“统治世界”的进程。

    随着网景公司的日益强大,公司开始尝试创做一种能够让用户通过浏览器操作的网络应用系统。这让微软感受到了威胁,担心网景可能威胁到微软的操作系统和应用程序市场。于是微软于 1995 年研发了自己的 Internet Explorer,这一年开始了著名的浏览器大战,网景的 NetScape Navigator 和微软的 Internet Explorer 都希望在互联网上占据主导地位。

    虽然这场“战争”的结果你一定早就知道了,最终微软的 IE 取得了决定性的胜利,而网景则“败走麦城”(最后凭借 Mozilla Firefox 又扳回一局)。

    具有讽刺意味的是,Internet Explorer 正是在马克.安德森开发的 Mosaic 的基础上发展而来的。当然,微软获得了伊利诺大学的许可。

    不可否认,“浏览器大战”再一次极大地推动了 Web 的发展,HTTP/1.0 也在这个过程中经受了实践的检验。于是在 “大战” 结束之后的 1999 年,HTTP/1.1 发布了 RFC(Request for Comments)文档,编号为 2616,正式确立了延续十余年的传奇。

    从版本号我们就可以看出,HTTP/1.1 是对 HTTP/1.0 的小幅度修正。但一个重要的区别是:它是一个正式的标准,而不是一份可有可无的参考文档。这意味着今后互联网上所有的浏览器、服务器、网关和代理等等,只要用到 HTTP 协议,就必须严格遵守这个标准,相当于是互联网世界的一个“立法”。

    不过,说 HTTP/1.1 是小幅度“修正”也不太确切,它还是有很多实质性进步的。毕竟经过了多年的实战检验,比起 0.9 和 1.0 更加接近用户, 同时表述也更加严谨。HTTP/1.1 主要的变更有以下:

    1. 增加了 PUT、DELETE 等新方法;
    2. 增加了缓存管理和控制;
    3. 明确了连接管理,允许持久连接;
    4. 允许响应数据分块(chunked),利于传输大文件;
    5. 强制要求 Host 头,让互联网主机通关成为可能。

    由此,互联网在它的“保驾护航”下迈开了新的步伐,开启了后续的 Web 1.0,Web 2.0 时代。现在许多知名企业都是在这个时间点左右创立的,例如 Google、新浪、搜狐、网易、腾讯等。

    • 不过由于 HTTP/1.1 太过庞大和复杂,所以在 2014 年又做了一次修订,原来一个大文档被拆分成了六份较小的文档,编号为 7230 ~ 7235,优化了一些细节,但此外没有任何实质性的改动。

    Google 开始领航

    HTTP/1.1 发布之后,整个互联网世界呈现出了爆发式的增长,度过了十多年的“快乐时光”,更涌现了 Facebook、Twitter、淘宝和京东等互联网新贵。

    然而,这期间也出现了一些对 HTTP 不满的意见,主要是连接慢,无法跟上迅猛发展的互联网,但 HTTP/1.1 标准一直“岿然不动”,无奈之下人们只好发明各式各样的“小花招”来缓解这些问题,比如以前常见的切图、JS 合并等网页优化手段。

    HTTP/2.0

    终于有一天,搜索巨头 Google 忍不住了,决定“揭竿起义”,那么它是怎么开始“造反”的呢?

    Google 首先开发了自己的 Chrome 浏览器,然后推出了新的 SPDY 协议,并在 Chrome 里应用于自家的服务器,如同十多年前的网景和微软一样,从实际的用户来“倒逼” HTTP 协议的变革,这也开启了第二次“浏览器大战”。

    历史再次重演,不过这次的胜利者是 Google,Chrome 目前在全球的占有率超过了 60%,“挟用户以号令天下”,Google 借此顺势把 SPDY 推上了标准的宝座,互联网标准化组织以 SPDY 为基础开始制定新版本的 HTTP 协议,最终在 2015 年发布了 HTTP/2.0 RFC 编号 7540。

    • SPDY 并不是首字母缩略字,仅仅是 speedy 的缩写。Google 最早是在 Chromium 中提出 SPDY 协议,HTTP/2 的关键功能主要来自 SPDY 技术,换言之,SPDY 的成果被采纳而最终演变为 HTTP/2。SPDY 协议通过压缩、多路复用和优先级来缩短加载时间。

    HTTP/2 的制定充分考虑了互联网的现状:带宽、移动和不安全,在高度兼容 HTTP/1.1 的同时更注重性能方面的改进,主要的特点有:

    1. 二进制协议,不再是纯文本;
    2. 可发起多个请求(多路复用),废弃了 1.1 里的通道;
    3. 使用专用算法压缩头部,减少数据传输量;
    4. 允许服务器主动向客户端推送数据;
    5. 增强了安全性,要求加密通信。

    连接复用

    网络连接这个环节需要经过 TCP 三次握手、TLS 秘钥协商,连接建立的代价是非常大的,这里优化思路是复用连接,这样不用每次请求都重新建立连接。这里我们利用的是 HTTP 协议里的 keep-alive。而 HTTP/2.0 的多路复用则可以进一步的提升连接复用率。它复用的这条连接支持同时处理多条请求,所有请求都可以并发在这条连接上进行。


    HTTP/3

    HTTP/2 这么好,是不是已经完美了呢?答案是否定的,H2 的多路复用在本质上依然是同一条 TCP 连接,如果所有域名的请求都集中在某一条连接上,在网络拥塞的时候容易出现 TCP 队首阻塞的问题。

    这一次还是 Google,而且它要“革自己的命”。在 HTTP/2 还处于草案之时,Google 又发明了一个新的协议 — QUIC(Quick UDP Internet Connection),而且还是相同的“套路”,继续在 Chrome 和自家服务器里“试验着玩”,依托它的庞大用户量和数据量,持续地推动 QUIC 协议成为互联网上的“既成事实”。

    在连接复用中我们说过 HTTP/2 + TCP 会存在队首阻塞的问题,基于 UDP 的 QUIC 才是终极解决方案。 QUIC 也确实因为自身素质过硬,在 2018 年,互联网标准化组织 IETF 提议将 “HTTP over QUIC” 更名为 HTTP/3 并获得成功,HTTP/3 正式进入了标准化制定阶段,也许几年以后就会正式发布,到时候我们说不定可以直接跳过 HTTP/2 直接进入 HTTP/3。

    如下图所示,可以把 QUIC 简单理解为 HTTP/2.0 + TLS 1.3 + UDP。

    目前 QUIC 还有很多坑还没有踩完,发现的主要问题例如有创建连接成功率和运营商劫持等。


    小结

    2019 年 3 月 12 日,是 World Wide Web 诞生 30 周年的纪念日,当然也是 HTTP 协议的整个发展过程,这里再简单总结下:

    1. HTTP 协议始于三十年前蒂姆.博纳斯 - 李的一篇论文
    2. HTTP/0.9 是个简单的文本协议,只能获取文本资源
    3. HTTP/1.0 确立了大部分现在使用的技术,但它不是正式标准
    4. HTTP/1.1 是目前互联网上使用最广泛的协议,功能也非常完善
    5. HTTP/2.0 基于 Google 的 SPDY 协议,注重性能改善,改善的目标是低延迟,但其普及率并不高
    6. HTTP/3 基于 Google 的 QUIC 协议,目前正在制定中,将是未来发展的方向

    最后

    通过今天的介绍,相信你对 HTTP 有了一个初步但清晰的认识。另外大家对 HTTP 的发展还有哪些理解和认识?欢迎大家留言分享或指正。

    文章如果对你有帮助,请留个赞吧。


    彩蛋

    1. 早期的 HTTP/0.9 是没有版本号的,0.9 这个版本号是后来才加上去的,用于区别之后的 1.0/1.1;

    2. HTTP/1.0 的 RFC 编号是 1945,而 HTTP/0.9 则没有 RFC;

    3. 一个有趣的事实:“World Wide Web” 是英语中极少数缩写(WWW)比原文发音更长的词。


    扩展阅读

    UI 优化系列

    存储优化系列

    相关文章

      网友评论

        本文标题:HTTP 发展的前世今生

        本文链接:https://www.haomeiwen.com/subject/tmevnctx.html