美文网首页
网络相关知识

网络相关知识

作者: 哲逗年 | 来源:发表于2018-04-10 17:04 被阅读0次

前言

主要是参考其他人写的文章,做一个手抄记录,加深印象,后面都会附上原文链接。

1、 DNS介绍篇(原文(https://mp.weixin.qq.com/s/DDk5YZv9Q7CaqdiKvQxZGQ))

DNS(Domain Name System):

将一个网站的域名转换成对应的IP

源起:

由于IP很难记忆,早期由计算机名字转到地址的过程,由每台计算机保存一个hosts文件,里面列出了所有计算机名字和对应的IP地址,然后定期从一个维护此文件的站点更新里面的记录。当我们访问某个计算机名字时,先在hosts文件找到对应的IP,然后就可以建立连接。

缺点:

随着网络规模的扩大,以下几点问题最为突出:

  • hosts文件变的非常大;
  • 主机名字会冲突;
  • 集中的维护站点会不堪重负(需要给几百万机器提供hosts文件)

衍生

为了解决上面的问题,提出了域名系统DNS,这是一种层次的、基于域的命名方案,并且用一个分布式数据库系统加以实现。

流程

当我们需要访问一个域名(其实就是前面的计算机的名字),应用程序会向DNS服务器发起一个DNS请求,DNS服务器返回该域名对应的IP地址。

问题解决

  • 用户计算机并没有存储所有的名字到IP的映射,这样避免了hosts文件过于庞大(现在各操作系统中hosts文件默认都是空的);
  • 规定了域名的命名规则,保证主机名字不会重复;
  • DNS服务器不再是单一的一台机器,而是一个层次的、合理组织的服务器集群;

DNS协议

要知道管理一个超大型并且不断变化的域名到IP的映射集合可不是一个简单的事,况且还要去应对上千上完的DNS请求。

由此制定了一套命名规则,防止域名出现重复,和我们生活中的快递系统类似。如果要给某人邮寄物品,地址可能是这样的:中国/广东省/广州市/番禺区/中山西路12号 xxx,而一个域名看起来则是这样的groups.google.com

对于internet来说,域名层次结构的顶级(相当于国际快递地址中的国家部分)由ICANN(互联网名称与数字地址分配机构)负责管理。目前已经有超过250个顶级域名,每个顶级域名可以进一步划为一些子域(二级域名),这些子域可被再次划分(三级域名),以此类推。所有这些域名可以组织成一棵树,如图所示


域名空间树

DNS设计之初是用来建立域名到IP地址的映射,理论上对于每一个域名我们只需要在域名服务器上保存一条记录 即可。这里的记录一般叫做【域名资源记录】,它是一个五元组,可以用以下格式表示:

Domain_name、Time_to_live、Class、Type、Value

其中

Dmmain_name:指出这条记录适用于哪个域名
Time_to_live:用来表明记录的生存周期,也就是说最多可以缓存该记录多长时间
Class:一般总是IN
Type:记录的类型
Value:记录的值,如果是A记录,则value是一个IPv4地址

我们看到域名记录有一个Type字段,用来表明记录的类型。这是为什么呢?因为对于一个域名来说,通常并非只记录其IP地址,还可能需要一些其他种类的记录,一些常见的记录类型如下:

A:主机的IPv4地址
AAAA:主机的IPv6地址
NS:该域名所在域的权威域名服务器
MX:接收特定域名电子邮件的服务器域名
CNAME:当前域名的一个别名

我们知道不能只用一台于域名服务器来相应所有的DNS查询,因为没有一台机器能够给全球的用户提供查询服务,计算能力、存储、带宽都不允许。只能合理组织一个域名服务器集群,使他们协同工作,共同提供域名解析服务。接下来首先要面对的一个问题是【如何合理地将所有的域名资源记录存储到不同的域名服务器上】。

前面说过域名的名字空间可以组织为一棵树,这里我们可以进一步将其划分为不重叠的区域(DNS zone),针对上图的域名空间,一种可能的域名划分如下图:


域名划分

然后将每个区域与多个域名服务器(其中一个是master,其他slave服务器则用来提供数据备份、加速解析速度、保证服务可用性)关联起来,称这些域名服务器为该区域的【权威域名服务器(ANthoritative Name Servers)】,它保存两类域名资源记录:

1:该区域内所有域名资源记录
2:父区域和子区域的域名服务器对应的域名资源记录(主要是NS记录)

这样,所有的域名资源记录都保存在多个域名服务器中,并且所有的域名服务器也组成了一个层次的索引结构,便于我们后面进行域名解析。下面以一个简化的域名空间为例子,说明域名资源记录是如何保存在域名服务器中的,如下图a:


域名服务器

图中域名空间划分为A、B、C、D、E、F、G七个DNS区域,每个DNS区域都有多个权威域名服务器,这些域名服务器里面保存了许多域名解析记录。对于上图的DNS区域E来说,它的权威域名服务区里面保存的记录如图中表格所示。
仔细观察上图你可能会发现区域A、B并没有父区域,他们之间并没有一条路径连在一起。这将导致一个很麻烦的问题,那就是区域A的权威域名服务器可能根本不知道区域B的存在。
因此引入了【根域名服务器】,它保存了所有顶级区域的权威域名服务器记录。现在通过根域名服务器,我们可以找到所有的顶级区域的权威域名服务器,然后就可以往下一级一级找下去了。
现在为止,我们的权威域名服务器和根域名服务器其实组成了一棵树,树根为根域名服务器,下面每个节点都是一个区域的权威域名服务器,对于图a中各个DNS区域的权威域名服务器,他们组成了下面这棵树(实际中,一个权威域名服务器可能保存多个DNS区域的记录,因此权威域名服务器之间的联系并不构成一棵树):


域名服务器树

域名解析

我们已经有了一个域名服务器集群,该集群合理的保存了域名空间和域名资源记录的对应关系。现在我们要做的就是发送一个DNS请求给域名服务器,然后坐等它返回正确的域名资源记录,这个过程叫做域名解析。

严格来说,域名解析的过程最早要追溯到建立网络连接。因为每当连接上网络之后,计算机会自动获得一个默认的DNS服务器,当然你也可以用自己的DNS服务器,比如8.8.8.8(DNS服务器也有信任和不信任之分),我们把这个域名服务器叫做【本地域名服务器】。接下来当我们需要知道一个域名对应的资源记录时,会向本地域名服务器发起请求,如果该域名恰好在本地域名服务器所辖属的域名区域(DNS zone)内,那么可以直接返回记录。

如果在本地域名服务器没有发现该域名的资源记录,就需要在整个域名空间搜索该域名。而整个域名空间的资源记录存储在一个分层的、树状联系的一系列域名服务器,所以本地域名服务器首先要从根域名服务器开始往下搜索。这里有一个问题就是本地域名服务器如何找到根域名服务器在哪里?其实域名服务器启动的时候,就会加载一个配置文件,里面保存了根域名服务器的NS记录(要知道根域名服务器地址一般非常稳定,不会轻易改变,并且数量很少,所哟这个配置文件会很少)。找到根域名服务器后,就可以一级一级往下查找了。
仍然以我们的图a为例,现在假设区域E内的某个用户想访问math.sysu.edu.cn,那么请求的过程如下:


域名解析过程

用语言简单描述如下:

1:用户:喂,本地域名服务器,告诉我math.sysu.edu.cn的地址
2:本地域名服务器:哎呀,我不知道啊,不在我的辖区,容我问下我大哥吧。root大哥,能告我math.sysu.end.cn地址嘛?
3:根域名服务器:忙着呢,你去问B(.cn)
4:本地域名服务器:喂,B,告诉我math.sysu.edu.cn的地址;
5:B:你去问D(.edu.cn)
6:本地域名服务器:喂,D,告诉我math.sysu.edu.cn的地址;
7:D:你去问F(sysu.edu.cn)
8:本地域名服务器:喂,F,告诉我math.sysu.edu.cn的地址;
9:F:容老衲看看,哎呀没找到了额,是x.x.x.x;
10:本地域名服务器:踏破铁鞋终于找到了,喂用户,出来啊,我知道了,是x.x.x.x;

仔细想想,这和我们邮寄快递实在是如出一辙啊,假设你从美国邮东西到广州番禺区,首先快递到中国(不过这里没有一个类似根域名服务器的中转站而已),然后往下到广东省,接下来是广州市,再往下市番禺了。

缓存机制

现在整个域名系统已经可以为我们提供域名解析服务了,当我们输入域名,计算机发送DNS请求,然后DNS服务器返回给我们解析的结果,一切看起来很完美。然后是不是可以更完美呢?

回顾一下平时浏览网站的情况,我们会发现两个比较有意思的结论:

1:80%的时间我们都在看那些20%的网站,这就是大名鼎鼎的80/20 Rule
2:我们会在一个网站的不同网页之间跳转,也就是不断地访问同一个域名,类似程序访问的局部性原理。

这两条结论很容易联想到【缓存机制】。如果我们将已经访问过的那些域名的解析结果缓存在自己的计算机上,那么下次访问的时候可以直接读取结果,不用再次重复DNS查询过程,给自己和域名服务器都节省了麻烦。

当然,这样做的一个前提是要缓存的解析结果不会频繁更改,也就是说我十分钟后解析一个域名的结果和现在解析的结果是一样的。对于大多数域名来说,这都是一个不争的事实。但是难免有一些“善变的域名”,他们可能会频繁更改自己的解析结果。为了使缓存机制适应这两类情况,我们在域名资源记录里面添加了一个Time_ti_live字段,表明这个条记录最多可以缓存多久。对于那些“稳如泰山”的域名,给一个比较大的值,而那些“朝三暮四”的域名,则可以给定一个小的值。

我们既可以在本地利用缓存,那么可以不可以在域名服务器上也利用缓存机制呢,答案当然是可以的。因为对于域名服务器来说,上面的两条有意思的结论仍然有效。所以,域名服务器可以将那些访问过的域名资源记录缓存,用户再次发起请求时,可以直接返回缓存结果,不用去迭代或者递归解析。

相关文章

  • 网络相关知识

    前言 主要是参考其他人写的文章,做一个手抄记录,加深印象,后面都会附上原文链接。 1、 DNS介绍篇(原文(htt...

  • 网络相关知识

    计算机基础知识掌握TCP和HTTP相关知识即可。 这是一份详细 & 清晰的计算机网络基础 学习指南计算机网络:这是...

  • 网络相关知识

    一,常用协议与端口 FTP 文件传输协议,20传输数据,21控制telnet 远程控制协议 23smtp 简单...

  • 网络相关知识

    虽然一直在做开发,但对于网络知识了解还不是太深,做下笔记方便以后查阅 一、http的介绍 http 超文本传输协议...

  • 网络相关知识

    一、HTTP 问题1:HTTP是什么? HTTP是超文本传输协议。 包含请求/响应报文(具体说出报文包含的字段)。...

  • 网络相关知识

    IP 地址与路由控制 IP地址的网络地址这一部分是用于进行路由控制。 路由控制表中记录着网络地址与下一步应该发送至...

  • Socket网络相关知识

    Socket网络相关知识 端口号(用来定位程序),有效端口065535其中01024是被系统使用或者保留的端口. ...

  • 前端知识:网络相关

    OSI 七层模型与 TCP/IP 五层模型 OSI 七层模型:物理层、数据链路层、网络层、传输层、会话层、展示层、...

  • 网络爬虫相关知识

    2019年12月19日 一.爬取数据 二.使用urllib爬取数据 1.获取静态数据 2.获取动态数据 http:...

  • 网络存储相关知识

    目前高端服务器使用的专业网络存储技术大概分为四种,有DAS、NAS、SAN、iscsl,它们可以使用RAID阵列提...

网友评论

      本文标题:网络相关知识

      本文链接:https://www.haomeiwen.com/subject/xtpxhftx.html