文章目录
- 网络基础:数据链路层与其他协议或技术
-
- 数据链路层与以太网
-
- 认识以太网
- 以太网帧格式
- [认识 MAC 地址](#认识 MAC 地址)
- [认识 MTU](#认识 MTU)
-
- [MTU对 IP 协议的影响](#MTU对 IP 协议的影响)
- [MTU 对 UDP 协议的影响](#MTU 对 UDP 协议的影响)
- MTU对于TCP协议的影响
- [ARP 协议](#ARP 协议)
-
- ARP协议的作用
- [ARP 协议的工作流程](#ARP 协议的工作流程)
- [ARP 数据报的格式](#ARP 数据报的格式)
- 其他重要协议或技术
-
- [DNS(Domain Name System)](#DNS(Domain Name System))
- [浏览器中输入 URL 后发生的事情](#浏览器中输入 URL 后发生的事情)
- [ICMP 协议与网络诊断工具](#ICMP 协议与网络诊断工具)
- NAT技术
- 总结
网络基础:数据链路层与其他协议或技术
数据链路层与以太网
数据链路层用于两个设备(同一种数据链路节点)之间进行传递。
对比理解"数据链路层"和"网络层":
- 网络层关注的是在复杂网络环境中确定一条总体路径。
- 数据链路层关注的是两个相邻节点之间、同一种数据链路节点之间的数据传递。
认识以太网
- "以太网"不是一种具体的网络,而是一种技术标准;既包含了数据链路层的内容,也包含了一些物理层的内容。例如规定了网络拓扑结构、访问控制方式、传输速率等。
- 以太网中的网线必须使用双绞线;传输速率有 10M、100M、1000M 等。
- 以太网是当前应用最广泛的局域网技术;和以太网并列的还有令牌环网、无线 LAN 等。
以太网帧格式
以太网的帧格式如下所示:

- 源地址和目的地址是指网卡的硬件地址,也叫 MAC 地址,长度是 48 位,是在网卡出厂时固化的。
- 帧协议类型字段有三种值,分别对应 IP、ARP、RARP;图中类型
0800对应 IP 数据报,0806对应 ARP 请求/应答,8035对应 RARP 请求/应答。 - 帧末尾是 CRC 校验码。
- ARP 数据包长度不够 46 字节时,要在后面填充充位。
认识 MAC 地址
- MAC 地址用来识别数据链路层中相连的节点。
- 长度为 48 位,即 6 个字节,一般用 16 进制数字加上冒号的形式表示,例如
08:00:27:03:fb:19。 - 在网卡出厂时就确定了,不能修改。MAC 地址通常是唯一的;虚拟机中的 MAC 地址不是真实的 MAC 地址,可能会冲突;也有些网卡支持用户配置 MAC 地址。
对比理解 MAC 地址和 IP 地址:
- IP 地址描述的是路途总体的起点和终点;
- MAC 地址描述的是路途上每一个区间的起点和终点。
认识 MTU
MTU 相当于发快递时对包裹尺寸的限制。这个限制是不同的数据链路对应的物理层产生的限制。
- 以太网帧中的数据长度规定最小 46 字节,最大 1500 字节;ARP 数据包长度不够 46 字节,要在后面补填充位。
- 最大值 1500 称为以太网的最大传输单元 MTU;不同的网络类型有不同的 MTU。
- 如果一个数据包从以太网路由到拨号链路上,数据包长度大于拨号链路的 MTU,则需要对数据包进行分片。
不同的数据链路层标准的 MTU 是不同的。
MTU对 IP 协议的影响
由于数据链路层 MTU 的限制,对于较大的 IP 数据包要进行分包。
- 将较大的 IP 包分成多个小包,并给每个小包打上标签。
- 每个小包的 IP 协议头的 16 位标识 id 都是相同的。
- 每个小包的 IP 协议头的 3 位标志字段中,第 2 位置为 0,表示允许分片;第 3 位表示结束标记,材料表述为当前是否是最后一个小包,是的话置为 1,否则置为 0。
- 到达对端时再将这些小包按顺序重组,拼装到一起返回给传输层。
- 一旦这些小包中任意一个小包丢失,接收端的重组就会失败;但是 IP 层不会负责重新传输数据。


注意:
- 分片后的 IP 包只要丢失任意一个分片,整个原始 IP 数据报的重组就会失败。
- IP 层不负责重传,可靠性需要由传输层或应用层处理。
MTU 对 UDP 协议的影响
- 一旦 UDP 携带的数据超过 1472 字节,即
1500 - 20(IP 首部) - 8(UDP 首部)。那么就会在网络层分成多个 IP 数据报。 - 这多个 IP 数据报有任意一个丢失,都会引起接收端网络层重组失败。
- 这意味着,如果 UDP 数据报在网络层被分片,整个数据被丢失的概率就大大增加了。
MTU对于TCP协议的影响
- TCP的一个数据报也不能无限大,仍然受制于MTU。
- TCP 的单个数据报的最大消息长度称为 MSS(Max Segment Size)。
- TCP 在建立连接的过程中,通信双方会进行MSS 协商。
- 最理想的情况下,MSS的值正好是在IP不会被分片处理的最大长度,这个长度仍然受制于数据链路层的 MTU。
- 双方在发送SYN的时候会在TCP 头部写入自己能支持的MSS 值。
- 然后双方得知对方的MSS 值之后,选择较小的作为最终MSS。
- MSS的值在TCP首部的40字节变长选项中,kind=2。
MSS 和 MTU 的关系:

使用命令查看:
bash
ifconfig / ip -a
注意:如果输入命令ifconfig输出的是:-bash: ifconfig: command not found。证明你当前Linux操作系统没有net-tools,因为在较新的 Linux 发行版中,ifconfig 命令所属的 net-tools 软件包默认不再预装,并且 ifconfig 本身也已被官方弃用,逐渐被功能更强大的 ip 命令取代。如果你还是想用 ifconfig。就要下载对应安装包:
bash
# Debian / Ubuntu
sudo apt update && sudo apt install net-tools
# CentOS / RHEL / Rocky / AlmaLinux
sudo dnf install net-tools(或旧版系统的 sudo yum install net-tools)
# Arch Linux / Manjaro
sudo pacman -S net-tools

ARP 协议
虽然在这里介绍 ARP 协议,但需要强调:ARP 不是一个单纯的数据链路层的协议,而是一个介于数据链路层和网络层之间的协议。
ARP协议的作用
ARP 协议建立了主机IP 地址和MAC 地址的映射关系。
- 在网络通讯时,源主机的应用程序知道目的主机的IP地址和端口号,却不知道目的主机的硬件地址。
- 数据包首先是被网卡接收到再去处理上层协议的,如果接收到的数据包的硬件地址与本机不符,则直接丢弃。
- 因此在通讯前必须获得目的主机的硬件地址。
ARP 协议的工作流程

- 源主机发出 ARP 请求,询问"IP 地址是 192.168.0.1 的主机的硬件地址是多少",并将这个请求广播到本地网段;以太网帧首部的硬件地址填
FF:FF:FF:FF:FF:FF表示广播。 - 目的主机接收到广播的 ARP 请求,发现其中的 IP 地址与本机相符,则发送一个 ARP 应答数据包给源主机,将自己的硬件地址填写在应答包中。
- 每台主机都维护一个 ARP 缓存表,可以用
arp -a命令查看。 - 缓存表中的表项有过期时间,一般为 20 分钟;如果 20 分钟内没有再次使用某个表项,则该表项失效,下次还要发 ARP 请求来获得目的主机的硬件地址。

想一想,为什么要有缓存表? 为什么表项要有过期时间而不是一直有效? - 结合我们之前的知识,我们能知道缓存通常是为了提升效率,我们再来看看ARP的工作流程是什么?
- 源主机发出ARP请求,询问"IP 地址是 192.168.0.1 的主机的硬件地址是多少",并将这个请求广播到本地网段,如果没有缓存会怎么样?是不是每次通信都有广播ARP请求,这就好比你辅导你弟弟或者妹妹功课他做一道题就问你做的对不对,做n道题问n遍遇到这种情况不仅浪费你的时间同时效率也很低,但是如果你的弟弟或者妹妹是做完了10道题再来询问你,你将错误的挑出来讲这样效率比之前做一道问一道要高的多;
- 为什么要有过期时间呢?我们继续回答你辅导弟弟妹妹的功课上,比如你大学放长假回来你父母叫你去辅导你弟弟妹妹的数学。因为你上次是辅导的语文,这次你弟弟妹妹拿还是语文。如果不过期不就会造成鸡同鸭讲。
用较为官方的话术说:
- 为什么要有 ARP 缓存表?
- 如果每次通信都广播 ARP 请求,会带来额外网络开销;缓存 IP 与 MAC 的映射可以减少广播、提高通信效率。
- 为什么表项要有过期时间而不是一直有效?
- IP 与 MAC 的映射可能变化,例如设备更换网卡、IP 重新分配等;过期机制可以避免使用陈旧映射。
ARP 数据报的格式

- 注意到源MAC地址、目的MAC地址在以太网首部和ARP请求中各出现一次,对于链路层为以太网的情况是多余的,但如过链路层是其它类型的网络则有可能是必要的。
- 硬件类型指链路层网络类型,1为以太网;
- 协议类型指要转换的地址类型,0x0800为IP地址;
- 硬件地址长度对于以太网地址为6字节;
- 协议地址长度对于和IP地址为4字节;
- op字段为1表示ARP请求,op字段为2表示ARP应答。
其他重要协议或技术
DNS(Domain Name System)
DNS 是一整套从域名映射到 IP 的系统。
DNS背景
- TCP/IP 中使用 IP 地址和端口号来确定网络上的一台主机的一个程序,但是 IP 地址不方便记忆。
- 于是人们发明了主机名,是一个字符串,并使用 hosts 文件来描述主机名和 IP 地址的关系。
- 最初通过互联网信息中心 SRI-NIC 来管理 hosts 文件。
- 如果一个新计算机要接入网络,或者某个计算机 IP 变更,都需要到信息中心申请变更 hosts 文件。
- 其他计算机也需要定期下载更新新版本的 hosts 文件才能正确上网,这样太麻烦,于是产生了 DNS 系统。

DNS 系统: - 一个组织的系统管理机构维护系统内每个主机的 IP 和主机名的对应关系。
- 如果新计算机接入网络,将这个信息注册到数据库中。
- 用户输入域名的时候,会自动查询 DNS 服务器,由 DNS 服务器检索数据库,得到对应的 IP 地址。
- 至今计算机上仍然保留了 hosts 文件;在域名解析过程中仍然会优先查找 hosts 文件的内容,可用
cat /etc/hosts查看。

域名简介
主域名是用来识别主机名称和主机所属组织机构的一种分层结构名称,例如
text
www.baidu.com
com:一级域名,表示这是一个企业域名;同级的还有net(网络提供商)、org(非盈利组织)等。baidu:二级域名,公司名。www:只是一种习惯用法;之前人们使用域名时往往命名成类似ftp.xxx.xxx、www.xxx.xxx的格式,来表示主机支持的协议。
使用 dig 工具分析 DNS 过程:
安装dig工具的命令:
bash
# Ubuntu 系
sudo apt install dnsutils
# CentOS系
sudo yum install bind-utils

- 开头位置是 dig 指令的版本号。
- 第二部分是服务器返回的详情,重要的是 status 参数,NOERROR表示查询成功。
- QUESTION SECTION 表示要查询的域名是什么。
- ANSWER SECTION 表示查询结果是什么;这个结果先将
www.baidu.com查询成了www.a.shifen.com,再将www.a.shifen.com查询成了两个IP地址。 - 最下面是一些结果统计,包含查询时间和DNS 服务器的地址等。
浏览器中输入 URL 后发生的事情
这是一个经典的面试题,没有固定答案,越详细越好。可按以下框架组织回答:
- 解析 URL,提取域名、路径、端口等信息。
- 域名解析:优先查 hosts,再通过 DNS 获取 IP 地址。
- 建立传输层连接,例如 TCP 三次握手。
- 发送 HTTP 请求。
- 服务器处理请求并返回 HTTP 响应。
- 浏览器解析响应并渲染页面。
- 连接关闭或复用等后续处理。
ICMP 协议与网络诊断工具
ICMP 协议是一个网络层协议。
- 一个新搭建好的网络,往往需要先进行一个简单的测试,来验证网络是否畅通。
- 但是 IP 协议并不提供可靠传输;如果丢包了,IP 协议并不能通知传输层是否丢包以及丢包的原因。
ICMP功能
ICMP正是提供这种功能的协议; ICMP主要功能包括:
- 确认 IP 包是否成功到达目标地址。
- 通知在发送过程中 IP 包被丢弃的原因。
- ICMP 也是基于 IP 协议工作的,但它并不是传输层的功能,因此人们仍然把它归结为网络层协议。
- ICMP 只能搭配 IPv4 使用;如果是 IPv6,需要使用 ICMPv6。

ICMP的报文格式
关于报文格式, 我们并不打算重点关注, 大家稍微有个了解即可.

ICMP大概分为两类报文:
- 一类是通知出错原因
- 一类是用于诊断查询

ping 命令
ping命令就是ICMP协议中的一个常用功能,主要是测试网络是否通畅。

注意:
- 此处 ping 的是域名,而不是 URL;一个域名可以通过 DNS 解析成 IP 地址。
- ping 命令不光能验证网络的连通性,同时也会统计响应时间和 TTL。
- ping 命令会先发送一个 ICMP Echo Request 给对端。
- 对端接收到之后,会返回一个 ICMP Echo Reply。
一个值得注意的坑
有些面试官可能会问:telnet 是 23 端口,ssh 是 22 端口,那么 ping 是什么端口?
注意:这是面试官的圈套。ping 命令基于 ICMP,是在网络层;而端口号是传输层的内容。在 ICMP 中根本不关注端口号这样的信息,因此 ping 没有端口号。
traceroute 命令
traceroute 也是基于 ICMP 协议实现,能够打印出从可执行程序主机到目标主机之前经历多少路由器。

NAT技术
NAT技术背景
IPv4 协议中 IP 地址数量不充足。NAT 技术当前是解决 IP 地址不够用的主要手段,是路由器的一个重要功能。
- NAT 能够将私有 IP 对外通信时转为全局 IP,也就是一种将私有 IP 和全局 IP 相互转化的技术方法。
- 很多学校、家庭、公司内部采用每个终端设置私有 IP,而在路由器或必要的服务器上设置全局 IP。
- 全局 IP 要求唯一,但是私有 IP 不需要;在不同的局域网中出现相同的私有 IP 是完全不影响的。
NAT IP 转换过程

NAT路由器将源地址从10.0.0.10替换成全局的 IP202.244.174.37。NAT路由器收到外部的数据时,又会把目标 IP 从202.244.174.37替换回10.0.0.10。- 在
NAT路由器内部,有一张自动生成的、用于地址转换的表。 - 当
10.0.0.10第一次向163.221.120.9发送数据时,就会生成表中的映射关系。
NAPT
问题:如果局域网内有多个主机都访问同一个外网服务器,那么对于服务器返回的数据中,目的 IP 都是相同的。NAT 路由器如何判定将这个数据包转发给哪个局域网的主机?
这时 NAPT 来解决这个问题:使用 IP + port 来建立关联关系。

这种关联关系也是由 NAT 路由器自动维护的。例如在 TCP 的情况下,建立连接时就会生成这个表项;在断开连接后,就会删除这个表项。
如何正确理解NAT技术?
我们依旧举例子:
- 你上大学,学的是计算机网络技术专业,有一天你在去食堂的路上看到了一个学生证你想还给失主,但是你只知道他的名字其他的一概不知。那怎么办呢?大学通常有院系群,你就将这个学生证拍下来放到群里面。群管理就是你们院系学生会会长,他看到了就在他们学生会群里面发这是那个学院的学生的学生证掉了,在我们计算机院系的计算机网络技术某某学生捡到了,那么其他的院系学生会干部看到,只有是那个失主的院系的学生会干部才会找过来说这是我们院系某某专业的某某学生的学生证,于是失主就找过了你就把学生证还给失主了。
图片有点粗糙:

这里面群管理只做了转发,ip和端口的更改,因为群管理将的你的信息进行转发同时转发的人是群管理他的ip和端口和你的不一样这就符合NAT技术的转发、更改ip和端口。最后找到失主了那么就让你们私下去聊什么时候有时间来归还这个学生证了,那么这个你和失主的互相拿到联系方式这个互相拿到联系方式就相当于NAT进行了转发表的映射。
NAT 技术的缺陷
- 无法从 NAT 外部向内部服务器建立连接。
- 转换表的生成和销毁都需要额外开销。
- 通信过程中一旦 NAT 设备异常,即使存在热备,所有的 TCP 连接也都会断开。
NAT 和代理服务器的区别
路由器往往都具备 NAT 设备的功能,通过 NAT 设备进行中转,完成子网设备和其他子网设备的通信过程。代理服务器看起来和 NAT 设备有一点像:客户端向代理服务器发送请求,代理服务器将请求转发给真正要请求的服务器;服务器返回结果后,代理服务器又把结果回传给客户端。
区别如下:
- 从应用上讲:NAT 设备是网络基础设备之一,解决的是 IP 不足的问题;代理服务器则更贴近具体应用,比如通过代理服务器进行翻墙,另外像迅游这样的加速器,也是使用代理服务器。
- 从底层实现上讲:NAT 工作在网络层,直接对 IP 地址进行替换;代理服务器往往工作在应用层。
- 从使用范围上讲:NAT 一般在局域网的出口部署;代理服务器可以在局域网做,也可以在广域网做,也可以跨网。
- 从部署位置上看:NAT 一般集成在防火墙、路由器等硬件设备上;代理服务器则是一个软件程序,需要部署在服务器上。
代理服务器是一种应用比较广的技术:
- 翻墙:广域网中的代理。
- 负载均衡:局域网中的代理。
代理服务器又分为正向代理和反向代理:
- 正向代理用于请求的转发,例如借助代理绕过反爬虫。
- 反向代理往往作为一个缓存。
"代购例子"理解:
- 我自己去日本买尿不湿不方便,让在日本工作的表姐去超市买了快递给我;此时超市看到的买家是我表姐,我的表姐就是"正向代理"。
- 后来找表姐买尿不湿的人太多了,表姐干脆去超市买一大批屯在家里,如果有人来找她代购,就直接把屯在家里的货发出去,而不必再去超市;此时表姐就是"反向代理"。
总结
数据链路层:
- 数据链路层的作用:两个设备(同一种数据链路节点)之间进行传递数据。
- 以太网是一种技术标准,既包含数据链路层内容,也包含一些物理层内容;例如规定网络拓扑结构、访问控制方式、传输速率等。
- 以太网帧格式。
- 理解 MAC 地址。
- 理解 ARP 协议。
- 理解 MTU。
网络层:
- 网络层的作用:在复杂的网络环境中确定一个合适的路径。
- 理解 IP 地址,理解 IP 地址和 MAC 地址的区别。
- 理解 IP 协议格式。
- 了解网段划分方法。
- 理解如何解决 IP 数目不足的问题,掌握网段划分的两种方案。
- 理解私有 IP 和公网 IP。
- 理解网络层的 IP 地址路由过程,理解一个数据包如何跨越网段到达最终目的地。
- 理解 IP 数据包分包的原因。
- 了解 ICMP 协议。
- 了解 NAT 设备的工作原理。
传输层:
- 传输层的作用:负责数据能够从发送端传输到接收端。
- 理解端口号的概念。
- 认识 UDP 协议,了解 UDP 协议的特点。
- 认识 TCP 协议,理解 TCP 协议的可靠性,理解 TCP 协议的状态转化。
- 掌握 TCP 的连接管理、确认应答、超时重传、滑动窗口、流量控制、拥塞控制、延迟应答、捎带应答特性。
- 理解 TCP 面向字节流,理解粘包问题和解决方案。
- 能够基于 UDP 实现可靠传输。
- 理解 MTU 对 UDP/TCP 的影响。
应用层:
- 应用层的作用:满足我们日常需求的网络程序,都是在应用层。
- 能够根据自己的需求,设计应用层协议。
- 了解 HTTP 协议。
- 理解 DNS 的原理和工作流程。
玩