Linux网络——网络基础概念

💁‍♂️个人主页 :进击的荆棘

👇作者其它专栏:

|-----------|-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
| 🧮数据结构与算法 | 《数据结构与算法》 |
| 算法 | 《算法》 |
| C++ | 《C++》 |
| 🐧Linux | 《Linux系统》 |
| MySQL | 《MySQL》 |


目录

1.计算机网络背景

2.初识协议

3.再识协议

4.网络传输基本流程

5.Socket编程预备


1.计算机网络背景

1.1网络发展

独立模式:计算机之间相互独立;

网络互联:多台计算机连接在一起,完成数据共享;

局域网LAN:计算机数量更多了,通过交换机和路由器连接在一起

广域WAN:将远隔千里的计算机连接在一起

所谓"局域网"和"广域网"只是一个相对的概念,如:我们有"天朝特色"的广域网,也可以看做一个比较大的局域网

●计算机是人的工具,人要协同工作,注定了网络的产生是必然的

2.初识协议

●"协议"是一种约定

计算机之间的传输媒介是光信号和电信号,通过"频率"和"强弱"来表示0和1这样的信息。要像传输各种不同的信息,就需要约定好双发的数据格式

也就是说只要通信的两台主机,约定好协议就可以了吗?

●定好协议,但是你用频率表示01,我用强弱表示01,就好比我用国语,你用英文一样,虽然大家可能遵守一套通信规则,但是语言不同,即使定好了基本的协议,也是无法正常通信的

所以,完善的协议,需要更多细致的规定,并让参与的人都要遵守

●计算机生产厂商有很多

●计算机操作系统也有很多

●计算机网络硬件设备依旧有很多

●如何让这些不同厂商之间生产的计算机能够相互顺畅的通信?就需要有人站出来,约定一个共同的标准,大家都来遵守,这就是网络协议;

一般具有定制协议或者标准的资格的组织或公司都必须是业界公认或具有江湖地位的组织或公司

2.1协议分层

●协议本质也是软件,在设计上为了更好的进行模块化,解耦合,也是被设计成为层状结构的

软件分层的好处

●在这例子中,"协议"只有两层:语言层、通信设备层

●但实际的网络通信协议,设计的会更加复杂,需要分更多的层

●通过上面的例子,可以理解,分层可以实现解耦合,让软件维护的成本更低

2.2OSI七层模型

●OSI(Open System Interconnection,开发系统互连)七层网络模型称为开放式系统互联参考模型,是一个逻辑上的定义和规范

●把网络从逻辑上分为了7层,每一层都有相关、相对应的物理设备,如路由器,交换机

●OSI七层模型是一种框架性的设计方法,其最主要的功能就是帮助不同类型的主机实现数据传输

●它的最大优点是将服务、接口和协议这三个概念明确地区分开,概念清楚,理论也比较完整,通过七个层次化的结构模型使不同的系统和不同的网络之间实现可靠的通讯

●但是,它既复杂又不实用,所以按TCP/IP四层模型来学习

●其实在网络角度,OSI定的协议7层模型非常完善,但是在实际操作的过程中,会话层、表示层是不可能接入到操作系统中的,所以在工程实践中,最终落地的是5层协议

2.3TCP/IP五层(或四层)模型

TCP/IP是一组协议的代名词,它还包括了许多协议,组成了TCP/IP协议簇

TCP/IP通讯协议采用了5层的层级结构,每一层都呼叫它的下一层所提供的网络来完成自己的需求

●物理层:负责光/电信号的传递方式,如现在以太网通用的网线(双绞线)、早期以太网采用的同轴电缆(现在主要用于有线电视)、光纤,现在的wifi无线网使用电磁波等都属于物理层的概念。物理层的能力决定了最大传输速率、传输距离、抗干扰等,集线器(Hub)工作在物理层

●数据链路层:负责设备之间的数据帧的传送和识别,例如网卡设备的驱动、帧同步(就是说从网线上检测到什么信号算作新帧的开始)、冲突检测(若检测到冲突就自动重发)、数据差错校验等工作,又以太网、令牌环网,无线LAN等标准,交换机(Switch)工作在数据链路层

●网络层:负责地址管理和路由选择,例如在IP协议中,通过IP地址来标识一台主机,并通过路由表的方式规划出两台主机之间的数据传输的线路(路由)。路由器(Router)工作在网络层

●传输层:负责两台主机之间的数据传输,如传输控制协议(TCP),,能够确保数据可靠的从源主机发送到目标主机

●应用层:负责应用程序间沟通,如简单电子邮件传输(SMTP)、文件传输协议(FTP)、网络远程访问协议(Telnet)等,我们的网络编程主要就是针对应用层

物理层考虑的比较少,我们只考虑软件相关的内容,因此很多时候我们直接称为TCP/IP四层模型,一般而言

●对于一台主机,它的操作系统内核实现了从传输层到物理层的内容

●对于一台路由器,它实现了从网络层到物理层

●对于一台交换机,它实现了从数据链路层到物理层

●对于集线器,它只实现了物理层

但并不绝对,很多交换机也实现了网络层的转发,很多路由器也实现了部分传输层的内容(如:端口转发)

3.再识协议

3.1为什么要有TCP/IP协议

●首先,即便是单机,你的计算机内部,也是存在协议的,如:其它设备和内存通信,会有内存协议。其它设备和磁盘通信,会有磁盘相关的协议,如:SATA,IDE,SCSI等。只不过我们感知不到。而且这些协议都在本地主机各自的硬件中,通信的成本、问题较少

●其次,网络通信最大的特点就是主机之间变远了。任何通信特征的变化,一定会带来新的问题,有问题就得解决问题,所以需要新的协议。

●所以,为什么要有TCP/IP协议?本质就是通信主机距离变远了

3.2什么是TCP/IP协议

●TCP/IP协议的本质是一种解决方案

●TCP/IP协议能分层,前提是因为问题们本身能分层

3.3TCP/IP协议与操作系统的关系

3.4所以究竟什么是协议

●OS的源代码一般是由C/C++编写的

问题:主机B能识别data,并准确提取a=10,b=20,c=30吗?

答案:能。因为双方都有同样的结构体类型struct protocol。既用同样的代码实现协议,用同样的自定义数据类型,天然就具有"共识",能够识别对方发来的数据,这就是约定
关于协议的简单理解:所谓协议,就是通信双方都认识的结构化的数据类型

因为协议栈是分层的,所以,每层都有双发都有协议,同层之间,互相可以认识对方的协议

4.网络传输基本流程

4.1局域网网络传输流程图

4.1.1局域网(以太网为例)通信原理

●两台主机在同一个局域网,是否能够直接通信?能

●原理:这就像在一个黑屋子里开会,每个人想发言前必须先听(载波侦听)。如果没人说话就开口(多路访问)。但如果开口的同时听到别人的声音(冲突检测),就立刻闭嘴,随机等一会儿再说,以免再次撞上。

●每台主机在局域网上,要有唯一的标识来保证主机的唯一性:mac地址

4.1.2认识MAC地址

●MAC地址用来识别数据链路层中相连的节点

●长度为48比特位,既6个字节。一般用16进制数字加上冒号的形式来表示(如:08:00:27:03:fb:19)

●在网卡出厂时就确定了,不能修改,mac地址通常是唯一的(虚拟机中的mac地址不是真实的mac地址,可能会冲突;也有些网卡支持用户配置mac地址)

●windows> ipconfig /all

●以太网中,任何时刻,只允许一台机器向网络中发送数据

●若有多台同时发送,会发生数据干扰,我们称之为数据碰撞

●所有发送数据的主机要进行碰撞检测和碰撞避免

●没有交换机的情况下,一个以太网就是一个碰撞域

●局域网通信的过程中,主机对收到的报文确认是发给自己的,是通过目标mac地址判定

下图是同一个网段内的两台主机进行发送消息的过程

而其中每层都有协议,所以当我进行上述传输流程的时候,要进行封装和解包

明确概念

●报头部分,就是对应协议层的结构体字段,一般叫做报头

●除了报头,剩下的叫做有效载荷

●所以,报文=报头+有效载荷

不同层完整报文的叫法:

●不同的协议层对数据包有不同的称谓,在传输层叫做段(segment),在网络层叫做数据报(datagram),在链路层叫做帧(frame)

●应用层数据通过协议栈发到网络上时2,每层协议都要加上一个数据首部(header),称为封装(Encapsulation)

●首部信息中包含2了一些类似于首部有多长,载荷(payload)有多长,上层协议是什么等信息

●数据封装成帧后发到传输介质上,到达目的主机后每层协议再剥掉相应的首部,根据首部中的"上层协议字段"将数据交给对应的上层协议处理

在网络传输的过程中,数据不是直接发送给对方主机的,而是先要自顶向下将数据交付给下层协议,最后由底层发送,然后由对方主机的底层来进行接受,在自底向上进行向上交付。

4.1.3数据包封装和分用

下图为数据封装的过程

数据分用的过程

学习任何协议,都要先建立这样的认识:

1.要学习的协议,是如何做到解包的?只有明确了解包,封包也就能理解

2.要学习的协议,是如何做到将自己的有效载荷,交付给上层协议的?

4.2跨网络传输流程图

4.2.1网络中的地址管理-认识IP地址

IP协议由两个版本,IPv4和IPv6,以后,默认为IPv4

●IP地址是在IP协议中,用来标识网络中不同主机的地址

●对于IPv4来说,IP地址是一个4字节,322位的整数

●通常也使用"点分十进程"的字符串表示IP地址,例如:192.168.0.1;用点分割的每一个数字表示一个字节,范围是0~255

跨网络的主机的数据传输,数据从一台计算机到另一台计算机传输过程中要经过一个或多个路由器

首先理解IP地址的意义

●为什么要取目标主机,先要走路由器?

●目的IP的意义

然后结合封装与解包,体现路由器解包和重新封装的特点

对比IP地址和Mac地址的区别

●IP地址在整个路由过程中,一直不变(暂时)

●Mac地址一直在变

●目的IP是一种长远目标,Mac是下一阶段目标,目的IP是路径选择的重要依据。mac地址是局域网转发的重要依据

提炼iP网络的意义和网络通信的宏观流程

●IP网络层存在的意义:提供网络虚拟层,让世界的所有网络都是IP网络,屏蔽最底层网络的差异

5.Socket编程预备

5.1理解源IP地址和目的IP地址

●IP在网络中,用来标识主机的唯一性

思考:数据传输到主机是目的吗?不是。因为数据是给人用的。如:聊天是人在聊天,下载是人在下载,浏览网页是人在浏览网页

但是人是怎么看到聊天信息的?怎么执行下载任务的?怎么浏览网页信息的?通过启动的聊天软件,应用商店,浏览器

而启动的聊天软件,应用商店,浏览器,都是进程。既进程是人在系统中的代表,只要把数据给进程,人就相当于拿到了数据

所以:数据传输到主机不是目的,而是手段。到达主机内部,再交给主机内的进程,才是目的

但是系统中,同时会存在非常多的进程,当数据到达目标主机之后,怎么转发给目标进程?这就要再网络的背景下,再系统中,标识主机的唯一性

5.2认识端口号

端口号(port)是传输层协议的内容

●端口号是一个2字节16位的整数(uint16_t)

●端口号用来标识一个进程告诉操作系统,当前的这个数据要交给哪一个进程来处理

●IP地址+端口号能够标识网络上的某一台主机的某一个进程

●一个端口号只能被一个进程占用(这样可以标识唯一一个进程)(但一个进程可以有多个端口号,大多数情况下遇不到)

5.2.1端口号范围划分

●0-1023:知名端口号,HTTP,FTP,SSH等这些广为使用的应用层协议,它们的端口号都是固定的

●1024-65535:操作系统动态分配的端口号。客户端程序的端口号,就是由操作系统从这个范围分配的

5.2.2理解"端口号"和"进程ID"

之前学习过,pid表示唯一一个进程,此处端口号也是唯一表示一个进程,两者有什么关系?

进程PID属于系统概念,技术上也具有唯一性,确实可以用来标识唯一一个进程,但是这样做,会让系统进程管理和网络强耦合,实际设计的时候,并没有选择这样做

5.2.3理解源端口号和目的端口号

传输层协议(TCP和UDP)的数据段中有两个端口号,分别叫做源端口号和目的端口号。既描述"数据是谁发的,要发给谁"

5.2.4理解socket

●综上,IP地址能用来标识互联网中唯一一台主机,port用来标识该主机上的唯一一个网络进程

●IP+Port就能表示互联网中唯一一个进程

●所以,通信的时候,本质是两个互联网进程代表人来进程通信,{srcIP,srcPort,dstIP,dstPort},这样的4元组就能标识互联网中唯二的两个进程

●所以,网络通信的本质,也是进程间通信

●将ip+port叫做套接字socket(插座)

5.3传输层的典型代表

若了解系统,也了解网络协议栈,就会清楚,传输层是属于内核的,要通过网络协议栈进行通信,必定调用的是传输层提供的系统调用,来进行网络通信

5.3.1认识TCP协议

TCP(Transmission Control Protocol 传输控制协议)

●传输层协议

●有连接

●可靠传输

●面向字节流

5.3.2认识UDP协议

UDP(User Datagram Protocol 用户数据报协议)

●传输层协议

●无连接

●不可靠传输

●面向数据报

5.4网络字节序

内存中的多字节数据相对于内存地址有大端和小端之分,磁盘文件中的多字节数据相对于文件中的偏移地址也有大端小端之分,网络数据流同样有大端小端之分。如何定义网络数据流的地址?

以32位整数0x12345678为例,它在内存中占4个字节:

|----|-------------|------------|
| 端序 | 低地址 -> 高地址 | 说明 |
| 大端 | 12 34 56 78 | 高位字节存放在低地址 |
| 小端 | 78 56 34 12 | 低位字节存放在低地址 |

●发送主机通常将发送缓冲区中的数据按内存地址从低到高的顺序发出

●接收主机把从网络上接到的字节依次保存在接收缓冲区中,也是按内存地址从低到高的顺序保存

●因此,网络数据流的地址应这样规定:先发出的数据是地址,后发出的数据是高地址

●TCP/IP协议规定,网络数据应采用大端字节序,既低地址高字节

●不管这台主机是大端机还是小端机,都会按照这个TCP/IP规定的网络字节序来发送/接收数据

●若当前发送主机是小端,就需要先将数据转成大端;否则就忽略,直接发送即可

为使网络程序具有可移植性,使同样的C代码在大端和小端计算机上编译后都能正常运行,可以调用以下库函数做网络字节序和主机字节序的转换

●h表示host,n表示network,l表示32位长整数,s表示16位短整数

●例htonl表示将32位的长整数从主机字节序转换为网络字节序,例如将IP转换后准备发送

●若主机是小端字节序,这些函数将参数做相应的大小端转换然后返回

●若主机是大端字节序,这些函数不做转换,将参数原封不动地返回
网络规定

所有发送到网络的数据,都必须是大端的

5.5socket编程接口

5.5.1socket常见API

cpp 复制代码
// 创建 socket ⽂件描述符 (TCP/UDP, 客⼾端 + 服务器)
int socket(int domain, int type, int protocol);

// 绑定端⼝号 (TCP/UDP, 服务器)
int bind(int socket, const struct sockaddr *address, socklen_t address_len);

// 开始监听socket (TCP, 服务器)
int listen(int socket, int backlog);

// 接收请求 (TCP, 服务器)
int accept(int socket, struct sockaddr* address, socklen_t* address_len);

// 建⽴连接 (TCP, 客⼾端)
int connect(int sockfd, const struct sockaddr *addr, socklen_t addrlen);

5.5.2sockaddr结构

socket API是一层抽象的网络编程接口,适用于各种底层网络协议,如IPv4、IPv6,以及UNIX Domain Socket。然而,各种网络协议的地址格式并不相同

●IPv4和IPv6的地址格式定义在netinet/in.h中,IPv4地址用sockaddr_in结构体表示,包括16为地址类型,16位端口号和32位IP地址

●IPv4、IPv6地址类型分别定义位常数AF_INET、AF_INET6。这样,只需要取得某种sockaddr结构体的首地址,不需要知道具体是哪种类型的sockaddr结构体,就可以根据地址类型字段确定结构体中的内容

●socket API可以都用struct sockaddr *类型表示,在使用的时候需要强转为sockaddr_in;这样的好处是程序的通用性,可以接收IPv4,IPv6,以及UNIX Domain Socket各种类型的sockaddr结构体指针作为参数

sockaddr结构

sockaddr_in结构

虽然socket API的接口是sockaddr,但是真正在基于IPv4编程时,使用的数据结构是sockaddr_in;这个结构里主要有三部分信息:地址类型,端口号,IP地址

5.5.3in_addr结构

in_addr用来表示一个IPv4的IP地址。其实就是一个32位的整数

相关推荐
LightBreeze200213 分钟前
从 LSA 到路由计算,彻底理解 OSPF 的区域路由与防环机制
网络·智能路由器·ospf·lsa·spf
tianyuanwo18 分钟前
QEMU 虚拟化入门:从“软件模拟一台电脑”到 KVM 时代的基础设施组件
运维·qemu·虚拟化
.YM.Z25 分钟前
从操作系统进入Linux进程概念及进程状态
linux·运维·服务器
忆挽篱笙歌6 小时前
通信连接,匿名管道
linux·服务器·网络
无足鸟ICT9 小时前
【RHCA+】安装Tuned
linux·服务器·centos
九英里路11 小时前
protobuf快速上手
网络·c++·中间件·json·谷歌·序列化·protobuf
Decay__14 小时前
VMware 安装 SQL Server 双节点 AlwaysOn 可用性组教程 —— WSFC、AG 与侦听器完整部署(系列核心篇)
运维·数据库·sql·mysql·架构
测试界的小码农14 小时前
【Linux 命令实战(06):Linux 文件权限管理,掌握 chmod、chown、chgrp】
linux·运维·服务器
艺杯羹15 小时前
1Panel 装好后 ufw 仍是 inactive:一次服务器安全盲区复盘
服务器·数据库·安全·网络安全·系统架构·实战·1panel