ToB企服应用市场:ToB评测及商务社交产业平台

标题: ARP协议：网络世界的临门一脚 [打印本页]
作者: 知者何南    时间: 2023-3-20 14:29
标题: ARP协议：网络世界的临门一脚
大家好，我是风筝。
各位同学肯定见过关于网络的面试题，什么TCP协议和UDP的区别啦，IP协议工作在哪层啊等等，这都是网络中定义的各种协议。这些标准化的协议就是网络分层模型标准化的核心部分。要想搞懂网络，必须搞明白其中的几种主要的网络协议。
今天我们就开始介绍网络世界的协议。介绍的顺序大致是从网络模型由底向上来，包括数据链路层的以太网协议，网络层的 ARP协议、RARP协议、IP协议、ICMP协议，传输层的 TCP协议、UDP 协议，以及应用层的 HTTP/HTTPS协议。
我们假设数据包都是在以太网传输，所以以太网协议一直是贯穿始终的，因为最终所有的数据包都会被封装成以太网帧，所以其他几种协议的介绍过程中，会穿插这以太网协议，不用单独介绍，自然而然就理解了。

今天我们就彻底讲清楚 ARP 协议（地址解析协议）， 我把 ARP 协议比作数据包在网络世界的临门一脚，当数据包到达了一个局域网中，局域网中有那么多机器，踢开哪台机器的大门，就靠 ARP 协议了。为什么这么说，一会儿你就明白了。
其实 ARP 协议可以简单概括为几句话：
好的，讲完了。开个玩笑，当然没有，最好还是继续看下边的内容。
在 OSI 模型中，通常认为 ARP和RARP属于数据链路层协议，因为它们不使用IP协议。而在TCP/IP 协议栈中，将 ARP归于网络层，和IP协议在同一层。
只要知道对方的 IP 地址或域名，就能将数据发送过去，这是我们常识性的理解。而且在平常的使用过程中也确实是这样的。比如我们开发过程中，建立一个 socket 连接，只要知道目标 IP 和 端口就可以了。
真实的网络世界中是这样的吗，确实 IP 地址是必不可少的，但是还有另外一种地址也是必不可少的，那就是 MAC 地址。
最终，在数据到达以太网链路层，会被包装成以太网数据帧，而数据帧中决定最终去向的是就是目标 MAC 地址，注意喽，是 MAC 地址（硬件地址），而不是 IP 地址。
可以把 IP 比作现实世界中一个房子的标记，比如北京市朝阳区XX路xx小区1号楼1单元801，而 MAC 地址则是这个房子的经纬度（116.354856,39.942009），虽然我们看前面的一串标示更容易理解，但是当我们要导航去那里的时候还是要靠经纬度。
但是如何在一大群机器中确定目标 IP 对应的 MAC 地址呢，数据已经到了局域网，这么多大门该开哪一扇呢，这就是 ARP 该做的事儿了。
什么是 MAC 地址
MAC地址（Media Access Control Address），直译为媒体存取控制位址，也称为局域网地址（LAN Address），以太网地址（Ethernet Address）或物理地址（Physical Address），它是一个用来确认网路设备位置的位址。在OSI模型中，第三层网路层负责IP地址，第二层资料链结层则负责MAC位址。MAC地址用于在网络中唯一标示一个网卡，一台设备若有一或多个网卡，则每个网卡都需要并会有一个唯一的MAC地址。
MAC 地址长度为6字节，48bit，用16进制的6个元组表示，例如 3c:22:fb:64:4f:1d，其中有一个特殊的地址就是所有比特位都是1的地址 ff:ff:ff:ff:ff:ff，表示是一个广播地址，意思就是指消息要发给局域网中的所有网卡。
为什么需要 ARP 协议

直接的原因就是数据链路层要将数据帧发送到目的端，必须要知道目的端的 MAC 地址，这是由网络模型的架构设计决定的。
下面这张图是网络 4 层模型以及数据从发送端到接收端的首发过程。发送是从上向下经过层层包装，最后形成一个数据帧（最常用的以太网帧），之后这个数据在纷繁复杂的网络世界中勇往直前，到达接收端，接收端从下向上层层拆包，最后供应用层使用。

上面这张图很有用的，在学习网络知识（不管是基础概念还是各种协议）的时候可以为我们提供一个宏观的视角。
网络中的设备数以亿计，一个发送终端怎么可能知道每一台接收终端的 MAC 地址呢，显然，这是不可能的。但是 IP 是知道的，比如我们访问 github，github 每一台服务器的 MAC 地址（准确的说是一个网卡的 MAC 地址，因为一台机器上可能有多个网卡）我们是不知道的，但是它的域名我们都知道，通过域名得到 IP 地址，这是 DNS 的功能，大多数同学都很清楚，所以间接的也就相当于我们知道了 github 的IP。
但是，为什么我们在做应用层开发的时候不需要关注 MAC 地址。
根本没有什么岁月静好，只是有人在替我们负重前行罢了。在这里帮我们负重前行的就是 ARP 协议。
这里面有一个关键点，最终在网络上传输的包，必定是一个数据帧，最常用的就是以太网帧。
如果我们完全将这一过程当做一个黑盒，可以对照理解为一个程序中封装好的方法，例如 getMacAddressByIP(Long ip) ，当我们需要得到 MAC 地址时，直接调用这个方法就可以了。
ARP 协议全称地址解析协议，用来将 IP 地址解析出 MAC 地址，还有一个与之相对的协议 RARP，全称叫做逆地址解析协议，用来将 MAC 地址解析出 IP 地址。

ARP 的工作过程

ARP 就是工作在一个局域网中的，
当一台路由器或者一个具有路由转发功能的主机想要通过一个 IP 地址得到对应的 MAC 地址时，就可以使用 ARP 协议了，这个设备向它所在的目标子网中发送一个广播的 ARP  请求，请求中带着这个 IP 地址，意思是说，在这个网络中的各位，谁的 IP 是这个，请回复我一下，并告诉我你的 MAC 地址。收到这个请求的主机对这个 ARP 包进行解析，如果发现携带的 IP 正好是自己的，就返回一个 ARP 回复，回复中带上自己的 MAC 地址。

使用 ARP 协议后，目的主机将自己的 IP 地址和 MAC 地址返回给源主机，源主机将 MAC 地址加到以太网帧中，构造成完整的帧格式，再将数据帧通过链路层发出。
最终数据帧到达目的主机，链路层通过数据帧中的目的 MAC 地址判断数据帧是不是发给自己的，如果是的话，则接收数据帧，并经过层层解析，最终交给应用层对应的程序处理。
先说说以太网数据帧格式


以太网目的地址：目的端 MAC 地址，6字节。
以太网源地址：发送端的 MAC 地址，6字节。
帧类型：标记数据部分的类型，如果是 IP  数据报，值为 0x0800，如果是 ARP 数据报，值为 0x0806，2字节。
数据：以太帧搭载的数据。只要是在以太网上发送数据，最终都会被链路层封装成以太网数据帧，所以数据部分即可以是 IP 数据报、ARP 协议包、ICMP 数据包等，以太网数据帧数据部分最小长度是 46 字节，最大长度由 MTU 决定，是 1500 字节。
CRC：数据检验码，用来在接收端检验接收的数据是不是无差错的，4字节。
既然大家都是程序员，我们将这个数据帧抽象成一个实体类表示，帮助我们理解。
  1. public class EthernetFrame {
  2.     /**
  3.      * 目的 MAC 地址，6字节，48bit
  4.      */
  5.     private Byte[] destinationMacAddress = new Byte[6];
  7.     /**
  8.      * 源 MAC 地址，6字节，48bit
  9.      */
  10.     private Byte[] sourceMacAddress = new Byte[6];
  13.     /**
  14.      * 标记搭载的数据类型,
  15.      * 如果是 IP  数据报，值为 0x0800
  16.      * 如果是 ARP 数据报，值为 0x0806
  17.      */
  18.     private Byte[] type = new Byte[2];
  20.     /**
  21.      * 数据
  22.      * 以太网的数据长度为 46~1500字节。
  23.      * 最短 46   字节，不够的要填充(pad)
  24.      * 最长 1500 字节，以太网的 MTU 决定的
  25.      */
  26.     private Byte[] data = new Byte[46];
  28.     /**
  29.      * 检验码 4 字节，在帧尾部
  30.      */
  31.     private Byte[] crc = new Byte[4];
  32. }
复制代码
ARP 协议格式

以下是 ARP 协议的格式，以及一对完整的 ARP 请求数据帧和应答数据帧。

硬件类型：2字节，用来表示硬件地址的类型，为 1 表示以太网地址。
协议类型：2字节，用来表示要映射的协议地址类型。ARP 不仅可以表示要将 IP 转换为 MAC ，还允许其他的转换关系，例如将另外一种非 IP 地址转换为 MAC 地址。当它的值为0x0800表示 IP 地址，与包含IP数据报的以太网数据帧中的类型字段的值相同。
硬件地址长度：1字节，用来表示硬件地址的长度，单位是字节。在以太网中就是 MAC 地址的长度，值为6，也就表示 MAC 地址长度为 6 字节。
协议地址长度：1字节，用来表示协议地址的长度，单位是字节。在以太网中，如果协议类型是 IP，也就是要将 IP 转换为 MAC 时，它的值是 4 ，也就是4字节，表示 IP 地址的长度是 4 字节。
操作字段：2字节，用来表示当前操作的类型。值为1，表示 ARP 请求；值为2，表示 ARP 应答；值为3，表示 RARP 请求；值为4，表示 RARP 应答。此字段是用来区分请求和应答的必需字段。
发送端以太网地址：6字节，用来表示发送端的以太网 MAC 地址。
发送端 IP 地址：4字节，用来表示发送端的 IP 地址。
目的以太网地址：6字节，用来表示目的端的 MAC 地址。
目的 IP 地址：4字节，用来表示目的端的 IP 地址。
整个 ARP 协议部分共 28字节，但是在以太网中，一个以太网数据帧数据最小长度为 46，所以，后面要有18字节的数据填充。
操作字段为1表示这是一个 ARP 请求，ARP 请求是个广播消息，请求数据中没有目的 MAC 地址，因为还不知道嘛，我们要找的就是它。之后，ARP 应答消息（操作字段是2）将本机的 MAC 地址放到源MAC地址中，并且将 ARP 请求中的MAC地址替换为目的 MAC 地址，用来告知 ARP 发送端。
还是用一个实现类来表示 ARP 协议中的各个字段。
  1. public class Arp {
  2.     /**
  3.      * 硬件类型，2字节，值为1表示以太网
  4.      */
  5.     private Byte[] hardwareType = new Byte[2];
  7.     /**
  8.      * 协议类型，2字节，要映射的协议地址类型
  9.      * 0x0800 表示要转换的源协议为 IP 协议
  10.      */
  11.     private Byte[] protocolType = new Byte[2];
  13.     /**
  14.      * 硬件地址长度，1字节，表示硬件地址的长度，单位为字节
  15.      * 硬件地址长度在以太网表示 MAC 地址的长度，值为6，也就是 6 字节
  16.      *
  17.      */
  18.     private Byte[] hardwareAddressLength = new Byte[1];
  20.     /**
  21.      * 协议地址长度，1字节，表示协议地址的长度，单位为字节
  22.      * 在以太网转换 IP 为 MAC 地址时，就表示为 IP 地址的长度，也就是4字节
  23.      */
  24.     private Byte[] protocolAddressLength = new Byte[1];
  26.     /**
  27.      * 操作字段，2字节，表示操作类型
  28.      * 1：ARP 请求
  29.      * 2：ARP 应答
  30.      * 3：RARP 请求
  31.      * 4：RARP 应答
  32.      */
  33.     private Byte[] op = new Byte[2];
  35.     /**
  36.      * 发送端 MAC 地址，6字节
  37.      */
  38.     private Byte[] sourceMacAddress = new Byte[6];
  40.     /**
  41.      * 发送端 IP 地址，4字节
  42.      */
  43.     private Byte[] sourceIpAddress = new Byte[4];
  45.     /**
  46.      * 目的端 MAC 地址，6字节
  47.      * 在 ARP 请求中，这个地址为空
  48.      */
  49.     private Byte[] destinationMacAddress = new Byte[6];
  51.     /**
  52.      * 目的端 IP 地址，4字节
  53.      * 接收 ARP 广播的主机通过 IP 地址判断是否回复 ARP 应答(IP 地址的所有者)
  54.      */
  55.     private Byte[] destinationIpAddress = new Byte[4];
  56. }
复制代码
用 Wireshark 抓个包

打开 Wireshark ，开始抓包，等待一会儿，然后停止抓包。你电脑中的各个程序会偷偷的发送和应答很多 ARP 包，

在 Wireshark 中过滤 arp.opcode == 1的 ARP 请求，然后找到其中一个。用 Wireshark 分析包特别直观，我们用鼠标点击上方的某个字段时，下面会自动将这个字段的值标记出来，这样就可以清楚的看到这个字段在整个数据包中的位置了。例如下图选中了 ARP 包中的 Opcode字段（操作字段），下面的  00 01 被标记了，这是用 16 进制表示的，00表示一个字节，01表示一个字节，表示这个操作字段是2个字节，值是1，也就是ARP 请求。

简单分析一下这个包

图中 1、2、3 三个部分分别是以太网帧概要信息、以太网数据帧首部、以太网数据帧数据内容。在第一部分概要信息可以看到这个帧的总大小是 60 bytes，以太网数据帧头部的14 字节，加上内容部分最少46字节，刚好是 60 字节，其实还有一个 CRC （数据检验码），只不过本地网卡会自动剥离掉，所以在 Wireshark 中是看不到的。
以太网数据帧首部

上图是以太网数据帧首部信息。
1、目的 MAC 地址，都是 ff，表示这是个广播请求，ARP 请求本身就是广播的。
2、源 MAC 地址，本机的 MAC 地址。
3、帧类型，ARP 类型。
4、因为以太网帧数据部分最小是 46 字节，ARP 只有28字节，所以要填充18字节。
ARP 请求信息

从上到下依次是硬件类型、协议类型、硬件地址长度、协议地址长度（一般就是IP地址）、操作字段、发送端 MAC 地址、发送端 IP 地址、目标 MAC 地址、目标 IP 地址。
使用 wireshark 的 filter  arp.opcode == 2 可过滤出 APR 请求。
是不是完全听明白了，回头发现，就是我开头总结的那几点内容。
自己学容易，写出来真难啊，如果对各位有一点点帮助当然最好了。
如果觉得还不错的话，给个推荐吧！
公众号「古时的风筝」，Java 开发者，专注 Java 及周边生态。坚持原创干货输出，你可选择现在就关注我，或者看看历史文章再关注也不迟。长按二维码关注，跟我一起变优秀！


免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！



欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4