什么是MQTT，物联网MQTT协议详解

一路上

什么是MQTT

物联网 (IoT) 和机器对机器 (M2M) 通信对我们与技术交互的方式产生了持久影响。到 2022 年底，全球连接的物联网设备数量增长了 18%，达到 144 亿，到 2025 年估计连接的物联网设备将达到约 270 亿。随着这种增长，能够处理设备和处理系统（通常位于云端）之间实时、可靠和高效通信的消息传递协议至关重，因此，MQTT协议应运而生

• MQTT（MQ Telemetry Transport）是一种轻量级的开放式消息传递协议，它为资源受限的网络客户端提供了一种在低带宽环境中分发遥测信息的简单方法。该协议采用发布/订阅（PUSH/SUBSCRIBE）的通信模式，用于机器对机器 (M2M) 通信。
• MQTT 是为适应带宽和 CPU 限制而创建的低开销协议，旨在在嵌入式环境中运行，在该环境中它可以提供可靠、有效的通信路径。MQTT 适用于连接代码占用空间小的设备，对于由于偶尔的带宽限制或不可靠连接而经历不同级别延迟的无线网络来说，是一个不错的选择。该协议在汽车、能源和电信等物联网行业都有应用
• 尽管 MQTT 最初是用于与石油和天然气行业的监控和数据采集 (SCADA) 系统通信的专有协议，但它已在智能设备领域变得流行，如今已成为连接物联网的领先开源协议
• 最初，“MQTT”中的“MQ”来源于IBM的MQ（当时称为MQSeries）产品线，代表“Message Queue”。然而，尽管它的名称如此，该协议并不使用消息队列；相反，它提供发布和订阅消息传递：设备发布关于特定主题的消息，所有订阅该主题的设备都会收到该消息。它的主要应用包括发送消息以控制输出，以及从传感器节点读取和发布数据
  

MQTT的工作原理

Mqtt的工作原理可以概括为：MQTT 通过其两个主要组件来实现发布/订阅模型：客户端和代理

• 客户端（client）是发布或订阅消息的设备或应用程序，分别使它们成为所谓的发布者或订阅者。客户端可以向主题发布消息，主题是消息发送到的逻辑通道。订阅者可以是一个或多个客户端，接收发布到主题的消息。客户端也可以同时充当发布者和订阅者。
• 另一方面，代理端（broker）是在客户端之间路由消息的中间服务器。代理通过跟踪订阅和向订阅的客户端发布消息来管理客户端之间的消息分发。MQTT 客户端可以用多种编程语言实现，可以在各种硬件平台上运行，从低功耗微控制器到功能强大的服务器。代理可以部署在云端或本地，并且可以水平扩展以支持每秒数百万的设备和消息。阿里云、华为云、AWS 或 Azure 等超大规模应用程序都围绕其服务提供 MQTT 包装器，对 MQTT 协议提供不同级别的支持。
  

消息通过使用 MQTT 的代理与其他设备或软件共享。每条消息都有一个主题（Topic），Broker 可以根据该主题进一步处理消息。此外，每条消息都包含一个消息内容，即所谓的有效负载（payload）。MQTT 负载不绑定特定结构，可以自由设计。然而，为消息内容指定一个特定的结构是有帮助的，这样它就可以被其他设备或软件读取。潜在的消息结构可以是 JSON、XML 或 OPC UA。只要所有设备和软件都使用相同的结构进行通信，定义的结构就可以实现顺畅的内部通信。

当订阅客户端失去与代理的连接时，代理可以 根据用例和实现 - 保留任何旨在发送给订阅者的消息，然后在订阅者重新连接时立即传递它们。这确保订阅者不会错过任何消息并以正确的顺序接收它们，在国内简称遗嘱机制。

MQTT服务质量等级（Qos）

QoS 是指消息的发送者和消息的接收者之间的协议。它是 MQTT 中的一项关键功能，使客户端能够在三个服务级别之间进行选择。三个不同的 QoS 级别决定了 MQTT 协议如何管理内容。尽管更高级别的 QoS 更可靠，但它们具有更多的延迟和带宽要求，因此订阅客户可以指定他们希望接收的最高 QoS 级别。

• 最简单的 QoS 级别是未确认的服务。此 QoS 级别使用 PUBLISH 数据包序列；发布者向代理发送一次消息，代理将消息传递给订阅者一次。没有适当的机制来确保消息已被正确接收，并且代理不会保存消息，此 QoS 级别也可称为至多一次、QoS0 或即发即弃。
• 第二个 QoS 级别是确认服务。此 QoS 级别在发布者与其代理之间以及代理与订阅者之间使用 PUBLISH/PUBACK 数据包序列。确认数据包验证内容是否已收到，如果未及时收到确认，重试机制将再次发送原始内容。这可能导致订户收到同一消息的多个副本。此 QoS 级别也可称为至少一次或 QoS1。
• 第三个 QoS 级别是有保证的服务。此 QoS 级别使用两对数据包传送消息。第一对称为 PUBLISH/PUBREC，第二对称为 PUBREL/PUBCOMP。这两对确保无论重试多少次，消息都只会被传递一次。此 QoS 级别也可以称为恰好一次或 QoS2
  

MQTT协议数据包结构

MQTT 是一种基于二进制的协议，控制元素是二进制字节而不是文本字符串。

命令和命令确认格式由 MQTT 使用，这意味着每个命令都有一个伴随的确认。连接命令有连接确认，订阅命令有订阅确认，发布命令有发布确认，如上图所示。这种机制类似于 TCP 协议的握手机制。

MQTT 消息格式由3字段组成

• 固定包头（Fixed Header）所有 MQTT 数据包都必须存在,固定占用2个字节
• 可变包头（Variable Header）并不总是存在，有时候不存在这个部分
• 包体（payload）正在发送的数据存储在有包体中，然而包体部分也并不总是存在，一些命令，例如断开消息，就不使用包体字段
  

固定包头报文解析

固定包头包含 2 个字节，
第一个字节的前4位（Bit7Bit4）表示消息类型，后4位（Bit3Bit0）用于表示传输协议和Qos等级，
第二字节用于存储数据包长度，这个长度=可变包头长度+包体长度

MQTT Control Packet Types:
NameValueDirection of FlowDescription
Reserved0ForbiddenReserved
CONNECT1Client To ServerConnection Request
CONNACK2Server To ClientConnection Acknowledgement
PUBLISH3Client To Server Or Server To ClientPublish Message
PUBACK4Client To Server Or Server To ClientPublish Acknowledgement
PUBREC5Client To Server Or Server To ClientPublish Received
PUBREL6Client To Server Or Server To ClientPublish Release
PUBCOMP7Client To Server Or Server To ClientPublish Complete
SUBSCRIBE8Client To ServerSubscribe Request
SUBACK9Server To ClientSubscribe Acknowledgement
UNSUBSCRIBE10Client To ServerUnsubscribe request
UNSUBACK11Server To ClientUnsubscribe Acknowledgement
PINGREQ12Client To ServerPing Request
PINGRESP13Server To ClientPing Response
DISCONNECT14Client To Server Or Server To ClientDisconnect Notification
AUTH15Client To Server Or Server To ClientAuthentication Exchange
Flag Bit:
MQTT Control PacketFixed Header FlagsBit 3Bit 2Bit 1Bit 0
CONNECTReserved0000
CONNACKReserved0000
PUBLISHMQTT v5.0DUPQoS
RETAIN
PUBACKReserved0000
PUBRECReserved0000
PUBRELReserved0000
PUBCOMPReserved0000
SUBSCRIBEReserved0000
SUBACKReserved0000
UNSUBSCRIBEReserved0000
UNSUBACKReserved0000
PINGREQReserved0000
PINGRESPReserved0000
DISCONNECTReserved0000
AUTHReserved0000
可变包头（Variable Header）解析

可变标头组件作为可选字段包含在某些 MQTT 控制数据包类型中。在固定报头和有效载荷之间是这个字段。可变标头的内容由数据包类型决定。在可变报头中可以找到许多数据包类型中常见的数据包标识符字段。数据包标识符字段是一个 2 字节整数，包含在许多 MQTT 控制数据包类型的可变标头组件中。
数据包标识符字段在下面的列表中给出：

PUBLISH
PUBACK
PUBREC
PUBREL
PUBCOMP
SUBSCRIBE
SUBACK
UNSUBSCRIBE
UNSUBACK

数据包标识符字段的特征：

1. 如果 QoS（服务质量）的值设置为零，则 PUBLISH 数据包不应包含数据包标识符字段。这意味着如果 QoS 值大于零，则数据包标识符字段将仅出现在 PUBLISH 数据包中。
2. 客户端在发送新的 SUBSCRIBE、UNSUBSCRIBE 或 PUBLISH MQTT 控制数据包时应分配一个当前未使用的非零数据包标识符。
3. 服务器在发送新的 PUBLISH MQTT 控制数据包时应分配一个当前未使用的非零数据包标识符。
4. PUBACK、PUBREC、PUBUREL、PUBREC是PUBLISH命令确认包，包标识符与PUBLISH包相同
5. SUBACK和UNSUBACK分别是SUBSCRIBE和UNSUBSCRIBE确认包。SUBACK 和 UNSUBACK 数据包与 SUBSCRIBE 和 UNSUBSCRIBE 数据包共享相同的数据包标识符
6. 处理完相应的确认包后，包标识符可以重复使用。下面是一个定义：

A。如果 QoS 设置为 1，则 PUBLISH 的确认包将是 PUBACK。如果处理了 PUBACK，则可以重用 PUBACK 数据包标识符。
B.如果 QoS 值为 2，则 PUBLISH 确认包将是 PUBCOMP 或 PUBREC。

包体(payload)

包体是消息格式中的最后一个 MQTT 控制数据包。该字段保存将要发送的数据。

MQTT Control Packet        Payload
MQTT Control PacketPayload
CONNECTRequired
CONNACKNone
PUBLISHOptional
PUBACKNone
PUBRECNone
PUBRELNone
PUBCOMPNone
SUBSCRIBERequired
SUBACKRequired
UNSUBSCRIBERequired
UNSUBACKRequired
PINGREQNone
PINGRESPNone
DISCONNECTNone
AUTHNone
MQTT5.0新特性

MQTT 协议是当今世界上使用最广泛、最受欢迎的 TCP/IP 物联网协议。毫不奇怪，该协议的广泛采用导致对进一步开发 MQTT 规范的高需求。MQTT 5 试图满足这种需求。在制造系统和物流领域，以及智能家居应用，以及企业物联网应用和移动应用，都是流行的 MQTT v5 用例
MQTT 5.0 版中的新功能旨在实现以下目标：

• 大规模系统性能：现在，数千（如果不是数百万）设备之间的通信更加简化。没有协议约束，但需要 MQTT 5 适当的架构来组织这么多设备。
• 报错：MQTTv5.0协议中的return code改名为reason code，可以指示更大范围的故障。
• 实现了常见的交互：当前版本已经标准化了许多设备相互交互的方式。该系统现在包括定义参与设备的能力以及它们如何响应查询的能力。
• 包括可扩展性机制：现在可以指定自定义属性，以及内容类型或有效负载格式。
• 更好的支持：特别适用于希望使用此最新协议版本来提高工作效率的小型用户。
  

MQTT5和MQTT3有什么不同

MQTT v5.0 是 MQTT 3.1 的继任者。最重要的是，MQTTv5.0 不支持向后兼容性（如 v3.1.1 ）。由于引入了如此多的新项目，因此必须重新审视当前的实施。以下是一些V5和V3不一样的地方：

• Session Expiry Interval 属性可用于实现会话过期。例如，订阅时间可能包含在主题中，以及消息将保留的时间量
• 对MQTT客户端和服务器的限制可以内置最大数据包大小（广播的字节数）和最大接收等限制（客户端或服务器，同时发送的消息数） .
• Will Delay Interval 是一个允许您在计时器上发送消息的属性。
• 服务器重定向或服务器引用是有助于在代理或服务器之间传输数据包的属性。
• Message Expiry Interval 是消息在过期前存储的时间量。
• 有效载荷格式指示符和内容类型——可以使用的有效载荷标志的种类由此属性定义：字节（二进制）、UTF-8 或 MIME 类型。
• 主题别名 – 例如，别名 1 分配给主题。那么这个功能可以通过减少您需要的数据包数量来帮助您。
• 响应主题——当使用响应主题时，该协议的工作方式类似于具有响应-请求方案的 HTTP 协议。
• 非本地发布- 用户可以选择是否要接收来自客户端的消息。
• Retained Message Control – 消息的顺序由该选项控制。
• 订阅标识符，用于标识服务器上的订阅。
• 可以共享的订阅允许具有额外符号和过滤选项的更灵活的订阅。
• 所有 ACK 消息上的原因代码 - 过程中的任何时候都可能发生错误。在 MQTTv3.1.1 中，很少有来自服务器的关于在建立通信、发送消息或订阅主题等各个阶段出了什么问题的信息。
• 服务器断开连接 - 与 3.1 不同，MQTT 5.0 允许从客户端和服务器端发送有关断开连接的数据包。
• 用户属性——键可用于存储各种属性的值。
• 增强型身份验证——查询/响应式身份验证方法的机制，它在客户端和服务器之间执行双向身份验证。
  

对于大多数物联网用例，MQTT 5 规范已成为合乎逻辑的选择。MQTT 5 的新特性成功解决了版本 3 的局限性，同时也为未来的发展开辟了道路。未来几年，协议的采用预计将在所有行业激增，包括工业、汽车、关键基础设施、物流、智慧城市等。MQTT 即将成为连接到物联网的所有事物的行业标准。