详解嵌入式设备的文件传输协议

原创 一起学嵌入式 2023-07-07 07:50

扫描关注一起学嵌入式,一起学习,一起成长


在不限于嵌入式的很多工业应用场合,文件传输是非常常见的需求。小到上位机与单片机之间的固件传输过程,大到互联网中从服务器下载文件,再大到地面站到卫星,甚至深空探测器之间的资料传输,比如珍贵的火星照片。

在之前关于单片机 Bootloader 的文章中,详细介绍了如何对设备的APP进行升级。在升级过程中,要将APP文件传输到单片机中,期间需要一个稳定可到的协议,保证传输的文件数据不会出错。

深入浅出讲解单片机的BootLoader(一)

深入浅出讲解单片机的BootLoader(二)

文件传输的根本是协议的设计与实现。而设计一个稳定可靠高效的文件传输协议,是需要一些技巧和智慧的。

本篇文章将详细介绍一些传输协议,最终大家会发现其实它们的基本思想是一样的。

Xmodem协议族

说到文件传输协议,就必须要说 Xmodem,它是所有文件传输协议的鼻祖。

1978 年,一位 IBM 的工程师尝试使用调制解调器来进行文件数据传输,并使其有一定的纠错能力,从而创建了一套协议,命名为 Xmodem。

其基本思想是:发送大小为 128 字节的数据包,如果包成功接收,接收方会返回一个肯定应答信号(ACK);如果发现错误,则返回一个否定应答信号(NAK)并重新发送数据包。Xmodem最初使用奇偶校验作为查错控制的方法。

Xmodem的传输过程

Xmodem 的逻辑很简单,下图为 Xmodem 的文件传输过程示意。

文件数据的传输过程其实就是收发双方交互协商的过程。既然是协商就会有双方遵循的约定,即所谓的协议。

首先是控制字的定义:

 01H
04H
06H
15H
18H

图中已经涉及到了 ACK、NAK 和 EOT,不再赘述。

关于 CAN 的作用是这样的:当接收方发送 CAN 表示无条件结束本次传输过程,发送方收到 CAN 后,无需发送 EOT 来确认,直接停止数据的发送。
然后就是数据包的定义:

  • SOH(Start of Heading),即包头开始字符。

  • 随后第2个字节是包号,它在传输中是依次递增的,需要注意的是,第一包数据的包号从1开始,然后 255->0 循环往复;

  • 第3个字节是包号的按位取反;

  • 4~131字节是128字节的文件分片数据;

  • 最后1个字节是校验和,即128字节数据按字节连加之和。
可以看到,Xmodem每一帧数据都有独立的数据校验,加之它对重传的支持,使得文件传输的正确性得以保障。
一般来说,只要通过 Xmodem 传输成功的文件,数据上是不会出现差错的,也就不需要单独再进行额外的文件校验。
但是实际上我们还是会对接收到的文件整体进行检查,比如通过文件自身的校验码,因为除了传输,差错还可能出现在其它方面,比如存储。
以上所介绍的内容其实是 Xmodem 最原始的形态,在此基础上它又有所改进,甚至衍生出一套协议族。
最直接的一个改进,就是将其数据包的校验和,改为了双字节的 CRC,实际上是换汤不换药,但是它的传输交互过程有一些变化,如图 Xmodem(CRC)的文件传输过程示意。

可以看到,Xmodem 如果使用 CRC 的话,在传输之初接收者是使用字符 ’C’ 来进行握手的,而校验和方式下,则是NAK,即 0X15。
Xmodem 的这一改进,并不是对原来校验和方式的取代,而是补充。也就是说,现行实际 Xmodem 发送者有可能是采用CRC的,也可能是校验和,或者是两者都支持。
这样问题就来了:接收者是用 ’C’ 来握手,还是用 NAK 呢?它决定了数据包的校验方式。
接收者一般是设备端,为了使其更加通用(不挑协议),通常我们会兼顾校验和与CRC两种方式,具体实现方法如图所示。

除了 Xmodem(CRC),Xmodem 的改进还有 Xmodem-1K,顾名思义,它的数据包中分片数据长度为 1KB,目的是提高传输效率。

Ymodem的传输过程

几经改进的 Xmodem,人们给了它一个新的名字,Ymodem。它更加完备而高效,文件传输过程示意如图

可以看到,Ymodem 的传输过程略显复杂,它最显著的特性是增加了启始帧和结束帧,两者的定义如图

数据包中分片数据长度为1KB,其格式定义与 Xmodem不同,如下图所示,它引入了一个新的控制字,即STX,它是数据包的开始字符,值为 0X02。

所以,Ymodem中有两种不同长度的数据帧,以 SOH 开头的数据帧数据长度为 128 字节,以 STX 开头的数据帧数据长度为 1024 字节。
其中启始帧描述了更多的文件信息,包括文件名与文件大小。这一点是比 Xmodem 要完善的。同时,我们注意到Ymodem 是只支持 CRC 校验的,这比 Xmodem 更标准更统一。
Ymodem是现行Xmodem协议族中最流行的版本,在很多的 Bootloader、OTA 等嵌入式方案中都有所应用,比如 RT-Thread 中就用 Ymodem 来实现上位机向其 DFS(设备文件系统)的文件传输。
正所谓改进之心永不死,人们对 Ymodem 也不乏改进,衍生出了 Ymodem-G 版本,它去掉了 CRC 校验,当然这样就不能保证文件传输的正确性了。我也不知道这样算是“改进”还是“改退”,也许它有特定的应用场景吧。

关于Zmodem

前面介绍了 Xmodem 与 Ymodem,它们有一定的继承性,但是 Zmodem 与它们相比完全不是一个量级的东西,要复杂得多。它不是基于发送与应答的机制,而是类似流式传输的一种协议。
关于 Zmodem 我也没有找到比较明确的协议资料,所以并没有深入去研究它。这里我作了一个实验,抓取 Zmodem 实际传输过程中的收发双方的原始串口数据,贴在下面,若有兴趣可以自行研究一下,文件传输收发双方原始串口数据(上发下收)

说明:使用 Xshell 打开两个串口(这两个串口收发相连),使用其中一个串口通过 Zmodem 发送文件 aaaa.txt(此文件内容是123456789),另一个串口接收文件。此过程中,使用串口监控软件记录其原始数据,以待分析。
“Xshell是什么?串口监控软件是哪个?”关于这些工具软件,振南专门安排了一章来进行集中讲解,请关注相应章节。

AVRUBD的传输过程

看过深入浅出讲解单片机的BootLoader的读者就会知道,AVRUBD 是网友 shaoziyang 在实现AVR单片机的通用Bootloade r时所使用的文件传输协议。
严格来说,AVRUBD 并不能算是 Xmodem 协议族中的一员,它只是对 Xmodem 的应用,只不过有些改进,请看图,AVRUBD传输文件的过程:

可以看到,AVRUBD 的主要改进点有:

这些改进点都是为单片机烧录程序服务的:

送你面值100的优惠券,扫码注册或者阅读原文即可获取。


扫码,拉你进高质量嵌入式交流群


关注我【一起学嵌入式】,一起学习,一起成长。


觉得文章不错,点击“分享”、“”、“在看” 呗!

一起学嵌入式 公众号【一起学嵌入式】,RTOS、Linux编程、C/C++,以及经验分享、行业资讯、物联网等技术知
评论
  • 日前,商务部等部门办公厅印发《手机、平板、智能手表(手环)购新补贴实施方案》明确,个人消费者购买手机、平板、智能手表(手环)3类数码产品(单件销售价格不超过6000元),可享受购新补贴。每人每类可补贴1件,每件补贴比例为减去生产、流通环节及移动运营商所有优惠后最终销售价格的15%,每件最高不超过500元。目前,京东已经做好了承接手机、平板等数码产品国补优惠的落地准备工作,未来随着各省市关于手机、平板等品类的国补开启,京东将第一时间率先上线,满足消费者的换新升级需求。为保障国补的真实有效发放,基于
    华尔街科技眼 2025-01-17 10:44 117浏览
  • 晶台光耦KL817和KL3053在小家电产品(如微波炉等)辅助电源中的广泛应用。具备小功率、高性能、高度集成以及低待机功耗的特点,同时支持宽输入电压范围。▲光耦在实物应用中的产品图其一次侧集成了交流电压过零检测与信号输出功能,该功能产生的过零信号可用于精确控制继电器、可控硅等器件的过零开关动作,从而有效减小开关应力,显著提升器件的使用寿命。通过高度的集成化和先进的控制技术,该电源大幅减少了所需的外围器件数量,不仅降低了系统成本和体积,还进一步增强了整体的可靠性。▲电路示意图该电路的过零检测信号由
    晶台光耦 2025-01-16 10:12 95浏览
  • 一个易用且轻量化的UI可以大大提高用户的使用效率和满意度——通过快速启动、直观操作和及时反馈,帮助用户快速上手并高效完成任务;轻量化设计则可以减少资源占用,提升启动和运行速度,增强产品竞争力。LVGL(Light and Versatile Graphics Library)是一个免费开源的图形库,专为嵌入式系统设计。它以轻量级、高效和易于使用而著称,支持多种屏幕分辨率和硬件配置,并提供了丰富的GUI组件,能够帮助开发者轻松构建出美观且功能强大的用户界面。近期,飞凌嵌入式为基于NXP i.MX9
    飞凌嵌入式 2025-01-16 13:15 182浏览
  • 百佳泰特为您整理2025年1月各大Logo的最新规格信息,本月有更新信息的logo有HDMI、Wi-Fi、Bluetooth、DisplayHDR、ClearMR、Intel EVO。HDMI®▶ 2025年1月6日,HDMI Forum, Inc. 宣布即将发布HDMI规范2.2版本。新规范将支持更高的分辨率和刷新率,并提供更多高质量选项。更快的96Gbps 带宽可满足数据密集型沉浸式和虚拟应用对传输的要求,如 AR/VR/MR、空间现实和光场显示,以及各种商业应用,如大型数字标牌、医疗成像和
    百佳泰测试实验室 2025-01-16 15:41 153浏览
  • 80,000人到访的国际大展上,艾迈斯欧司朗有哪些亮点?感未来,光无限。近日,在慕尼黑electronica 2024现场,ams OSRAM通过多款创新DEMO展示,以及数场前瞻洞察分享,全面展示自身融合传感器、发射器及集成电路技术,精准捕捉并呈现环境信息的卓越能力。同时,ams OSRAM通过展会期间与客户、用户等行业人士,以及媒体朋友的深度交流,向业界传达其以光电技术为笔、以创新为墨,书写智能未来的深度思考。electronica 2024electronica 2024构建了一个高度国际
    艾迈斯欧司朗 2025-01-16 20:45 134浏览
  • 近期,智能家居领域Matter标准的制定者,全球最具影响力的科技联盟之一,连接标准联盟(Connectivity Standards Alliance,简称CSA)“利好”频出,不仅为智能家居领域的设备制造商们提供了更为快速便捷的Matter认证流程,而且苹果、三星与谷歌等智能家居平台厂商都表示会接纳CSA的Matter认证体系,并计划将其整合至各自的“Works with”项目中。那么,在本轮“利好”背景下,智能家居的设备制造商们该如何捉住机会,“掘金”万亿市场呢?重认证快通道计划,为家居设备
    华普微HOPERF 2025-01-16 10:22 170浏览
  • 电竞鼠标应用环境与客户需求电竞行业近年来发展迅速,「鼠标延迟」已成为决定游戏体验与比赛结果的关键因素。从技术角度来看,传统鼠标的延迟大约为20毫秒,入门级电竞鼠标通常为5毫秒,而高阶电竞鼠标的延迟可降低至仅2毫秒。这些差异看似微小,但在竞技激烈的游戏中,尤其在对反应和速度要求极高的场景中,每一毫秒的优化都可能带来致胜的优势。电竞比赛的普及促使玩家更加渴望降低鼠标延迟以提升竞技表现。他们希望通过精确的测试,了解不同操作系统与设定对延迟的具体影响,并寻求最佳配置方案来获得竞技优势。这样的需求推动市场
    百佳泰测试实验室 2025-01-16 15:45 221浏览
  • 故障现象 一辆2007款法拉利599 GTB车,搭载6.0 L V12自然吸气发动机(图1),累计行驶里程约为6万km。该车因发动机故障灯异常点亮进厂检修。 图1 发动机的布置 故障诊断接车后试车,发动机怠速轻微抖动,发动机故障灯长亮。用故障检测仪检测,发现发动机控制单元(NCM)中存储有故障代码“P0300 多缸失火”“P0309 气缸9失火”“P0307 气缸7失火”,初步判断发动机存在失火故障。考虑到该车使用年数较长,决定先使用虹科Pico汽车示波器进行相对压缩测试,以
    虹科Pico汽车示波器 2025-01-15 17:30 95浏览
  • 实用性高值得收藏!! (时源芯微)时源专注于EMC整改与服务,配备完整器件 TVS全称Transient Voltage Suppre,亦称TVS管、瞬态抑制二极管等,有单向和双向之分。单向TVS 一般应用于直流供电电路,双向TVS 应用于电压交变的电路。在直流电路的应用中,TVS被并联接入电路中。在电路处于正常运行状态时,TVS会保持截止状态,从而不对电路的正常工作产生任何影响。然而,一旦电路中出现异常的过电压,并且这个电压达到TVS的击穿阈值时,TVS的状态就会
    时源芯微 2025-01-16 14:23 144浏览
  • 数字隔离芯片是现代电气工程师在进行电路设计时所必须考虑的一种电子元件,主要用于保护低压控制电路中敏感电子设备的稳定运行与操作人员的人身安全。其不仅能隔离两个或多个高低压回路之间的电气联系,还能防止漏电流、共模噪声与浪涌等干扰信号的传播,有效增强电路间信号传输的抗干扰能力,同时提升电子系统的电磁兼容性与通信稳定性。容耦隔离芯片的典型应用原理图值得一提的是,在电子电路中引入隔离措施会带来传输延迟、功耗增加、成本增加与尺寸增加等问题,而数字隔离芯片的目标就是尽可能消除这些不利影响,同时满足安全法规的要
    华普微HOPERF 2025-01-15 09:48 177浏览
  • 全球领先的光学解决方案供应商艾迈斯欧司朗(SIX:AMS)近日宣布,与汽车技术领先者法雷奥合作,采用创新的开放系统协议(OSP)技术,旨在改变汽车内饰照明方式,革新汽车行业座舱照明理念。结合艾迈斯欧司朗开创性的OSIRE® E3731i智能LED和法雷奥的动态环境照明系统,两家公司将为车辆内饰设计和功能设立一套全新标准。汽车内饰照明的作用日益凸显,座舱设计的主流趋势应满足终端用户的需求:即易于使用、个性化,并能提供符合用户生活方式的清晰信息。因此,动态环境照明带来了众多新机遇。智能LED的应用已
    艾迈斯欧司朗 2025-01-15 19:00 78浏览
  • 随着智慧科技的快速发展,智能显示器的生态圈应用变得越来越丰富多元,智能显示器不仅仅是传统的显示设备,透过结合人工智能(AI)和语音助理,它还可以成为家庭、办公室和商业环境中的核心互动接口。提供多元且个性化的服务,如智能家居控制、影音串流拨放、实时信息显示等,极大提升了使用体验。此外,智能家居系统的整合能力也不容小觑,透过智能装置之间的无缝连接,形成了强大的多元应用生态圈。企业也利用智能显示器进行会议展示和多方远程合作,大大提高效率和互动性。Smart Display Ecosystem示意图,作
    百佳泰测试实验室 2025-01-16 15:37 160浏览
  • 随着消费者对汽车驾乘体验的要求不断攀升,汽车照明系统作为确保道路安全、提升驾驶体验以及实现车辆与环境交互的重要组成,日益受到业界的高度重视。近日,2024 DVN(上海)国际汽车照明研讨会圆满落幕。作为照明与传感创新的全球领导者,艾迈斯欧司朗受邀参与主题演讲,并现场展示了其多项前沿技术。本届研讨会汇聚来自全球各地400余名汽车、照明、光源及Tier 2供应商的专业人士及专家共聚一堂。在研讨会第一环节中,艾迈斯欧司朗系统解决方案工程副总裁 Joachim Reill以深厚的专业素养,主持该环节多位
    艾迈斯欧司朗 2025-01-16 20:51 106浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦