PDM系列文章之三:sigma-deleta思想应用实践之降帧率算法

原创 嵌入式Lee 2024-05-29 08:01

一. 前言

我们前面分享了两篇文章, 从头脑风暴,纯思想实验出发,引出了PDM以及sigma-deleta的原理。如果读者有心,仔细去回味,思考,可能会举一反三,发现实践中很多场景可以应用类似的思想,其实这是一类问题,一通则百通。

如果没有,那么看完本文, 希望能有。看完你可能会拍案而起,或者激动的拍大腿,这也是本人希望分享技术文章的初衷,希望能让读者读到欲罢不能甚至有激动兴奋的感觉。本文重点还是一如既往的希望授人以渔,而不是单纯的输出一个技术点。

https://mp.weixin.qq.com/s/9Vhe1rUCI8ZGBGGy3todcw PDM系列文章之二:一文搞懂PDM编码基本原理1bit sigma-deleta ADC,

https://mp.weixin.qq.com/s/uuKljd3zPjj-gkrjlvWEbg PDM系列文章之一- 前菜篇,假如来发明我们自己的PDM

二. 降帧问题

这个问题是一个读者私下问我的一个问题,即我们在音视频处理中生产者消费者可能速率不匹配,比如视频采集帧率很快,但是视频编解码可能达不到采集的帧率需要降帧率处理。对于降帧比是整数倍的很好解决,就是指定帧数处理一帧就行,比如输入10FPS需要降帧率到5FPS处理,那么就是每两帧丢掉一帧即可。那么如果不是整数倍数的降帧率呢,比如输出10FPS要按照3FPS处理,算法如何实现?

说实话我之前也没有写过该算法,但是看到这个问题,我一秒钟就想到了我们之前讨论过的PDM的原理。我们还是按照之前文章提出的思路,先抽象,再分析。这个问题题干很简单,简单描述就是对帧率为xFPS的输入,如何挑选丢弃一些帧得到更小的帧率yFPS,当然要保证均匀性。我们进一步抽象,按照之前设计自己的PDM的思路进行,先对输入对象抽象,输入对象就是帧流,我们可以每一帧用1表示,那么输入就是11111的流,而输出是对11111流的挑选是否需要进行处理,如果需要对输入进行处理就输出1,不需要处理就输出0。那么结果就是10的序列编码输出。那么问题就抽象为了如何对输入流11xxxx,通过挑选使得其输出流10xxxxx,满足1均匀分布,且1的比例(密度)正好是指定的倍数。原来1的密度认为是100%,那么降低帧率倍数为x,那么输出的1的密度就是原来的1/x.

我们再来看抽象后的模型不就是我们的PDM编码吗? 1的密度代表帧率,之前引出PDM时是用1的密度代表电压,所以不管是代表电压还是代表帧率还是代表什么妖魔鬼怪,都是一样的问题,对于抽象或者数学上来说就是一个数字。所以再次说明我们之前提出的,解决问题的第一步是抽象这一重要观点。

如果读者看过之前两篇文章,且确实是用心去思考理解过的话,到此为此,应该就要拍大腿,激动的说哦原来如此了,所以实际本文至此就可以结束了。但是我们还是善始善终,还是把整个实现过程分享一下。

三. 算法实现

为了方便编码,我们还是回忆下sigma-deleta的系统框图, 把我们的问题抽象后,映射到模型上,图像化,才能方便实现。

典型的1bit sigam-delta系统框图如下,由一个差分模块(计算本次偏差),积分模块(计算累计误差),和一个比较模块-DAC输出模块(负反馈)组成。如下所示,DAC输出实际是一个开关控制输出,要么输出VREF参考电压,要么输出0,参考电压VREF大于Xi输入电压,开关的控制由比较器决定,比较器的输出由误差的累计决定,也就是说有正向误差则控制DAC输出VREF,此时Xi差分模块的输出就是负数,这样积分器的输出就减小,形成负反馈,也就是控制DAC输出不断开关-开关,使得其PWM输出结果平均值等效于Xi(因为只要有误差就会反向调整),最终收敛或者震荡(平均值收敛)

不说什么高深的概念,四个字就可以说明其核心思想,多退少补! 多了往少的方向调整,少了往多的方向调整。

移植到我们降低帧率的问题来看,DAC的输出即参考电压VREF对应的是输入帧率,需要对其进行不断的开关开关(10xxx序列),最终使得其等效为输出帧率Xi(即待采样电压)

积分器的输出就是实时的误差,DAC的开关序列即帧的挑选序列。

好了有了以上的模型说明,编码其实很简单了

几行就搞定,只需要简单的加减法即可,非常高效

/** * \struct sigma_delta_st * sigma_delta结构体*/typedef struct{    int input;      /**< 输入值(参考值)    */    int output;     /**< 目标值           */    int integrator; /**< 积分器输出        */    int dac;        /**< 比较器输出, 0表示DAC无需输出参考值,1表示DAC需要输出参考值 */} sigma_delta_st;
/** * \fn sigma_delta_init  * 初始化 * \param dev 用户提供的实例, \ref sigma_delta_st * \param input 输入值(参考值) * \param output 目标值*/static void sigma_delta_init(sigma_delta_st* dev, int input, int output){    if(dev == (sigma_delta_st*)0)    {        return;    }    dev->dac = 0;     /**< 初始时DAC无输出,初始积分器偏差为0-output */    dev->integrator = 0-output;    dev->input = input;    dev->output = output; }
/** * \fn sigma_delta_update  * 计算下一步1bit DAC是否输出, 1输出, 0不输出 * 反复调用本函数反复输出10序列,10序列即input的开关序列,其平均效果等效于目标output的值. * \param dev 用户提供的实例, \ref sigma_delta_st * \return 返回1或者0,即DAC的输出开关,1表示输出,0表示不输出*/static int sigma_delta_update(sigma_delta_st* dev){    if(dev == (sigma_delta_st*)0)    {        return 0;    }    /* (偏差)积分值,经过比较器(和0比较),确认偏差的正负方向,然后控制DAC输出反向调整积分值,形成负反馈      * 目标是让积分器的输出趋于0,即偏差趋于0,即差分输入正负输出等效,即output和input的开关序列等效     */    if(dev->integrator > 0)    {        /* 如果积分值大于0, 则DAC使能输出,即输出input           差分输入dev->output-dev->input小于0,使得积分值减小,反向调整积分值         */        dev->dac = 1;        dev->integrator += dev->output-dev->input;      }    else    {        /* 如果积分值小于等于0, 则DAC停止输出,即输出0            差分输入dev->output-0大于0,使得积分值增大,反向调整积分值         */        dev->dac = 0;        dev->integrator += (dev->output-0);    }    return dev->dac;}

.测试

测试代码如下

/** * \fn sigma_delta_test  * 测试函数 * \param[in] input 输入值 * \param[in] input 输出值 * \param[in] pnum  更新次数*/static void sigma_delta_test(int input, int output, int pnum){    sigma_delta_st dev;    sigma_delta_init(&dev, input, output);    printf("\r\n");    while(pnum--)    {        int res = sigma_delta_update(&dev);         printf("%d %d %d\r\n",res,dev.input,dev.integrator);        os_delay(10);    }}

我们实现命令行方便测试

void sdtestfunc(uint8_t* param){  int input;  int output;  int pnum;  if(3 == sscanf((const char*)param, "%*s %d %d %d", &input, &output, &pnum))  {    sigma_delta_test(input,output,pnum);  }}

测试不同的降采样率比例,打印挑选序列

10:8降采样率,第一列为抽取序列1表示输出0表示丢弃,第三列表示当前偏差,可以看到任意5个中有41,正好是10:8

sh>

sdtest 10 8 20

0 10 0

0 10 8

1 10 6

1 10 4

1 10 2

1 10 0

0 10 8

1 10 6

1 10 4

1 10 2

1 10 0

0 10 8

1 10 6

1 10 4

1 10 2

1 10 0

10:3降采样率,第一列为抽取序列1表示输出0表示丢弃,第三列表示当前偏差,可以看到任意10个中有31,正好是10:3

sh>

sdtest 10 3 20

0 10 0

0 10 3

1 10 -4

0 10 -1

0 10 2

1 10 -5

0 10 -2

0 10 1

1 10 -6

0 10 -3

0 10 0

0 10 3

1 10 -4

0 10 -1

0 10 2

1 10 -5

0 10 -2

0 10 1

1 10 -6

0 10 -3

可以看到满足均匀输出,且抽取比例符合需求,当然可能存在偶尔一个窗口内有偏差的情况,因为输出只能是要么输出input要么输出0,颗粒度不是无限小,所以从长期时间平均才能更高精度等效,时间越长精度越高,这也是sigma-deleta ADC精度高但是需要采样时间长的原因,即时间换精度。

我们还是保持刨根问题和发散思维的精神,上述说的是降采样率,那么问题来了,如何升采样率呢,即对低采样率进行插值得到高采样率呢。我们要有逆向思考的思维,升采样率还是一回事,我们就假设知道升采样率后的帧率,然后对其降采样率,那么输出1则表示是使用输入帧,输出0则表示该帧需要插值。

..总结

好的,看到上面是不是还意犹未尽,我们继续思考是不是还可以想到类似的系统?

理想运放?

负反馈系统?

DC-DC?

PID?

等等是不是都是类似的,实际上你在实践中会发现更多类似的系统。

其实我们从哲学的角度来考虑这个问题会更有深刻的认知,中国传统文化其实是提倡中庸之道的,你会发现古人的智慧,其实负反馈就是中庸之道,负反馈系统是真实世界最最常见的系统,为什么呢,因为其中庸之道,多了少点,少了多点,趋于中庸稳定。而正反馈系统,则会一直朝一个方向发散最后失控,就好比宇宙来源于大爆炸,最终肯定还是会坍缩,重复下一次大爆炸, 反复不息....,做人,工作,生活又何尝不是如此呢。

所以以上全文技术点用一句三岁小孩都懂的话来总结,就是多了就少点,少了就多点,所以技术没有什么高深的,原理都很简单,而用一句话让不懂技术的人搞懂,也是评估你是不是真的懂的最好的标准,如果你需要用一大堆高深的术语公式去说明一个技术问题,那么说明你肯定没有真的搞懂。而我们学习一个技术也要思考其背后的思想,甚至从哲学层面去思考,而不是仅仅停留在技术表面。


评论
  • 嘿,咱来聊聊RISC-V MCU技术哈。 这RISC-V MCU技术呢,简单来说就是基于一个叫RISC-V的指令集架构做出的微控制器技术。RISC-V这个啊,2010年的时候,是加州大学伯克利分校的研究团队弄出来的,目的就是想搞个新的、开放的指令集架构,能跟上现代计算的需要。到了2015年,专门成立了个RISC-V基金会,让这个架构更标准,也更好地推广开了。这几年啊,这个RISC-V的生态系统发展得可快了,好多公司和机构都加入了RISC-V International,还推出了不少RISC-V
    丙丁先生 2025-01-21 12:10 1229浏览
  • 飞凌嵌入式基于瑞芯微RK3562系列处理器打造的FET3562J-C全国产核心板,是一款专为工业自动化及消费类电子设备设计的产品,凭借其强大的功能和灵活性,自上市以来得到了各行业客户的广泛关注。本文将详细介绍如何启动并测试RK3562J处理器的MCU,通过实际操作步骤,帮助各位工程师朋友更好地了解这款芯片。1、RK3562J处理器概述RK3562J处理器采用了4*Cortex-A53@1.8GHz+Cortex-M0@200MHz架构。其中,4个Cortex-A53核心作为主要核心,负责处理复杂
    飞凌嵌入式 2025-01-24 11:21 293浏览
  • 不让汽车专美于前,近年来哈雷(Harley-Davidson)和本田(Honda)等大型重型机车大厂的旗下车款皆已陆续配备车载娱乐系统与语音助理,在路上也有越来越多的普通机车车主开始使用安全帽麦克风,在骑车时透过蓝牙连线执行语音搜寻地点导航、音乐播放控制或免持拨打接听电话等各种「机车语音助理」功能。客户背景与面临的挑战以本次分享的客户个案为例,该客户是一个跨国车用语音软件供货商,过往是与车厂合作开发前装车机为主,且有着多年的「汽车语音助理」产品经验。由于客户这次是首度跨足「机车语音助理」产品,因
    百佳泰测试实验室 2025-01-24 17:00 194浏览
  •     IPC-2581是基于ODB++标准、结合PCB行业特点而指定的PCB加工文件规范。    IPC-2581旨在替代CAM350格式,成为PCB加工行业的新的工业规范。    有一些免费软件,可以查看(不可修改)IPC-2581数据文件。这些软件典型用途是工艺校核。    1. Vu2581        出品:Downstream     
    电子知识打边炉 2025-01-22 11:12 465浏览
  • 故障现象 一辆2007款日产天籁车,搭载VQ23发动机(气缸编号如图1所示,点火顺序为1-2-3-4-5-6),累计行驶里程约为21万km。车主反映,该车起步加速时偶尔抖动,且行驶中加速无力。 图1 VQ23发动机的气缸编号 故障诊断接车后试车,发动机怠速运转平稳,但只要换挡起步,稍微踩下一点加速踏板,就能感觉到车身明显抖动。用故障检测仪检测,发动机控制模块(ECM)无故障代码存储,且无失火数据流。用虹科Pico汽车示波器测量气缸1点火信号(COP点火信号)和曲轴位置传感器信
    虹科Pico汽车示波器 2025-01-23 10:46 323浏览
  • 高速先生成员--黄刚这不马上就要过年了嘛,高速先生就不打算给大家上难度了,整一篇简单但很实用的文章给大伙瞧瞧好了。相信这个标题一出来,尤其对于PCB设计工程师来说,心就立马凉了半截。他们辛辛苦苦进行PCB的过孔设计,高速先生居然说设计多大的过孔他们不关心!另外估计这时候就跳出很多“挑刺”的粉丝了哈,因为翻看很多以往的文章,高速先生都表达了过孔孔径对高速性能的影响是很大的哦!咋滴,今天居然说孔径不关心了?别,别急哈,听高速先生在这篇文章中娓娓道来。首先还是要对各位设计工程师的设计表示肯定,毕竟像我
    一博科技 2025-01-21 16:17 241浏览
  • 项目展示①正面、反面②左侧、右侧项目源码:https://mbb.eet-china.com/download/316656.html前言为什么想到要做这个小玩意呢,作为一个死宅,懒得看手机,但又想要抬头就能看见时间和天气信息,于是就做个这么个小东西,放在示波器上面正好(示波器外壳有个小槽,刚好可以卡住)功能主要有,获取国家气象局的天气信息,还有实时的温湿度,主控采用ESP32,所以后续还可以开放更多奇奇怪怪的功能,比如油价信息、股票信息之类的,反正能联网可操作性就大多了原理图、PCB、面板设计
    小恶魔owo 2025-01-25 22:09 615浏览
  •  万万没想到!科幻电影中的人形机器人,正在一步步走进我们人类的日常生活中来了。1月17日,乐聚将第100台全尺寸人形机器人交付北汽越野车,再次吹响了人形机器人疯狂进厂打工的号角。无独有尔,银河通用机器人作为一家成立不到两年时间的创业公司,在短短一年多时间内推出革命性的第一代产品Galbot G1,这是一款轮式、双臂、身体可折叠的人形机器人,得到了美团战投、经纬创投、IDG资本等众多投资方的认可。作为一家成立仅仅只有两年多时间的企业,智元机器人也把机器人从梦想带进了现实。2024年8月1
    刘旷 2025-01-21 11:15 995浏览
  • 随着AI大模型训练和推理对计算能力的需求呈指数级增长,AI数据中心的网络带宽需求大幅提升,推动了高速光模块的发展。光模块作为数据中心和高性能计算系统中的关键器件,主要用于提供高速和大容量的数据传输服务。 光模块提升带宽的方法有两种:1)提高每个通道的比特速率,如直接提升波特率,或者保持波特率不变,使用复杂的调制解调方式(如PAM4);2)增加通道数,如提升并行光纤数量,或采用波分复用(CWDM、LWDM)。按照传输模式,光模块可分为并行和波分两种类型,其中并行方案主要应用在中短距传输场景中成本
    hycsystembella 2025-01-25 17:24 473浏览
  • 书接上回:【2022年终总结】阳光总在风雨后,启航2023-面包板社区  https://mbb.eet-china.com/blog/468701-438244.html 总结2019,松山湖有个欧洲小镇-面包板社区  https://mbb.eet-china.com/blog/468701-413397.html        2025年该是总结下2024年的喜怒哀乐,有个好的开始,才能更好的面对2025年即将
    liweicheng 2025-01-24 23:18 350浏览
  • 临近春节,各方社交及应酬也变得多起来了,甚至一月份就排满了各式约见。有的是关系好的专业朋友的周末“恳谈会”,基本是关于2025年经济预判的话题,以及如何稳定工作等话题;但更多的预约是来自几个客户老板及副总裁们的见面,他们为今年的经济预判与企业发展焦虑而来。在聊天过程中,我发现今年的聊天有个很有意思的“点”,挺多人尤其关心我到底是怎么成长成现在的多领域风格的,还能掌握一些经济趋势的分析能力,到底学过哪些专业、在企业管过哪些具体事情?单单就这个一个月内,我就重复了数次“为什么”,再辅以我上次写的:《
    牛言喵语 2025-01-22 17:10 494浏览
  • 前篇文章中『服务器散热效能不佳有解吗?』提到气冷式的服务器其散热效能对于系统稳定度是非常重要的关键因素,同时也说明了百佳泰对于散热效能能提供的协助与服务。本篇将为您延伸说明我们如何进行评估,同时也会举例在测试过程中发现的问题及改善后的数据。AI服务器的散热架构三大重点:GPU导风罩:尝试不同的GPU导风罩架构,用以集中服务器进风量,加强对GPU的降温效果。GPU托盘:改动GPU托盘架构,验证出风面积大小对GPU散热的影想程度。CPU导风罩:尝试封闭CPU导风罩间隙,集中风流,验证CPU降温效果。
    百佳泰测试实验室 2025-01-24 16:58 189浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦