广告

如何用声音感动人?学学这家为人类音频事业操碎了心的机构

2016-09-29 23:00:00 邵乐峰 阅读:
首个主流MPEG音频编解码器是诞生于1998年的mp3,此后的16年间,业界又陆续开发和制定了包括AAC、HE-AAC/HE-AACv2、MPEG Surround、HE-AAC等在内的多个音频编解码器,而这些音频标准的幕后英雄……
广告

音频编解码器是现代媒体系统的基础核心之一。没有音频编解码器,就不会有现在的数字广播、流媒体服务及音乐发行。首个主流MPEG音频编解码器是诞生于1998年的mp3,此后的16年间,业界又陆续开发和制定了包括AAC、HE-AAC/HE-AACv2、MPEG Surround、HE-AAC等在内的多个音频编解码器,极大的改变了我们消费媒体的方式。
Fraunhofer IIS亚太区市场及业务拓展总监Toni Fiedler
Fraunhofer IIS亚太区市场及业务拓展总监Toni Fiedler

而这些音频标准的幕后英雄,则是欧洲一家为人类音频和多媒体效果操碎了心的研究机构Fraunhofer IIS。日前,在2016年中国国际信息通信展览会上,他们又展示了能够带来全高清语音通话质量的下一代3GPP VoLTE编解码器EVS,以及为VR设备带来最佳沉浸式声音体验的音频制作工具、Fraunhofer Cingo和MPEG-H等多项技术。

增强型语音服务(EVS)开启全球商用进程

增强型语音服务(EVS)是全新3GPP VoLTE编解码器,由包括Fraunhofer IIS、华为、中兴、爱立信、诺基亚、三星、NTT、Orange、高通等在内的12家企业联合开发。3GPP在2014年9月将EVS技术标准化,此后,EVS成为GSMA SWB VoLTE的指定音频编解码器。EVS主要适用于VoLTE,但也同时适用于VoWiFi和固定网络电话VoIP,由于具备高效的抗干扰防丢包功能,EVS能够在窄带、宽带、超宽带和全带宽条件下为语音通话、背景音以及混合内容带来最佳音质。
20160929-Fraunhofer-IIS-1
得益于支持至多20 kHz的音频带宽,EVS能够为通话者带来诸如面对面沟通般的语音通话质量,其通话效果显著超过普通和高清语音通话。此外,EVS还具备丰富的功能,例如精密的丢帧隐藏机制、通道感知模式以及先进的抖动缓冲管理系统。因此,EVS能够在手机信道拥堵时提供强大的纠错能力。

20160929-Fraunhofer-IIS-2 20160929-Fraunhofer-IIS-3 20160929-Fraunhofer-IIS-4

全球首个支持EVS技术的运营商是T-Mobile US。该运营商于四月初首次发布引进该技术,并为用户提升网络体验的信息。T-Mobile表示,即使通话对方没有使用集成了EVS技术的手机,T-Mobile的EVS手机用户仍能够享受到增强的语音和通话质量,运营商承诺提供在Wi-Fi和LTE网络下的通用交付并且全面改善语音通话的可靠性。

继T-Mobile USA宣布EVS的商用后,日本运营商NTT DoCoMo和德国运营商Vodafone也先后宣布了在其VoLTE服务中采用EVS技术。“EVS所带来语音和背景音质量,显著优于目前中国移动在VoLTE服务中采用的AMR-WB技术,其全高清语音的通话质量可以与当今数字媒体服务相媲美。”根据Fraunhofer IIS音频及多媒体部门市场传播经理Mandy Garcia的介绍,中国移动、电信、联通目前也正在与Fraunhofer IIS进行密切沟通。

而在智能手机与芯片组方面,目前,高通骁龙430,435,617,625,650,652和820已经支持EVS;Intel, CEVA, Cadence, Mediatek即将推出支持EVS的芯片产品。而支持EVS手机设备已经包括乐Max Pro, 小米5, 三星Galaxy S6, S6 edge, S7, S7 edge, Note 5, LG G5, 索尼Xperia X Performance, HTC One M10, HP Elite X3, Vivo Xplay5等。

用声音感动VR用户

VR/AR等HMD产品硬件通常由显示屏、处理器、传感器、摄像头、无线连接和存储电池组成。就Oculus Rift和HTC Vive VR这两款产品来说,它们两者的硬件要求是相当类似的:需要在2160x1200分辨率上,始终保持每秒90帧的帧数,无丢帧。这两家制造商建议用户至少使用一张Radeon R9 290显卡或更高性能的GPU搭配至少i5等级CPU以保持上述FPS。

但什么样的技术能够将音乐和电影音效的氛围和震撼体验带给VR用户呢?“这是个好问题。”Fraunhofer IIS亚太区市场及业务拓展总监Toni Fiedler说,目前大量移动和VR设备厂商只关注CPU核数、视频和屏幕分辨率,却对音频效果置若罔闻,结果导致要么无法提供身临其境的环绕声效,要么使用了低质量的扬声器和耳机,从而产生狭隘的立体声音场、差强人意的声音质量、不自然的声音色彩和不足的低音。

Fraunhofer IIS此番为VR设备商带来了完整的端到端VR音频解决方案,包括:内容制作(3D声音捕获工具,电影及广播电视VR)、内容传递(当前的立体声和环绕声解决方案HE-AAC、下一代沉浸式3D音频编解码器MPEG-H)、以及为VR应用带来的沉浸式音频内容还放和渲染解决方案Fraunhofer Cingo。

其中,Cingo技术能够为VR设备和应用带来身临其境的真实感和沉浸式音效,观众凭借耳机并配合头部运动,就可在三维空间中还放3D声音效果。作为一款即用软件,Fraunhofer Cingo目前已在LG 360 VR、Alcatel VISION VR、三星Gear VR/Milk VR/VR Gallery等设备中得到了使用;而MPEG-H音频标准则是Cingo 3D音频还放的最佳拍档,它能够在虚拟环境中使用2D环绕声的传输比特率为移动设备传递沉浸式3D声音。此外,MPEG-H还能够支持声道、音频对象和高阶高保真信号。

为什么沉浸式声音对虚拟现实设备如此重要?“因为音频能够营造出至少50%的虚拟现实体验。”在Toni Fiedler看来,VR设备音视频之间脱节问题非常值得关注—如果声音画面不匹配,那么虚拟效果瞬间消失;反之,如果声音处理得当,用户就能够真正领略身临其境的虚拟现实体验。

“沉浸式声音支持全新的叙述方式,是能够在虚拟环境中引导客户的。”他说,尽管H.265和HE-AAC成为当前主流编解码已是不争的事实,但“我们的眼光还要看的再远一些”,这就是推出MPEG-H标准的初衷。

本文为《电子工程专辑》原创,版权所有,谢绝转载

EETC wechat barcode


关注最前沿的电子设计资讯,请关注“电子工程专辑微信公众号”。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
邵乐峰
ASPENCORE 中国区首席分析师。
  • 高压放大器在力-电耦合作用下材料压电系数研究中的应用   实验名称:力-电耦合作用下铁电材料的性能研究   测试设备:高压放大器、信号发生器、A/D采集卡、应变仪、压电陶瓷等。  
  • 宇树推出人形机器人首个应用方案 “为赛事打造的足球巨星”文|网络1月22日,宇树科技在官网更新了G1人形机器人首个应用方案——UnitreeG1-Comp,该机器人被官方称为“为赛事打造的足球巨星”。G1-Comp不仅能在足球场上奔
  • 【光电通信】光纤接头类型大全(动态多图)! 今日光电     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光引未来...欢迎来到今日光电!----追光逐电 光引未来----光纤连接器是通用的无源器
  • 微软被特朗普的AI计划排挤了? 星际之门AI计划中,OpenAI、软银、甲骨文联合出资,微软、英伟达、Arm则仅作为技术合作伙伴。作者 | 马兰特朗普周二宣布的星际之门AI计划,催动美股科技业再次狂欢。然而不少投资人疑惑发问:微软这
  • 【光电智造】使用OpenCV实现摄像头测距 今日光电     有人说,20世纪是电的世纪,21世纪是光的世纪;知光解电,再小的个体都可以被赋能。追光逐电,光引未来...欢迎来到今日光电!----追光逐电 光引未来----摄像头测距就是计算照片中
  • “星际之门”即将落地:面临未知与风险的“AI曼哈顿计划” 当地时间2025年1月21日,美国总统特朗普紧急宣布,OpenAI、软银、甲骨文将共同创建名为“星际之门”的合资企业,未来四年将投资5000亿美元建设人工智能基础设施。这是特朗普上任后公布的第一个项目
  • 亏亏亏!“AI四小龙”谁将留在牌桌上? AI2.0时代群雄环伺,有厂商称尚未盈利亦是竞争加剧所致,“四小龙”们积极求变。作者 | 付静2025年开年,AI领域竞争升级,相比当下资本更为青睐的大模型新兴企业,人工智能1.0阶段曾“无限风光”的
  • 幄肯科技:发力8英寸SiC技术,碳纤维保温毡助力产业突破 回顾2024年,碳化硅和氮化镓行业在多个领域取得了显著进步,并经历了重要的变化。展望2025年,行业也将面临新的机遇和挑战。为了更好地解读产业格局,探索未来的前进方向,行家说三代半与行家极光奖联合策划
  • 电竞赛道,红魔为什么还在坚持深耕? 从全球电竞手机 NO.1红魔发力路线来看,其目标不仅是电竞手机,而是成为电竞装备领先品牌,更是助力电竞行业生态繁荣重要一环。  作者|贺谭鸣 编辑|Cindy1973年4月,人类使用手机打通了第一个电
  • Aigtek电压放大器都被用在哪些领域   电压放大器是电子电路中一种重要的器件,其主要功能是将输入电压信号放大到更高的电压水平,通常用来增强信号的幅度和功率。电压放大器在各种领域都有广泛的应用,包括通信、音频、医疗、工
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了