【技术】还在抱怨听不清电视对白?DTS Clear Dialogue让AI来帮你

文摘   2024-10-24 17:11   广东  




无论是欣赏电影大片,还是观看赛事直播,你肯定遇到过这样的情形:瞬间爆发的环境音“压”过了对白,又或是球迷们意外的欢呼让你根本来不及反应,刚刚主播说过什么?很显然,DTS也意识到了这个问题,推出了新的设备端解决方案,即利用AI音频处理技术来提升电视音频中对白的清晰度……不久前的IFA上,DTS Clear Dialogue首度出现在了公众面前。

不清电视对白是种怎样的体验?

音频技术持续得到进化,从单声道、立体声到沉浸式环绕声。我们热衷于讨论多声道,但不要忘记一件事,即很多人依然在使用电视机内置喇叭作为声音还原的唯一渠道。因此不要对“怎么还会听不清对白”这个话题表示莫名,它是真实存在的。
影响对白清晰度的原因很有多:电影制作时,导演或混音工程师过于偏重音效处理,像是Christopher Nolan导演的《Tenet/信条》,过于抽象的重音或极其响亮的枪声;环绕声电影强制降频到2.0时,原有环绕效果或其他音效在某一刻也会影响对白的重播;直播赛事更甚,因为“变幻莫测”的声音太多了,瞬间“爆燃”的球迷欢呼声就完全有可能压制了主播的解说声,万一后者此刻同样非常激动,说得过快或拖音、含糊不清时,就更“雪上加霜”了(不巧的是,两者共同出现的几率非常高)。

听不清对白,是观众经常会遭遇到的情境

DTS母公司Xperi为此对1200名美国成年人进行了一项调查:84%的受访者在观看电视节目和电影时遇到过难以理解对话的问题;超过79%的受访者表示,他们会选择使用字幕,这其中的30%(约占整体受访者的24%)则进一步表示,他们会经常或始终打开字幕。
要进一步论证这一点,我们可以关注下几乎所有的电视机品牌,宣传时都会提到的概念——对白增强。无论它们“发明”了何种花狸狐哨的“称谓”,真实目的都只有一个,让电视观众能够听清对白。
这一切都需要有一项技术,来增强对白(主要是中频)。过往的做法,是在EQ上提升中频,附加其它一些算法。AI时代,如何动态地实现对白清晰度,早晚都会被提到议事日程上来。
什么是DTS Clear Dialogue?
到截稿时为止,DTS没有为这项技术发布中文译名,我们暂且理解为“DTS清晰对话”技术。
基于AI的对白分离技术
DTS官网上,他们表示:DTS Clear Dialogue是基于AI的音频处理解决方案,可提高电视观众对口语的理解。这是一项持续30多年音频创新后开发的、设备端的解决方案,可以识别、分离和增强对话,以提高清晰度并提供可定制的音频体验。DTS没有公布具体技术细节,只是强调它能非常容易地集成到现有电视系统中。考虑到这项技术从发布到本文截稿,不过才半个月的时间,因此有待未来持续的关注。
就我的个人观点而言,本质上来说,它就是使用AI和机器学习来识别音频中呈现的不同元素,然后分离出对话部分,加以单独处理,包括增强对话,使其与混音的其余部分分开。因此,从技术形态上来说,大胆推测会是以软件方式,甚至是固件升级的形式,逐步植入到电视机中。
让AI来解决如何“清晰对话”
每个人都能进行个性化设置
与此同时,DTS Clear Dialogue宣称允许观众进行更加个性化的设置。比如调整对白输出的音量,来对应自己的聆听需求;又或者是灵活地控制对话相对于其他混音元素的突出度和清晰度。甚至说家庭中的每个人,都可以自定义DTS Clear Dialogue。毕竟,不同家庭成员的听力水平是不一样的,尤其是看电视这种涉及到全家老少的娱乐活动。何况,你还无法排除家庭中听力障碍观众的存在。这样的个性化设置,显然会特别方便。不过换句话来说,也有可能绝大多数观众未必需要这种个性化的处理,很多时候他们更期望是简单的Open/Close选择。
个性化定制专属的Clear Dialogue
所有语言和节目源皆适用
更有意思的是,DTS宣布这项技术是基于深度学习模型完成的,因此对语言,或者说语种有着很强的包容性。即AI的训练并非针对某一特定语言(这让我想到iPhone 16对AI的支持仍然存在着语言上的缺陷)。因此,所有节目源都适用于这项AI技术,包括电影、电视节目、体育赛事,当然也包括流媒体服务和网络广播提供的实况(Live)节目。
回到前面提到的话题,即大多数电视机品牌也有对白增强功能,那么这两者间会有什么区别?Xperi首席产品和服务官Geir Skaaden在IFA上回答记者提问时就表示:“迄今为止,仅仅通过缓解音频后处理方案的局限性并未解决跨语言、内容和环境之间复杂的潜在问题,也无法顾及每位观众的个性化需求。”在他看来,DTS Clear Dialogue为此更进了一步,而且可以适用到不同品牌和性能的电视机上。相对电视品牌将相关功能主要投注到高端型号上的做法,DTS的举措显然想要触及普罗大众。
不过到目前为止,DTS没有确认哪些电视品牌或具体机型获得了DTS Clear Dialogue认证,还需假以时日来做进一步的了解。
适用所有语言和节目源
效果到底如何,让听过的人现身说法
由于DTS只在IFA上做过演示,因此我们在这里就分享两位外媒作者的评论。
《What HiFi?》作者Lewis Empson表示,他对这些功能本身抱持怀疑态度,因为更关心该如何保留“导演意图”。他尝试调整遥控器音量键,以便让更多背景噪音加入,来影响对白和其它环境音的平衡。在他看来,如果将效果调至极致时,会觉得DTS Clear Dialogue“过于霸道”了,反之有助于重新引入所需的环境效果。至于“忠实于导演意图”,他的说法有一定的可比照性:相对使用OLED电视和环绕声系统的发烧友,使用老式液晶电视内置(低质量)音响的观众,基数要大得多,他们更关心的,是如何享受内容,即使为此牺牲真实性来提高清晰度。而且,由于它对老年人和听力障碍人士更友善,因此Lewis Empson认为这仍是个受欢迎的功能,至少“个性化设置”是如此。
网媒Techradar的作者Hamish Hector分享了自己试听的两个片段:《The Martian/火星救援》中Matt Damon被风暴吹走的场景,启动DTS Clear Dialogue后,他可以听清宇航员们通过宇航服中的通讯设备互相交谈的内容,即使是在混乱嘈杂的环境中;环法自行车赛事片段里,DTS Clear Dialogue巧妙将主播的评论与观众的闲聊和欢呼声区分开来,令前者的讲话更容易听清,同时又保留了观众喧闹给赛事营造的氛围。
至于确切效果会如何?我们期待DTS Clear Dialogue能快速进入电视机市场,并且有机会实际试听。



【影音中国  hdavchina.com


微信公众平台回复“网站”或点击文末“阅读原文”,即可快速进入影音中国网手机版, 最新影音资讯一睹为快!

戳原文,更有料!

影音CN
家庭影院技术/影音中国历经25载,含杂志、网站、新媒体、展会、培训、协会;厂商、行业资源丰富。THX、ISF、CEDIA、HAA培训15年学员8000人次;10届影音集成展;数十场500人峰会;成立客厅影院联盟。
 最新文章