無論是欣賞電影大片,還是觀看賽事直播,你肯定遇到過這樣的情形:瞬間爆發的環境音“壓”過了對白,又或是球迷們意外的歡呼讓你根本來不及反應,剛剛主播說過什么?很顯然,DTS也意識到了這個問題,推出了新的設備端解決方案,即利用AI音頻處理技術來提升電視音頻中對白的清晰度……不久前的IFA上,DTS Clear Dialogue首度出現在了公眾面前。
聽不清電視對白是種怎樣的體驗?
音頻技術持續得到進化,從單聲道、立體聲到沉浸式環繞聲。我們熱衷于討論多聲道,但不要忘記一件事,即很多人依然在使用電視機內置喇叭作為聲音還原的唯一渠道。因此不要對“怎么還會聽不清對白”這個話題表示莫名,它是真實存在的。
影響對白清晰度的原因很有多:電影制作時,導演或混音工程師過于偏重音效處理,像是Christopher Nolan導演的《Tenet/信條》,過于抽象的重音或極其響亮的槍聲;環繞聲電影強制降頻到2.0時,原有環繞效果或其他音效在某一刻也會影響對白的重播;直播賽事更甚,因為“變幻莫測”的聲音太多了,瞬間“爆燃”的球迷歡呼聲就完全有可能壓制了主播的解說聲,萬一后者此刻同樣非常激動,說得過快或拖音、含糊不清時,就更“雪上加霜”了(不巧的是,兩者共同出現的幾率非常高)。
聽不清對白,是觀眾經常會遭遇到的情境
DTS母公司Xperi為此對1200名美國成年人進行了一項調查:84%的受訪者在觀看電視節目和電影時遇到過難以理解對話的問題;超過79%的受訪者表示,他們會選擇使用字幕,這其中的30%(約占整體受訪者的24%)則進一步表示,他們會經常或始終打開字幕。
要進一步論證這一點,我們可以關注下幾乎所有的電視機品牌,宣傳時都會提到的概念——對白增強。無論它們“發明”了何種花貍狐哨的“稱謂”,真實目的都只有一個,讓電視觀眾能夠聽清對白。
這一切都需要有一項技術,來增強對白(主要是中頻)。過往的做法,是在EQ上提升中頻,附加其它一些算法。AI時代,如何動態地實現對白清晰度,早晚都會被提到議事日程上來。
什么是DTS Clear Dialogue?
到截稿時為止,DTS沒有為這項技術發布中文譯名,我們暫且理解為“DTS清晰對話”技術。
基于AI的對白分離技術
DTS官網上,他們表示:DTS Clear Dialogue是基于AI的音頻處理解決方案,可提高電視觀眾對口語的理解。這是一項持續30多年音頻創新后開發的、設備端的解決方案,可以識別、分離和增強對話,以提高清晰度并提供可定制的音頻體驗。DTS沒有公布具體技術細節,只是強調它能非常容易地集成到現有電視系統中。考慮到這項技術從發布到本文截稿,不過才半個月的時間,因此有待未來持續的關注。
就我的個人觀點而言,本質上來說,它就是使用AI和機器學習來識別音頻中呈現的不同元素,然后分離出對話部分,加以單獨處理,包括增強對話,使其與混音的其余部分分開。因此,從技術形態上來說,大膽推測會是以軟件方式,甚至是固件升級的形式,逐步植入到電視機中。
讓AI來解決如何“清晰對話”
每個人都能進行個性化設置
與此同時,DTS Clear Dialogue宣稱允許觀眾進行更加個性化的設置。比如調整對白輸出的音量,來對應自己的聆聽需求;又或者是靈活地控制對話相對于其他混音元素的突出度和清晰度。甚至說家庭中的每個人,都可以自定義DTS Clear Dialogue。畢竟,不同家庭成員的聽力水平是不一樣的,尤其是看電視這種涉及到全家老少的娛樂活動。何況,你還無法排除家庭中聽力障礙觀眾的存在。這樣的個性化設置,顯然會特別方便。不過換句話來說,也有可能絕大多數觀眾未必需要這種個性化的處理,很多時候他們更期望是簡單的Open/Close選擇。
個性化定制專屬的Clear Dialogue
所有語言和節目源皆適用
更有意思的是,DTS宣布這項技術是基于深度學習模型完成的,因此對語言,或者說語種有著很強的包容性。即AI的訓練并非針對某一特定語言(這讓我想到iPhone 16對AI的支持仍然存在著語言上的缺陷)。因此,所有節目源都適用于這項AI技術,包括電影、電視節目、體育賽事,當然也包括流媒體服務和網絡廣播提供的實況(Live)節目。
回到前面提到的話題,即大多數電視機品牌也有對白增強功能,那么這兩者間會有什么區別?Xperi首席產品和服務官Geir Skaaden在IFA上回答記者提問時就表示:“迄今為止,僅僅通過緩解音頻后處理方案的局限性并未解決跨語言、內容和環境之間復雜的潛在問題,也無法顧及每位觀眾的個性化需求。”在他看來,DTS Clear Dialogue為此更進了一步,而且可以適用到不同品牌和性能的電視機上。相對電視品牌將相關功能主要投注到高端型號上的做法,DTS的舉措顯然想要觸及普羅大眾。
不過到目前為止,DTS沒有確認哪些電視品牌或具體機型獲得了DTS Clear Dialogue認證,還需假以時日來做進一步的了解。
適用所有語言和節目源
效果到底如何,讓聽過的人現身說法
由于DTS只在IFA上做過演示,因此我們在這里就分享兩位外媒作者的評論。
《What HiFi?》作者Lewis Empson表示,他對這些功能本身抱持懷疑態度,因為更關心該如何保留“導演意圖”。他嘗試調整遙控器音量鍵,以便讓更多背景噪音加入,來影響對白和其它環境音的平衡。在他看來,如果將效果調至極致時,會覺得DTS Clear Dialogue“過于霸道”了,反之有助于重新引入所需的環境效果。至于“忠實于導演意圖”,他的說法有一定的可比照性:相對使用OLED電視和環繞聲系統的發燒友,使用老式液晶電視內置(低質量)音響的觀眾,基數要大得多,他們更關心的,是如何享受內容,即使為此犧牲真實性來提高清晰度。而且,由于它對老年人和聽力障礙人士更友善,因此Lewis Empson認為這仍是個受歡迎的功能,至少“個性化設置”是如此。
網媒Techradar的作者Hamish Hector分享了自己試聽的兩個片段:《The Martian/火星救援》中Matt Damon被風暴吹走的場景,啟動DTS Clear Dialogue后,他可以聽清宇航員們通過宇航服中的通訊設備互相交談的內容,即使是在混亂嘈雜的環境中;環法自行車賽事片段里,DTS Clear Dialogue巧妙將主播的評論與觀眾的閑聊和歡呼聲區分開來,令前者的講話更容易聽清,同時又保留了觀眾喧鬧給賽事營造的氛圍。
至于確切效果會如何?我們期待DTS Clear Dialogue能快速進入電視機市場,并且有機會實際試聽。