音訊品質不佳是很多影片創作者會面臨的問題,通常都需要解決風聲干擾、麥克風位置、人群噪音和其他聲音滋擾引起的音訊問題,只要沒處理好就可能使影片出現遺憾,甚至無法使用。Adobe 推出了「Project Sound Lift」這個由 AI 驅動的技術,可將影片中的收音分隔為不同的音軌,包含語音、非語音和其他背景音等,一鍵式處理,協助用戶輕鬆搞定音訊大小事。
Adobe 釋出全新 AI 音訊工具「Project Sound Lift」預覽,改變語音處理和影片創作流程
Project Sound Lift 由 AdAdobe Research 的語音 AI 研究人員開發,在日本 MAX 舞台上作為 AdAdobe「先睹為快」展示的一部分亮相。雖然先前的音訊 AI 模型通常需要乾淨、獨特的輸入聲音(例如沒有背景噪音或回音的單一揚聲器或聲音),但現實世界的錄音很少滿足這些條件,其中可能包含噪音、混響、多個揚聲器和其他聲音,往往無法全面控制。這種限制阻礙了音訊 AI 在日常錄音中的應用,並使業餘人士很難利用複雜的音訊工具。Project Sound Lift 現在可以將日常生活場景中的語音和環境音分開,包括將語音、掌聲、笑聲、音樂和其他各種噪音分成不同的音軌。每個音軌都可以獨立控制以提高影片的品質和內容。
Project Sound Lift 可以分離影片的重疊聲音並增強最重要的部分。在下面這些範例中,Project Sound Lift 將 AdAdobe 執行長Shantanu Narayen 的介紹語音和主題演講與背景音樂隔離開來,並將 AdAdobe Creative Cloud 主持人 Paul Trani 的聲音與掌聲分開,所有這些操作都只需單擊一下即可做到。
Project Sound Lift 可以同時分離重疊的揚聲器並將其與背景噪音隔離。在公共場合中(在本例中是在繁忙的 Adobe MAX 會議現場)捕捉鏡頭時,這非常有用。透過降低背景揚聲器的音量,同時保持背景的環境聲音,可以清楚地聽到每個攝影機揚聲器的聲音,而不會失去環境感。此外,Project Sound Lift 不僅可以提高音訊品質,它還可以提供充滿樂趣和靈感的創意使用方式。在下面的影片中,Project Sound Lift 將揚聲器的音軌與背景街道噪音分開,並應用語音調製技術,將人聲轉換為類似機器人般不同風格的聲音。
Project Sound Lift 可幫助用戶在各種場景中輕鬆地處理音訊錄音,利用 AI 獨立增強、轉換和控制語音和聲音。Adobe 的「語音增強」技術(目前可在 Premiere Pro 等 Adobe 應用程式中使用)被整合至 Project Sound Lift 中,將進一步改變創作者製作及管理工作室品質的音訊內容的方式。