隨著VR虛擬實境、影像追蹤等技術的進步,運用科技的力量實現真實生活中無法做到的事情也日益增加。HTC攜手韓國文化廣播公司MBC在最新一季《遇見你》節目中將已經過世的 13 歲少年使用 VR 虛擬的方式「復生」,以長大的面貌與父母在之前經常去的海灘等場景互動,再次見證科技之於人性方面的應用與發展。
紀錄片《遇見你》 導入VR及VIVE Mars CamTrack 實現「與逝者重逢之旅」
最新一季《遇見你》透過 VR技術以及 VIVE Mars CamTrack 虛擬製作系統的即時影像追蹤合成技術,將虛擬與現實完美融合,讓觀眾和參與者得以與逝者在虛擬實境中進行互動,也實現VR及虛擬製作技術在紀錄片製作中的創新應用。
由於《遇見你》是以紀錄片的形式呈現,仰賴拍攝參與者在虛擬環境中的體驗,與傳統的戲劇或電影製作方式,有著精心策劃的劇情和腳本不同。為了確保第四季《遇見你》已故主角,13歲就早逝的Seo-Jun,可以與父母在虛擬實境中「真實」互動。因現實中的父母和虛擬Seo-Jun分別位於不同的空間,要如何讓虛擬Seo-Jun知道父母的位置和動作,需使用強大的即時影像合成及動作捕捉技術,方能呈現流暢自然的動作表現。
這部紀錄片展示了使用VR以及MetaHuman技術,讓生命永遠停留在13歲的Seo-Jun,能夠以16歲的模樣,活靈活現地出現在父母面前:
因應這項挑戰,製作團隊PONY Games、特效團隊IOFX以及技術顧問NIEPCE studio透過VIVE Mars CamTrack虛擬製作系統做到精準追蹤,根據實際動作捕捉相對位置,讓虛擬Seo-Jun能對父母的動作、移動和行為做出反應,並將這些真實感受傳遞給觀眾,成功完成了這一創新且艱難的任務。
製作團隊邀請了VR技術團隊和心理諮商專家,特別打造了兩個虛擬場景,包括了記憶中的海灘和漢江公園,也將心理諮詢的元素整合至VR互動設計中,希望能幫助參與者(父母)釋放情緒,並好好告別逝去的親人:
VIVE Mars CamTrack 解決方案能將攝影機追蹤工作整合至一部輕便、隨插即用的模組設備中。在影片拍攝過程中,可將影片後製的工程直接搬至拍攝現場,讓導演及製作團隊可精準掌握畫面,充分發揮創作潛能。此外,節目並使用了HTC 一體機:VIVE XR Elite作為這一季的頭顯裝置。透過VIVE Mars CamTrack虛擬製作解決方案,可將各項技術整合並發揮最大效益。
這類技術如果搭配目前的 AI 技術,相信可以讓還原程度與互動體驗更上層樓,不過這樣是不是會有讓親人反而永遠走不出傷痛的反效果就很難說了,對於韓國MBC合作紀錄片《遇見你》有興趣的朋友可以觀看下面的影片片段: