北京冬奧會開幕式實時特效團隊負責人童雷：創(chuàng)意源自冰面倒影，實現(xiàn)世界首創(chuàng)

2月4日晚舉行的北京2022年冬奧會開幕式上，鋪滿全場的LED地面屏幕顯示交互技術(shù)震撼全場。

在《雪花》環(huán)節(jié)，小演員們雙手舉著“和平鴿”，隨著腳步的移動，腳下“盛開”一朵朵晶瑩潔白的雪花。

北京電影學院聲音學院院長童雷介紹，在超過一萬平方米的場地上，對將近700個演員，進行實時捕捉和實時效果的跟蹤和呈現(xiàn)，在大規(guī)模文藝演出的開閉幕式場合采用這樣的嘗試，還是世界首創(chuàng)。

實時交互創(chuàng)意來源于冰面倒影

新京報：地面屏幕如何實現(xiàn)“如影隨形”效果？

童雷：地面LED特效“如影隨形”的秘訣包含兩部分技術(shù)。

首先，基于人工智能的運動分析實時捕捉技術(shù)，通過視頻攝像機識別出演員，將信息傳遞給下一系統(tǒng)。第二個系統(tǒng)則由北京電影學院負責，通過實時交互引擎獲取信息，按照導演的美術(shù)創(chuàng)意需求，生成需要的效果，無延時地呈現(xiàn)在演員腳下。在觀眾看來就實現(xiàn)了腳下特效“如影隨形”的效果。

新京報：這一創(chuàng)意的來源是什么？

童雷：半年前，張藝謀導演有個初步的想法：能不能在地屏上實現(xiàn)冰面倒影的效果？我們接到需求后做了很多論證研究，從冰面倒影的物理性出發(fā)初步實現(xiàn)這一效果，但那時的算法比較初級，有一定延時，能承載的演員數(shù)量也有限。

在導演創(chuàng)意過程中，我們發(fā)現(xiàn)可能還有更多效果需求，于是做出了流光溢彩、極光、推散雪花、推散云霧等十幾種效果，把方案給導演，由他根據(jù)整體設計選擇相應效果。這個過程中有非常多的磨合，不僅是科技的考量，而且是將科技作為手段展現(xiàn)藝術(shù)的形式。

這樣的效果不是靠先期制作或精準排練就能實現(xiàn)的，完全依賴技術(shù)手段配合。演員可以任意自由發(fā)揮，發(fā)揮過程會影響顯示效果，顯示效果也會助推演員表演，這就是我們所說的互動。這種互動恰恰體現(xiàn)了自然浪漫的情調(diào)，也非常符合導演的創(chuàng)意初衷。

無數(shù)次完善修正盡可能滿足創(chuàng)意需求

新京報：實時捕捉和交互顯示的技術(shù)難點在哪？

童雷：地面屏幕面積大、承載演員數(shù)量多、要求無延時的實時捕捉交互，這些技術(shù)背后本身就需要非常強大的算力和引擎支撐。

這些技術(shù)在各自領(lǐng)域可能已經(jīng)運用非常成熟，例如捕捉技術(shù)用在運動員動作捕捉分析、實時渲染在大型游戲里用得比較多，而我們這次的創(chuàng)意恰恰是把兩個技術(shù)完美結(jié)合在一起，形成從捕捉到識別到呈現(xiàn)渲染一條龍的鏈路，保證效果完美呈現(xiàn)。

我們也希望通過這個技術(shù)，實現(xiàn)不同于傳統(tǒng)的美術(shù)創(chuàng)意呈現(xiàn)，體現(xiàn)交互特性。目前的呈現(xiàn)經(jīng)歷了幾個月時間的完善修正。比如為了適合轉(zhuǎn)播的需求，地面屏幕雪花的顏色，都經(jīng)歷了好幾個版本的調(diào)整，而這種調(diào)整在過程中發(fā)生了無數(shù)次。

新京報：張藝謀導演對創(chuàng)意實現(xiàn)的要求非常高，其間你們經(jīng)歷了怎樣的磨合？

童雷：藝術(shù)創(chuàng)作領(lǐng)域的主觀性非常強，永遠沒有完美一說。我們只能盡可能發(fā)揮想象，把好的創(chuàng)意盡可能多地交給導演。這個過程中反饋修改意見是必然的，恰恰是不斷交流修改才能達到臻于完美的效果。

每次彩排結(jié)束后，導演會針對每個節(jié)目提建議。我們最開心的時刻就是在會上沒有針對我們負責的環(huán)節(jié)提出建議和問題。我們所追求的是盡可能地實現(xiàn)導演的創(chuàng)意，盡可能地打動觀眾。

參與兩屆奧運會，曾負責2008年焰火燃放

新京報：你也參與了2008年北京夏季奧運會開幕式，那時負責什么工作？兩屆奧運會感受有何不同？

童雷：2008年我負責的是奧運會開幕式的煙火控制，跟蔡國強配合。

2008年“鳥巢”內(nèi)外焰火燃放由五六家單位聯(lián)合完成，每家單位控制方式和控制指令各不相同，這就需要一個總控中心協(xié)調(diào)各家，跟場內(nèi)演出、音樂和時間點準確配合，將誤差控制在一兩幀之內(nèi)。按照這一需求，那年我做了一套煙火控制系統(tǒng)，協(xié)調(diào)各家焰火系統(tǒng)精準燃放。

2008年，我還是個年輕小伙，一晃14年過去了，技術(shù)和表達方式都在進步。這次冬奧會跟2008年夏季奧運會在形式和風格上有很大不同，對現(xiàn)場技術(shù)的需求，也是要求越來越高，在現(xiàn)有基礎(chǔ)上，我們也要做得比2008年更好。

新京報：北京電影學院很多師生參與到冬奧會中，他們主要在哪些崗位？

童雷：近200位學生擔任引導員、開閉幕式演員；我所在的實時特效團隊有8位師生；場內(nèi)還有一支負責開閉幕式紀錄片拍攝團隊，大概有八九個人也來自電影學院；媒體中心有做技術(shù)支持保障的師生。

我們所追求的是盡可能地實現(xiàn)導演的創(chuàng)意，盡可能地打動觀眾。

——北京電影學院聲音學院院長童雷

關(guān)鍵詞：