虛幻引擎技術(shù)開(kāi)放日，索尼和觀(guān)池帶來(lái)這些技術(shù)“干貨”

　　放眼未來(lái)的技術(shù)“盛宴”

　　2022年度虛幻引擎技術(shù)開(kāi)放日(Unreal Open Day)于11月17日-18日首次以線(xiàn)上線(xiàn)下同步的形式舉行。游戲開(kāi)發(fā)、影視制作的從業(yè)者對虛幻引擎(Unreal Engine)都不陌生，它是由知名游戲公司Epic Games打造的強大游戲開(kāi)發(fā)平臺，并在今年上半年發(fā)布了UE5正式版。

　　隨著(zhù)平臺完善和技術(shù)進(jìn)步，虛幻引擎的應用場(chǎng)景已經(jīng)不再局限于游戲制作，強大的Nanite與Lumen技術(shù)，不但為傳統游戲制作中實(shí)時(shí)渲染和全局動(dòng)態(tài)光照帶來(lái)便利，也讓虛幻引擎拓展應用于更多領(lǐng)域。因此，兩天的開(kāi)放日除了直播間主會(huì )場(chǎng)外，還帶來(lái)了媒體娛樂(lè )、汽車(chē)、建筑及仿真四個(gè)分會(huì )場(chǎng)。

　　虛幻引擎開(kāi)放日也是行業(yè)難得的盛會(huì )，持續兩天的活動(dòng)奉上了二十余場(chǎng)精彩技術(shù)演講，既有Epic Games官方的技術(shù)解讀，也有主流制作公司帶來(lái)的精彩案例分享，涵蓋了從UGC、元宇宙、電商購物，到汽車(chē)數字應用及當下熱門(mén)的虛擬影視制作，可謂是一場(chǎng)放眼未來(lái)、引領(lǐng)科技發(fā)展的技術(shù)“盛宴”。

　　揭開(kāi)虛擬影棚神秘面紗

　　會(huì )上，索尼(中國)有限公司消費電子與專(zhuān)業(yè)系統本部市場(chǎng)總部總監茂利憲一、創(chuàng )新解決方案市場(chǎng)部高級經(jīng)理尹旭暉，以及愚見(jiàn)觀(guān)池科技有限公司UE虛擬制片技術(shù)總監韓冰在演講中分享了大量技術(shù)干貨，從設備選擇、影棚搭建、技術(shù)調試到實(shí)際拍攝案例分享，多維度解讀了黑彩晶虛擬制片影棚和UE5結合的相關(guān)經(jīng)驗，并揭開(kāi)了索尼和觀(guān)池聯(lián)合打造的國內首個(gè)黑彩晶虛擬制作影棚的神秘面紗。

　　虛幻引擎在游戲領(lǐng)域很早就得以廣泛應用，因此二十余場(chǎng)演講中過(guò)半都著(zhù)眼于游戲制作開(kāi)發(fā)，在這樣的情況下，索尼和觀(guān)池奉上的黑彩晶虛擬制片影棚和UE5結合的實(shí)戰案例，成為這屆開(kāi)放日上唯一一個(gè)針對虛擬影視制作的分享，應該也是虛幻引擎開(kāi)放日舉辦以來(lái)，首次引入虛擬制作分享，有很重要的意義。

　　秉承“用創(chuàng )意和科技的力量感動(dòng)世界”的企業(yè)宗旨，索尼多年來(lái)在視聽(tīng)領(lǐng)域持續深耕，得益于深厚的技術(shù)積淀及產(chǎn)品研發(fā)經(jīng)驗，索尼成為虛擬影視制作的先行者，并積極在虛擬制作領(lǐng)域布局，聯(lián)合觀(guān)池一起打造了國內首個(gè)黑彩晶虛擬制作影棚。

　　影棚位于上海城市中心愚園路靠近江蘇路，索尼提供了虛擬制作中三個(gè)核心產(chǎn)品，分別為拍攝端的索尼CineAltaV 2電影攝影機、監看端的索尼HDR監視器，以及顯示端索尼專(zhuān)門(mén)為虛擬拍攝開(kāi)發(fā)的黑彩晶B系列LED屏。這三個(gè)核心產(chǎn)品從研發(fā)、生產(chǎn)到最終的質(zhì)量控制，都著(zhù)力于不同設備間的色彩調校，應用于虛擬制作系統中，在現場(chǎng)經(jīng)過(guò)簡(jiǎn)單設置就能完成一整套設備間的色彩匹配。

　　LED屏高度5.5米，弧長(cháng)15米，總面積達到83平米，弧度約在135度，水平分辨率達到9.6K，可以滿(mǎn)足多種拍攝需求，影棚除了搭載先進(jìn)的UE5系統外，還選用了OptiTrack光學(xué)動(dòng)作捕捉跟蹤系統，通過(guò)24個(gè)高速攝像頭準確捕捉跟蹤攝影機運動(dòng)，并同步給UE5，通過(guò)低延遲將渲染畫(huà)面實(shí)時(shí)顯示在LED屏上。

　　而且，索尼工程師全程參與影棚的設計，并提供了全流程服務(wù)。除了立屏和頂屏，這間影棚還精心設計了一塊移動(dòng)LED屏幕，便于攝影師完成雙機拍攝，降低渲染壓力，補充不同機位的拍攝效果，而且還可以完成高質(zhì)量的色彩補光、實(shí)時(shí)定位等工作。

　　聯(lián)合Epic Games發(fā)布技術(shù)白皮書(shū)

　　成功不是一蹴而就。索尼進(jìn)入虛擬制作領(lǐng)域得益于多年的技術(shù)積累和產(chǎn)品研發(fā)經(jīng)驗;虛幻引擎在這個(gè)領(lǐng)域的成功運用，同樣經(jīng)過(guò)了大量測試和實(shí)踐應用，Epic Games的合作測試伙伴則首選了索尼。

　　演講中尹旭暉公開(kāi)了這個(gè)重要信息，索尼和Epic Games針對虛擬應用進(jìn)行了聯(lián)合測試，并發(fā)布技術(shù)白皮書(shū)。測試中涵蓋了決定虛擬制作品質(zhì)的三個(gè)關(guān)鍵點(diǎn)，索尼設備都有很好表現。

　　首先是拍攝LED屏幕時(shí)，極易給攝影師帶來(lái)困擾的摩爾紋。摩爾紋是物理現象，理論上只能盡量減弱，無(wú)法完全消除，由于黑彩晶1.58mm小間距和Micro LED芯片的優(yōu)異表現，在索尼CineAltaV電影攝影機的配合下，測試中在較窄范圍內摩爾紋才會(huì )出現，因此攝影師可以把焦點(diǎn)更加貼近LED屏幕拍攝，拓展了拍攝創(chuàng )作的空間。

　　其次是暗部畫(huà)面表現。暗部畫(huà)面非?？简濴ED屏的實(shí)力水準，測試中對比來(lái)看，2.8mm LED的部分暗部細節會(huì )丟失，1.5mm LED光照很低的部分則會(huì )顏色失真，而黑彩晶LED屏在整個(gè)暗場(chǎng)畫(huà)面中都忠實(shí)表現出了原始素材的細節和質(zhì)感。

　　第三點(diǎn)是可視角度。拍攝過(guò)程中攝影機不可能一直正對著(zhù)LED屏幕進(jìn)行拍攝，會(huì )根據場(chǎng)景需要調整機位和攝影機與LED屏的角度。側拍時(shí)LED屏幕產(chǎn)生的偏色會(huì )對拍攝工作帶來(lái)影響，讓畫(huà)面失真，因此虛擬拍攝對LED屏幕的側視角性能有很高要求。

　　為了應對這一點(diǎn)，索尼在研發(fā)上下了功夫，索尼開(kāi)發(fā)了寬配光技術(shù)，并使用自身研發(fā)的表面涂層技術(shù)，使得LED在側視角時(shí)都有出色和一致的色彩表現。這項性能也體現在Epic Games的測試中，大角度拍攝時(shí)也不容易發(fā)生色彩偏移，可視角的水平垂直達到170度，為虛擬拍攝提供很大便利。

　　目前虛擬拍攝還處在起步階段，硬件良莠不齊、軟件亟待成熟，在這樣的現狀下，索尼和Epic Games完成這次測試，其意義已超越了測試本身，發(fā)布的技術(shù)白皮書(shū)有望成為行業(yè)標桿。

　　案例分享全是干貨

　　愚見(jiàn)觀(guān)池科技有限公司，是目前中國頭部的商業(yè)視頻制作公司之一，涵蓋了包括視頻內容制作及數字體驗多個(gè)領(lǐng)域，服務(wù)過(guò)眾多國際品牌。黑彩晶虛擬制作影棚試運營(yíng)階段，就在索尼和UE虛擬制片團隊的協(xié)助下，共同進(jìn)行了虛擬場(chǎng)景搭建優(yōu)化以及測試，并隨之完成了TVC的正式拍攝。

　　觀(guān)池UE虛擬制片技術(shù)總監韓冰介紹了項目背景，并分享了制作經(jīng)驗。演講過(guò)程中播放了某品牌礦泉水的廣告成片，畫(huà)面呈現出了不輸于電影級別的質(zhì)感，以及明媚日光、窗外就是沙灘的優(yōu)美風(fēng)景，得益于索尼黑彩晶LED屏的出色表現，讓人感覺(jué)不到是在虛擬影棚中拍攝。

　　這個(gè)精彩案例有力證明了虛擬制作能為廣告拍攝賦能。韓冰介紹說(shuō)，商業(yè)TVC往往時(shí)間緊迫，通常，導演團隊及美術(shù)部門(mén)完成風(fēng)格定調后，第一時(shí)間開(kāi)始了預演的制作以及場(chǎng)景內容制作，同時(shí)在相應場(chǎng)景布局完成后確定了鏡頭以及場(chǎng)景道具的具體布置。

　　準備就緒后，2周后就可以試拍，得益于虛擬拍攝的高效和靈活性，拍攝團隊在次日僅用一天的時(shí)間，即可以完成約40個(gè)鏡頭的拍攝。由此可見(jiàn)，虛擬拍攝不但可以減輕外聯(lián)選景、道具部門(mén)置景的成本和壓力，同時(shí)將后期工作前置，有效縮短拍攝流程，未來(lái)在影視制作領(lǐng)域也大有作為。

　　同時(shí)韓冰也分享了兩點(diǎn)很有價(jià)值的制作經(jīng)驗。

　　首先是拍攝前要做好充足的準備和各部門(mén)的充分溝通，應該讓制片團隊盡早了解導演的想法以及預期，甚至參與部分創(chuàng )意內容。盡早完成預演及技術(shù)驗證，將內容和技術(shù)風(fēng)險解決在預打燈前，而充分溝通和交流則可以讓任何調整及問(wèn)題，在第一時(shí)間得到相應解決。

　　其次是拍攝過(guò)程中的色彩一致性。虛擬拍攝的色彩一致性往往會(huì )給拍攝團隊帶來(lái)困擾，從拍攝端到顯示端，往往制作過(guò)程中的每一個(gè)環(huán)節色彩顯示都不相同，甚至會(huì )大相徑庭。這個(gè)問(wèn)題不僅來(lái)自于不同顯示設備廠(chǎng)商色彩空間的一致性上的差異，還包括無(wú)法解決的物理燈珠或液晶發(fā)色的問(wèn)題。

　　觀(guān)池在拍攝部分沒(méi)有采用BT.2020色域，而是使用了索尼CineAltaV 2電影攝影機支持的更寬的色彩空間S.Gamut3，亮度曲線(xiàn)使用了索尼常用的slog3。監視器部分則與攝影機的輸出保持一致，得益于索尼CineAltaV2電影攝影機、HDR監視器和索尼黑彩晶LED屏具備統一的色彩科學(xué)，這次拍攝色彩表現實(shí)現了一致性。

　　韓冰還介紹，業(yè)界也有可以解決色彩一致性的方案，但使用該方案要支付高達百萬(wàn)美金的費用，以及差不多2個(gè)月的校色時(shí)間，且僅能對應一系列設備，目前很難投入到實(shí)際應用。由此可見(jiàn)，搭載索尼核心設備的虛擬影棚，不但讓虛擬拍攝更高效，還能有效節約制作和調試費用。

　　除了聯(lián)合觀(guān)池在國內打造了首個(gè)黑彩晶虛擬制作影棚外，索尼秉承“讓科技賦能創(chuàng )作者”的使命和愿景，已經(jīng)在全球范圍內開(kāi)啟了虛擬制作影棚布局。目前日本東京的PCL清澄白河BASE黑彩晶虛擬制作影棚和美國SIS索尼創(chuàng )新工作室的虛擬制作影棚都已投入使用，并為廣告、舞臺表演、現場(chǎng)音樂(lè )等內容提供服務(wù)，還完成拍攝了電影短片《凱利安的游戲》。

　　而在此次開(kāi)放日的分享中，茂利憲一也表示索尼會(huì )將創(chuàng )作者的需求不斷反饋到產(chǎn)品開(kāi)發(fā)設計部門(mén)，力求打造出更出色、能夠滿(mǎn)足創(chuàng )作者需求的黑彩晶虛擬制作系統，并希望索尼和觀(guān)池打造的黑彩晶虛擬制作影棚，能作為新時(shí)代攝影棚的標桿，助力創(chuàng )作者，為國內虛擬制作領(lǐng)域賦能、為行業(yè)做出更大貢獻。