2023年11月落幕的「DATE SUMMIT 數位商務大趨勢|國際匯壇」,以AI虛擬主持人展現直播新風貌,來自挪威的Pixotope提供虛擬攝影棚擴增實境技術,就像為這場線上論壇開了外掛,它究竟如何辦到?
「目前市面上的虛擬技術都是以軟體為主,但Pixotope一直是軟硬體整合在一起,對客戶來說比較方便。」代理Pixotope的星球科技執行長鄭亦翔開門見山地說。
Pixotope是挪威一家科技公司,提供以遊戲動畫引擎Unreal Engine(UE)為基礎的虛擬攝影棚解決方案,整合攝影機追蹤系統及AR、VS 、XR、VFX、電視廣播特效等多項應用。除了善用效能強大的硬體,也能搭配其他技術與外部技術,使用上具備較高彈性。許多國際重要賽事或活動,如英雄聯盟總冠軍賽、全球第一個AR選秀節目《Alter Ego》、新加坡國慶典禮、NFL明星賽等都應用Pixotope製播;國內則有民視、遊戲橘子、醒吾科大採用,現在又多了一家—陽明交大傳播與科技系。
星球科技代理挪威Pixotope虛擬攝影棚系統,提供專業建置、製播及教學服務。星球科技執行長鄭亦翔(左二)與技術團隊。
優惠教育方案培育人才
鄭亦翔指出,Pixotope的系統為客戶獲得包括艾美獎在內的許多獎項,最近也推出教育方案,「它的優勢是收費方式比較友善,也願意投入到教育市場,培育台灣比較欠缺的製播工程技術人員。」
其他廠商的教育方案,往往必須根據學生人數來購買正版軟體,但Pixotope的教育方案只需買一套正版,其他學生都可以用比較便宜甚至免費的教學版。同時還提供手機版本的Pixotope Pocket App,讓學生可以將手機變成具追蹤工具的製作攝影機,平時也能自己練習虛擬製作的流程。「它的原創教育方案,可以提供學生比較多教育版軟體,也提供老師專業虛擬技術教學,這些都是其他品牌技術廠商沒辦法提供的服務。」鄭亦翔指出。
星球科技執行長鄭亦翔表示,Pixotope提供專業Live AR和攝影機跟蹤技術團隊、相關系統設備,以及3D AR內容製作服務。
結合認證對工作大加分
他更進一步解釋,以往學校建置攝影棚,可能只買一套設備,學生必須輪流使用。「一個學期,一個學生可能摸不到兩、三次,他如果不是真的很有興趣,對這個技術的興趣就會降低很多。」
除了透過這項方案接觸更多學生,Pixotope也建置了全球技術交流平台,有論壇討論、不時的職缺釋出;更推出三階段的技術認證,通過後頒發原廠證書。鄭亦翔說,台灣不光是在虛擬製播,包括廣電影視方面都缺乏標準化的流程,藉由Pixotope所推出的原廠技術認證,星球科技也積極與台灣的認證機構整合,並與已參加Pixotope 虛擬製播教育計畫的全球各大學校和媒體單位合作,提供跨國的學生交流及海外的工作機會,並鼓勵學生在學成後取得原廠認證,不管將來在台灣或出國工作,都是一大加分。
結合AI應用更廣泛
2023年是AI大爆發的一年,虛擬攝影棚的應用也不例外。鄭亦翔以DATE SUMMIT為例,2022年使用的攝影機跟蹤系統是軌道拍攝系統,2023年則使用紅外線跟蹤系統,只要裝在攝影機上,就能任意移動。對攝影師來說,移動範圍變得更大,而不再只是局限在軌道上。
業界首創運用3D擬真及AI文字轉語音技術所打造的2023 DATE SUMMIT AI虛擬主播,正是使用Pixotope的紅外線跟蹤系統進行製播。
另外,星球科技團隊也利用Pixotope系統與動作捕捉裝置、AI語音整合,將與談來賓和虛擬主持人合成在同一個畫面裡,讓虛擬人物可以和真人即時互動,「虛擬主持人揮手或做其他動作,其實現場來賓都能看得到」。兩年前,FOX電視台推出全球第一個AR選秀節目《Alter Ego》用的就是這套系統。
此外,企業行銷也有不少應用。雖然不像影視媒體製播需要用到那麼多技術,但利用簡單的AI或AR應用,就能結合虛擬場景展示汽車、服飾,或用AI模擬不同配色等。疫情後,全球商務旅行不再像以前那麼頻繁,也有國際企業的會議是透過影音訊號傳輸,將國外老闆合成到台灣的虛擬攝影棚現場,看起來就像大家都在同一個場景裡。「國外不需要有設備,只要老闆站在綠幕前面錄影,後續我們就能進行3D合成。」鄭亦翔說。
由於現在虛擬攝影棚系統大多與UE遊戲動畫引擎整合,無形提高了應用的門檻,因此Pixotope與星球科技特別著重在人才培育。「客戶要買虛擬攝影棚的設備很簡單,但是要有員工去學系統操作或建置自己的團隊,」鄭亦翔指出,現在虛擬製播的人才搶手,Pixotope一方面協助學校培育人才,一方面也可填補企業找不到人的缺口。
二、三十年前,很多公司根本沒有美編這種職務,但社群開始流行之後,大家都知道公司需要美編。現在無論是專業棚內技術人和3D設計人員也是一樣,尤其疫情過後,很多企業的虛擬棚直播和影片拍攝需求暴增,大家才開始發現每家公司都需要有相關人力,訓練虛擬製播人才的需求就會愈來愈多。
自成立以來,星球科技不斷求新求變,今年也嘗試應用AI輔助。例如,引進第一套即時空拍AR系統,透過跟蹤系統內建的AI影像辨識技術,就能將AR物件或廣告影像即時合成在空拍畫面中;去年年底賴清德總統候選人的競選總部造勢活動,與剛結束的台北最嗨新年城跨年晚會,也運用了Pixotope的新系統處理。
鄭亦翔認為,從事虛擬製播工作,必須要有抗壓性,還要會基本的動畫、3D技術,程式、轉播也都要懂一些,「透過與學校合作,希望能找到更多這方面的人才。」Pixotope除了提供優惠教育方案,後續維護的門檻也低,對學校來說是最好的選擇。