9月5日-9日,2020年中國國際服務貿易交易會(以下簡稱:服貿會)在京舉辦,深圳天盟智能互動科技有限公司攜行業領先的RT-AIHS(Real Time-AI Head Swapping, 實時人工智能頭部替換)技術參加本次服貿會,并將其應用于時下火熱的直播領域。

利用深度合成技術規避企業損失
當前,以大數據、虛擬現實、AI人工智能、物聯網等為核心的新科技無一不在顛覆著人們設計和創造事物的方式。短視頻與直播帶貨已經成為近兩年來一直熱度不減的話題,針對短視頻拍攝與直播帶貨產生的主播職業,現在也形成了一套完整的主播培養體系。但是當MCN機構投入大量的人力物力培養出一個成熟的主播之后,爆紅的網紅或藝人跳槽也幾乎成為所有MCN機構面臨的風險。而無論是針對MCN機構由于主播人員流失而造成的收益受損問題,還是經紀公司由于明星流失而造成的流量受損問題,RT-AIHS應用,可以幫助這些公司將損失降到最低。

-服貿會現場利用RT-AIHS技術直播-
RT-AIHS依托的深度合成技術(Deep Synthesis),是由天盟智能互動科技的母公司天工未來科技建立的一套機器深度學習影像算法模型,主要基于自動編碼機(autoencoders)和生成對抗網絡(generative adversarialnetworks, “GAN”)等AI技術。自動編碼機是一個人工神經網絡,被訓練來對輸入數據進行重建,以實現數據合成。GAN由兩組相互對抗的人工神經網絡組成,其中一個網絡負責生成數據、另一個負責鑒別;在機器通過數百萬次的學習、迭代下,最終GAN被訓練為可以對視頻、實時影像的人臉進行高度逼真的渲染,從而合成保真的信息內容。簡而言之,深度合成其實就是通過對人臉數據鑒別從而完成人臉數據的重建并渲染出高度逼真的新的人臉的過程。
在短期內,深度合成已經作用于娛樂和社交領域,極大的提高了直播、短視頻和游戲的實時后期處理水平,優化了用戶體驗。而著眼于長遠發展,深度合成的仿真技術可以通過用戶的創作性創造出超越現實的素材,拓展人類的視覺想象邊界,帶來全新的娛樂體驗,滿足用戶的好奇心和新鮮感。

實時換臉催生新的運營模式
實時人工智能頭部替換算法(RT-AIHS)指的是依托天工未來科技在計算機視覺與人工智能最新前沿技術深度研究與開發并結合超過十五年影像后期制作領域的豐富經驗而形成的云計算和5G傳輸等技術手段,并由天盟智能互動科技實現了實時高精度頭部替換的商業化應用開發,從而提升直播、游戲、短視頻行業的生產效率和傳播效果。
對于現在的主播行業來說,無論是粉絲還是所謂的“路人”觀眾,大家在看直播的時候更多的是對于主播“臉”的關注。在以往的情況下,如果主播離開公司,則再也沒有辦法用他進行直播。但是依托于RT-AIHS技術,即使主播離開,企業也可以結合聲音的變換技術,在其離開的情況下完成直播工作。對MCN機構來說相較于再去培養一個成熟的主播,培養一個直播技術人員就能直接替換掉原先離開的主播,無論從時間成本還是金錢成本來考慮,都更容易的多。

-工作人員進行技術調試-
事實上,換臉技術在娛樂領域的運用并不是“頭一遭”,之前也有運用在影視制作中的案例,但是RT-AIHS應用與以往換臉技術的不同之處在于他的實時性、高效性以及高質量這幾個特點。用傳統辦法替換掉影視劇中演員的臉要從建模開始,并且經歷一系列的后期制作過程才能完成,相較于RT-AIHS應用進行的換臉技術需要幾十倍上百倍的人力去做,花費很長時間之后完成的成片也不一定能得到很好的效果。而RT-AIHS應用可以讓我們用很少的人力,在盡可能短的時間內實現人臉替換,并以更高的質量保證影視劇能更早的呈現在觀眾面前。
打造永不流失的“三次元”明星
隨著新一代科技革命和產業變革的發展浪潮,人工智能新技術日新月異并觸動著全球神經。此次服貿會上,天盟智能同時為大家帶來了同樣基于深度合成開發的AIFG(AI Face Generation)技術,通過對人臉面部信息的關鍵數據進行提取,隨機生成人臉圖像供用戶進行選擇?;谀壳笆袌錾洗嬖诘乃嚾恕⒕W紅等資源流失的現象,AIFG技術可以為用戶提供全新的解決方案——打造“三次元明星”。

-深圳天盟智能互動科技有限公司首席技術官趙文韜做技術指導-
與真人明星相比,“三次元”明星不會出現約滿跳槽、負面新聞或因個人品德及意外事故導致機構損失的風險;與“二次元”明星相比,他可以自主學習、迭代更新、自動修正,直接與粉絲進行實時互動等。通過AIFG技術,“三次元”明星能夠突破表演者的技能限制,通過自主設定人物外形、性格特征以及特殊技能,利用不同虛擬場景及特效配合,使得人物更加生動有趣,視覺感受全面升級。
對于企業來說,“三次元”明星可從現有的動畫后期制作和動作捕捉升級成實時合成,縮短制作周期,從而有效的控制企業成本;通過自身特定的標簽,甚至可以捕獲精準的粉絲群體,為企業帶來流量扶持。
AIFG技術發展到今天,“三次元”明星作為一種新的形態將在視頻領域發揮重要的作用,應用范圍也將越來越廣,他具備強大的吸引力和創新力,給現有人物IP創作空間帶來全新的詮釋,也將為直播、短視頻、音樂和游戲行業帶來新的機遇。

-左:深圳天盟智能互動科技有限公首席運營官饒卿–
-右:深圳天盟智能互動科技有限公司首席技術官趙文韜-
AI技術在影視制作中的運用或許不是影視后期制作發展的主流,但是以更少的預算和時間去完成更高質量的制作一直是影視后期制作發展的趨勢。技術革新給我們帶來的一定是經濟效益的增加,而對于影視制作和其他娛樂相關領域,任何能創造效益的技術都是因為他可以高效、便捷、高質量的服務于人或公司。