虎牙開放AI數(shù)字人技術,人人都能擁有數(shù)字偶像
虛擬仿生人離我們究竟還有多遠,也許近得我們難以想象,甚至近得我們可以掌控。今年2月,《阿麗塔:戰(zhàn)斗天使》的熱映,再次點燃了大眾對虛擬人科技的種種猜想與憧憬。這部改編自日本漫畫《銃夢》的科幻電影,講述了一個人類與機械改造人共存的未來世界。不過,那是26世紀。呵,文藝工作者,還是保守了。幾乎就在《阿麗塔》熱映的同時,已在二次元圈內(nèi)耕耘數(shù)年的虛擬偶像,忽然在2019年初全面爆發(fā)。直播、短視頻成為推動新一輪虛擬偶像發(fā)展的主導力量?;⒀?、快手、抖音、BILIBILI、愛奇藝……一個個新媒介渠道為虛擬偶像找到了更廣的大眾舞臺和更多的變現(xiàn)通路。虛擬主播成為直播新風口。而當時間來到2019年底,硬糖君發(fā)現(xiàn),該領域不管是技術進步還是產(chǎn)業(yè)發(fā)展,速度都超出我們的預期。11月7日,廣州,以“開放、連接、預見”為主題的“虎牙LiveTech技術大會”上,虎牙發(fā)布了兩項在直播行業(yè)具有里程碑意義的技術成果:首個小程序開放平臺和首個虛實結(jié)合開放平臺HERO。虛擬偶像主播已經(jīng)無法滿足虎牙的胃口,這一次簡單來說,就是虎牙推出了一套完整的“數(shù)字人”解決方案。而虎牙的“數(shù)字人”和傳統(tǒng)的“虛擬偶像”有本質(zhì)區(qū)別。虎牙AI數(shù)字人,這是一個通過模擬真人主播的方式,實現(xiàn)主播在不同時空,背景下的新直播創(chuàng)意。具體而言,虛擬數(shù)字主播是模擬了真人主播的形象,而不是創(chuàng)作一個虛擬的形象。即將到來的5G時代將帶來什么,會是誰的機會,每個TMT從業(yè)者都在思考。而在虎牙CEO董榮杰看來,5G時代將為直播行業(yè)帶來前所未有的機遇,技術會成為變革直播行業(yè)最重要的驅(qū)動?;⒀绖t將在技術開放和虛實結(jié)合兩個方向發(fā)力,運用5G+AI給直播內(nèi)容帶來革命性升級。對于向來由網(wǎng)紅主播們占據(jù)重要戲份的直播業(yè)發(fā)布會,虎牙LiveTech技術大會這種純技術型發(fā)布極為罕見,在硬糖君印象里甚至是首次。但其帶來的刺激性,卻比網(wǎng)紅主播更大。數(shù)字人技術普惠之路
眾所周知,初代虛擬偶像初音的核心邏輯,是在語音合成引擎vocaloid的支持下,粉絲可以為其量身打造個性化的歌曲。只要不涉及商業(yè)用途,初音未來的可能性屬于每一個初音未來的粉絲。這是一種基于UGC思維模式的內(nèi)容繁衍生態(tài),同時我們也可以將其理解為技術普惠的產(chǎn)物。而在虎牙推出的虛實結(jié)合開放平臺HERO中,這種技術普惠被繼續(xù)推進——即,用戶不止能制作初音的歌,甚至能直接制作自己的“初音”。“虎牙HERO平臺中,我們開放了數(shù)字人運用到的相關接口和技術,讓主播和開發(fā)者可以用自己的設備構建自己喜愛的形象和AR應用玩法。通過技術賦能,每個主播都可擁有數(shù)字人。”虎牙AI技術負責人許佳說。大概是為了給行業(yè)先示范個效果,虎牙現(xiàn)場發(fā)布了基于HERO平臺誕生的第一個直播AI數(shù)字人——虎牙與DK公會合作的數(shù)字人形象“晚玉”。與之前虎牙虛擬主播“奧特曼”及帝菲兒diffir的試播嘗試不同,虎牙此次提供的“數(shù)字人”技術,幾乎承接了視覺底層技術支持的全部內(nèi)容,而不單單是一個既有IP¥形象植入的過程。舉個例子,在“奧特曼”的直播體驗里,我們能夠清楚的知道這是一個基于2D的動漫形象,而在與真實主播的交互過程中,也有明顯的劇本化痕跡,脫離了“直播”中所重視的實時感。也就是說,僅僅是純粹的IP植入形式,并不能滿足直播內(nèi)容上的基本需求。這種需求里,既包含真實地充滿未知地實時感,也包含與觀眾的隨機交互感。通過奧特曼和帝菲爾diffir的直播試水,硬糖君琢磨著,虎牙也更清楚地知道了用戶想要什么,以及距離觀眾需要的內(nèi)容還需要做哪些努力,“數(shù)字人”技術才應運而生。AI數(shù)字人拓展了真人主播的活動范圍和完成的工作。例如,真人主播無法完成的任務和工作(如極限運動等)可以通過AI數(shù)字人的模擬完成。而AI數(shù)字人可以發(fā)展出和真人不一樣的外貌,性格,讓人們看到真人主播不為人知的另一面。這充實現(xiàn)有的直播內(nèi)容,使得直播娛樂變得更有趣。就直播來說,主播和直播內(nèi)容是支撐起觀眾各種互動行為的基礎。這很好的解釋了為什么頭部主播永遠坐擁最多的粉絲和最熱情的禮物贈予——因為主播自身條件夠好,同時直播內(nèi)容的質(zhì)量碾壓同類型其它主播。科技驅(qū)動下的“數(shù)字人”
虎牙顯然對“數(shù)字人”在這方面的表現(xiàn)信心十足。拋開令人眼花繚亂地 “建模、驅(qū)動、渲染”的技術標準介紹,“數(shù)字人”技術用通俗易懂的語言解釋就是:“數(shù)字人”使用了類似CG動畫級別的高模技術,其中包括了更多地動態(tài)骨骼和實時演算技術,確?!皵?shù)字人”在直播鏡頭前地表現(xiàn)能夠精致到微表情。同時支持復雜地動作表演,比如我們耳熟能詳?shù)兀鞑ヒ谎圆缓险酒饋砭烷_始跳“極樂凈土”。在“建模”保證了動作及表情的逼真到位之后,材質(zhì)渲染技術則保證了人體皮膚、毛發(fā)以及衣物的質(zhì)感。更高效和強有力的技術支持,能夠保證更好的視覺體驗。比如在燈光下的陰影明暗關系,以及帶有光反射材質(zhì)的如漆皮類衣物的真實感——坐在鏡頭前的,將是一個實打?qū)嵉?D虛擬形象。而“數(shù)字人”技術與傳統(tǒng)的CG動畫技術最大的區(qū)別在于:它不僅支持“創(chuàng)造”,還可以“克隆”。在現(xiàn)場,虎牙展示了根據(jù)其平臺人氣吃雞主播“晚玉”為原型的“晚玉弟弟”數(shù)字人應用,在演示中,數(shù)字人“晚玉弟弟”不僅身臨吃雞游戲場景中,還表演了本尊并不擅長的街舞才藝。這項技術的超前之處在于,所有的技術標準都是規(guī)范化并接口化的。這意味著,無論是跨領域的虛擬IP形象,還是一個真實的人氣主播,都可以通過這項技術獲得高度還原的、同時具備各種直播內(nèi)容才藝的“數(shù)字人”。在企業(yè)經(jīng)營中,曾經(jīng)有一句俗話,叫做三流的公司做產(chǎn)品,二流的公司提概念,一流的公司定標準??梢韵胂螅惶讟藴驶摹皵?shù)字人”技術對于整個直播行業(yè)可能產(chǎn)生的顛覆性影響。“數(shù)字人”技術的背后,恐怕不僅僅是“2D形象”到“3D形象”的技術進化?;⒀琅浜贤瑫r開放的企業(yè)合作層面的定制服務“HERO計劃”,意味著我們耳熟能詳?shù)奶摂MIP形象都將可以快速孵化出符合上崗直播標準的同款授權“數(shù)字人”。而在這些“數(shù)字人”背后,則有著各種強勁的技術支持。前面提到過并已經(jīng)在“晚玉弟弟”上演示過的舞蹈動作庫、基于自然語言理解分析及反饋的微表情、語言交互庫、曲庫、知識庫,甚至人工智能阿爾法曾經(jīng)展示出的恐怖的游戲能力,都將為“數(shù)字人”的直播內(nèi)容提供保障。可以預見的是,這項技術不僅會推動虛擬IP在未來進入直播領域,也將對現(xiàn)有的真人主播產(chǎn)生深遠地、積極地影響。技術并不能直接生產(chǎn)內(nèi)容,但能夠提供無數(shù)地新的可能性。就像“數(shù)字人”,能夠精準地解決虛擬IP擁有者在技術方面的短板,從而使受歡迎的IP形象快速落地開播,并提供有質(zhì)量保證的直播內(nèi)容。這將惠及各種跨領域的IP合作方,使得影視、動漫乃至游戲中的虛擬IP形象都可以在直播領域得到更充分地增值。除此之外,也鏈接了一些技術公司缺少IP落地的困境,例如加入虎牙HERO計劃中,像萬像科技等多家合作伙伴與虎牙在5G+AI領域也將開展從技術支持到多矩陣內(nèi)容高效生產(chǎn)的全方位合作,一起共建虛實直播的技術生態(tài),利用技術推動直播內(nèi)容朝更好的方向革命與發(fā)展。直播業(yè)的“水電煤”
但硬糖君在這次“LiveTech”大會發(fā)現(xiàn),“數(shù)字人”技術還只是科技改變直播行業(yè)的冰山一角。隨著直播行業(yè)從高速發(fā)展期步入穩(wěn)定期,直播行業(yè)產(chǎn)業(yè)鏈關系也逐漸清晰。除了直播平臺外,還包括了扮演主播經(jīng)紀角色的主播公會、提供直播內(nèi)容的主播以及為前三者提供各式各樣服務的第三方推廣服務者。這其中借助風口跑得比較快的代表,在直播內(nèi)容的二次剪輯方面包括自媒體“起小點”;在直播數(shù)據(jù)的統(tǒng)計及分析方面包括應用“小葫蘆”。“起小點”們的價值在于,借助于直播內(nèi)容提煉的二次生產(chǎn),對主播起到推廣及宣傳的傳播作用,有助于主播的粉絲增長及鞏固。而在早在今年年初,虎牙就展示了其AI實時智能剪輯技術,能夠通過各種數(shù)據(jù)指標及游戲進程的參數(shù)響應,自動剪輯并生成直播的精彩時刻。可以想見,這項技術的應用,將大大降低人工成本。使得精彩直播內(nèi)容集錦不再是頭部主播的專利,也將服務于更多地二三線主播及新人主播,從而讓他們也能以低成本享受內(nèi)容宣推的福利。“小葫蘆”們的價值則在于通過數(shù)據(jù),指導主播 會更好的改善直播內(nèi)容,以及分配推廣資源給更優(yōu)質(zhì)、更具發(fā)展?jié)摿Φ闹鞑?。而在虎牙,不僅開放了相關的大數(shù)據(jù)統(tǒng)計接口,后續(xù)也將推出基于大數(shù)據(jù)的更有專業(yè)性的數(shù)據(jù)分析。對于主播工會而言,從平臺方獲得的數(shù)據(jù)不僅權威,而且規(guī)范,能夠在數(shù)據(jù)分析中更有效率地得出結(jié)論,快速反應。當虎牙公布其完整的小程序開發(fā)計劃時,恐怕這標志著建立虎牙直播平臺生態(tài)的一次勇敢嘗試。小程序之于平臺,就如同腳本之于主程序一樣,平臺提供了源源不斷地生命力,以及制定規(guī)范化和統(tǒng)一化接口。而小程序則將滲透進實際應用的方方面面,在規(guī)范和統(tǒng)一的制約下,高效地實現(xiàn)功能,提供服務。并且推出針對小程序扶持了3年10億元資源的“星火計劃”。無論是“數(shù)字人”“小程序”,還是“星火計劃”“HERO”虎牙這次在技術端的發(fā)力,都是在直播行業(yè)的棋局上落下了尋求突破與創(chuàng)新的一子。硬糖君預計,在不久的將來,一大波我們耳熟能詳?shù)腎P形象將快速上崗,開啟各自的直播生涯。
本站僅提供存儲服務,所有內(nèi)容均由用戶發(fā)布,如發(fā)現(xiàn)有害或侵權內(nèi)容,請
點擊舉報。