簡(jiǎn)單、快捷、低成本的超寫(xiě)實(shí)虛擬人平臺(tái)來(lái)了……
IP蛋炒飯:泛IP時(shí)代的思想、方法和案例
加微信SXSZZZ,進(jìn)IP蛋炒飯社群
這是IP蛋炒飯開(kāi)伙的第122篇文章,
全文約4860字。
關(guān)鍵詞:超寫(xiě)實(shí)虛擬人平臺(tái) 人工智能 百度
這篇承接上周文章,繼續(xù)探討數(shù)字虛擬人大爆發(fā)前的必要條件。
雖然數(shù)字虛擬人越來(lái)越受關(guān)注,但如果要迎來(lái)大爆發(fā),虛擬偶像甚至能部分替代頻頻爆雷的真人偶像地位,還需要新平臺(tái)的出現(xiàn)。
因?yàn)椋瑪?shù)字虛擬人從表面上看是一種娛樂(lè),但本質(zhì)上,數(shù)字虛擬人是新的網(wǎng)絡(luò)應(yīng)用服務(wù),像社交、電商、外賣(mài)一樣,需要強(qiáng)大專門(mén)的、專為虛擬人/虛擬偶像服務(wù)的平臺(tái)。
新平臺(tái)首先要做到:將打造超寫(xiě)實(shí)數(shù)字虛擬人的高門(mén)檻、高投入真正降下來(lái),變成普及化服務(wù)。
解決現(xiàn)在如果想開(kāi)發(fā)超寫(xiě)實(shí)虛擬人,花費(fèi)很貴、難以實(shí)時(shí)直播、也無(wú)法快速批量生產(chǎn)內(nèi)容等諸多問(wèn)題。
比如一些超寫(xiě)實(shí)的數(shù)字虛擬人,目前也只是能做到發(fā)幾張圖片的程度,做到視頻的很少,既少也不足。
某高知名度的新消費(fèi)品牌,推出了廣受好評(píng)的品牌虛擬人形象,但公布的也只是一張圖片,據(jù)蛋炒飯了解還在非常初期的階段,并沒(méi)有真正進(jìn)入到動(dòng)態(tài)內(nèi)容開(kāi)發(fā)。
目前市場(chǎng)上的虛擬偶像天團(tuán),只是幾家?jiàn)蕵?lè)大公司的燒錢(qián)游戲,一個(gè)4人虛擬偶像天團(tuán),可以在短短幾年內(nèi)燒掉近億元的資金,而且還遠(yuǎn)沒(méi)有達(dá)到高仿真的程度。
這些都亟待新平臺(tái)的出現(xiàn)來(lái)解決,而眾多巨頭都在進(jìn)行布局。
我最近發(fā)現(xiàn),新發(fā)布的百度智能云“數(shù)字明星運(yùn)營(yíng)平臺(tái)與燦星計(jì)劃”,有可能就是這樣的平臺(tái),它正是朝著讓超寫(xiě)實(shí)虛擬人開(kāi)發(fā),變得更簡(jiǎn)單快捷、更低成本、更易運(yùn)營(yíng)這一方向去的。
簡(jiǎn)而言之,百度“數(shù)字明星運(yùn)營(yíng)平臺(tái)”能做到:
用AI智能的方式,
快速打造數(shù)字虛擬偶像
打造的虛擬偶像既有3D超寫(xiě)實(shí)的、直接在真人基礎(chǔ)上生成的,也有半寫(xiě)實(shí)或二維的、寵物化的,都能做到高效、快速生成。而且是一體化智能平臺(tái),既能打造IP也能運(yùn)營(yíng)IP,和我期望的新平臺(tái)非常接近。
就在8月18號(hào),和央視新聞聯(lián)合舉辦的“百度世界2021”上,已經(jīng)展示了幾個(gè)典范案例,包括將央視著名主持人、真人明星龔俊都變成了數(shù)字虛擬人,以及Q版的火星車(chē)數(shù)字人等,展現(xiàn)了各種可能和場(chǎng)景。
“數(shù)字明星運(yùn)營(yíng)平臺(tái)”的黑科技非常多、待我一一道來(lái)。
01
用簡(jiǎn)單快捷的4D掃描+人工智能, 直接打造超寫(xiě)實(shí)虛擬人
目前的超寫(xiě)實(shí)虛擬人開(kāi)發(fā)實(shí)在是太麻煩了——1、高精度原畫(huà)設(shè)計(jì);2、高寫(xiě)實(shí)3D建模;3、導(dǎo)入高水準(zhǔn)的虛擬人引擎;4、高精度動(dòng)捕;5、高精致的修幀渲染;這個(gè)流程還沒(méi)包括人工智能,只做出形象和動(dòng)作而已。
這必然導(dǎo)致成本高昂、流程復(fù)雜,不懂行的人根本做不好。
而在“數(shù)字明星運(yùn)營(yíng)平臺(tái)”上,情況會(huì)有重大改變:你可以不用去找CG公司做3D建模,也能打造出足夠漂亮、足夠高仿真的AI智能虛擬人。
因?yàn)槠脚_(tái)會(huì)通過(guò)4D掃描技術(shù)+人工智能,把你找到的真人變成有智慧的超寫(xiě)實(shí)虛擬人。
你只需找到符合自己要求的真人美女帥哥,當(dāng)然孩子和老人也行,剩下的事情,就是由平臺(tái)來(lái)幫你轉(zhuǎn)化為超寫(xiě)實(shí)虛擬人,節(jié)省大量精力時(shí)間,也肯定比開(kāi)發(fā)3D高仿真模型要省錢(qián)。
千萬(wàn)不要小看這件事,這意味著,哪怕你不是做動(dòng)畫(huà)的、不是做3D的、甚至不是做IP的,也可以開(kāi)發(fā)出足夠好的超寫(xiě)實(shí)虛擬人。
這也意味著,任何網(wǎng)紅也能直接把自己變成數(shù)字虛擬人了,而無(wú)需繁瑣的建模工作,具有極為廣闊的應(yīng)用領(lǐng)域。
根據(jù)我拿到的第一手資料,描述一下這個(gè)開(kāi)發(fā)過(guò)程:
第一步,用高精度4D掃描技術(shù),對(duì)人體進(jìn)行全方位掃描,捕捉真人的細(xì)膩表現(xiàn)。
第二步,用人工智能機(jī)器深度學(xué)習(xí)掃描數(shù)據(jù),并用人工智能算法組合驅(qū)動(dòng)豐富真實(shí)的實(shí)時(shí)面部表現(xiàn),從而超高精度還原真人模特。
數(shù)字虛擬人的動(dòng)態(tài)精模,
顯著提升虛擬偶像“真情實(shí)感”的品質(zhì)
其實(shí)我以前見(jiàn)過(guò)用掃描生成的3D人,但由于沒(méi)有結(jié)合人工智能,表情很不自然,尤其是口型失真,做出來(lái)的只是泥塑木雕的3D升級(jí)版而已。
所以結(jié)合人工智能進(jìn)行深度學(xué)習(xí)和算法非常重要,只有結(jié)合了AI,3D人才可能顯得有“真情實(shí)感”,才有資格稱為“虛擬人”。
這是百度用4D掃描+人工智能所做的龔俊數(shù)字人,盡可能還原真人偶像的氣質(zhì)和魅力。
這是百度為央視網(wǎng)開(kāi)發(fā)的全新升級(jí)版數(shù)字人小C,也作為奧運(yùn)信息搜羅官,出現(xiàn)在剛剛結(jié)束的奧運(yùn)會(huì)上。
第三步,設(shè)定五個(gè)關(guān)鍵維度,即表情、口型、毛發(fā)、布料、身型,來(lái)打造超寫(xiě)實(shí)虛擬明星,尤其是加入了表情可變的口型合成算法,讓用戶觀感更親切自然,徹底解決口型和表情失真的問(wèn)題。
數(shù)字虛擬人的口型與表情配合,
用AI解決口型+表情容易失真的問(wèn)題。
毛發(fā)、布料與身形,
盡可能細(xì)膩、自然和豐富。
總之,只要有真人模特,平臺(tái)就能幫你做出盡可能真實(shí)、自然、精細(xì),以及實(shí)時(shí)驅(qū)動(dòng)的虛擬偶像。
02
只需高精度照片,或攝像頭,就能生成超寫(xiě)實(shí)虛擬人。
上一種方法還需要真人模特,和專門(mén)的高精度掃描。
平臺(tái)還有更極致的簡(jiǎn)單快捷辦法:用標(biāo)準(zhǔn)人像照片或攝像頭來(lái)生成。這種方法只需要高精度照片或視頻。
方法1:你提供從單張或多張高精度照片,上傳到平臺(tái),由平臺(tái)生成超寫(xiě)實(shí)虛擬人的模型。
方法2:你也可以通過(guò)高精度攝像頭進(jìn)行面部捕捉和動(dòng)作捕捉,上傳到平臺(tái),同樣也能生成超寫(xiě)實(shí)虛擬人的模型。
方法3:直接提供高精度視頻也可以。
當(dāng)然,要做出超寫(xiě)實(shí)虛擬人不只這么簡(jiǎn)單,平臺(tái)還需要從妝容、發(fā)型、服裝、音色等各個(gè)方面進(jìn)行再調(diào)節(jié),通過(guò)5個(gè)維度、15項(xiàng)參數(shù),不斷裝扮出新鮮感。
在這背后,平臺(tái)需要建立豐富的妝容庫(kù)、發(fā)型庫(kù)和衣柜,以及各種音色庫(kù)供選擇。
還有一個(gè)趣點(diǎn):為了保證虛擬人不會(huì)做出不雅觀的表現(xiàn),平臺(tái)專門(mén)設(shè)計(jì)了基于AI技術(shù)的數(shù)字人表情管理引擎,確保各種虛擬人的驅(qū)動(dòng)表現(xiàn)儀態(tài)大方:)
總之,一張照片就有可能生成一個(gè)虛擬人IP,然后發(fā)展為一個(gè)百變的虛擬明星。
我發(fā)現(xiàn)這樣做,不僅是在造星,還意味著所有經(jīng)典的、甚至是去世的真人明星、偶像,只要獲得家屬的授權(quán)許可,也能直接轉(zhuǎn)化為數(shù)字虛擬明星,繼續(xù)唱歌、跳舞和演出……
這有點(diǎn)永生的感覺(jué),在元宇宙的虛擬世界里,生者與逝者,永遠(yuǎn)繼續(xù)生活在一起……
03
一句話生成形象IP
說(shuō)出來(lái)等于做出來(lái)
這是比前兩種方式更極致簡(jiǎn)單的方式:讓普通人可以用一句話的簡(jiǎn)單描述,即可自動(dòng)生成個(gè)性化3D虛擬數(shù)字形象。
你只需說(shuō)出你想要的形象,說(shuō)等于做,說(shuō)出來(lái)就是做起來(lái)。
比如——
1. 你用語(yǔ)言描述形象的五官特征或者服飾,例如:幫我生成一個(gè)大眼睛的穿著裙子的女生。
2. 你也可以用形容詞描述形象,例如:幫我生成一個(gè)英俊、幽默的虛擬形象。
3. 你還可以指定明星或職業(yè)等形象,例如:幫我生成一個(gè)長(zhǎng)得像xx明星的虛擬形象,等等。
然后,平臺(tái)系統(tǒng)就幫你生成、實(shí)現(xiàn)出來(lái),然后不斷調(diào)整、優(yōu)化。
“一句話生成”的設(shè)想,準(zhǔn)備在百度Apollo智能車(chē)聯(lián)的新一代車(chē)載虛擬智能助手中落地。
設(shè)想一下,你作為老司機(jī),你只需動(dòng)動(dòng)嘴,描述出來(lái),就可以輕松擁有一個(gè)專屬的虛擬形象助手,非常有趣、非常高效,而且生成的汽車(chē)虛擬助手也很多樣化和個(gè)性化。
這背后的黑科技,是百度增強(qiáng)現(xiàn)實(shí)技術(shù)部正在研發(fā)的3D虛擬形象智能化生成方案,通過(guò)在語(yǔ)音識(shí)別、自然語(yǔ)言處理、知識(shí)圖譜和增強(qiáng)現(xiàn)實(shí)等技術(shù)方面的深厚積累和跨模態(tài)多技術(shù)融合,加上海量的人物知識(shí)數(shù)據(jù),才有可能實(shí)現(xiàn)。
現(xiàn)在正在建立的是——
1)專屬虛擬形象知識(shí)庫(kù),實(shí)現(xiàn)對(duì)虛擬形象全維度的特征描述;
2)基于人臉圖片的形象重建、特征提取,實(shí)現(xiàn)用戶專屬個(gè)性特征的實(shí)時(shí)復(fù)刻;
3)基于語(yǔ)音/自然語(yǔ)言處理實(shí)現(xiàn)多輪對(duì)話式自然交互,使得用戶交互更加友好高效。
我認(rèn)為“一句話生成形象”的應(yīng)用場(chǎng)景遠(yuǎn)遠(yuǎn)不只是車(chē)載助手——
比如購(gòu)物者可以一句話生成自己希望的虛擬導(dǎo)購(gòu)員;學(xué)生可以一句話生成自己希望的虛擬教師;游客可以一句話生成自己希望的虛擬導(dǎo)游;甚至宅男宅女可以一句話生成自己的夢(mèng)中情人……
這些都是在科幻電影電視劇中出現(xiàn)的設(shè)想,很快就會(huì)來(lái)臨。
活在當(dāng)下,就是活在未來(lái)……
04
用AI增強(qiáng)
IP角色的表達(dá)力
前面介紹的都是如何生成IP形象,下面的則是如何增加IP角色的表現(xiàn)魅力來(lái)快速打造內(nèi)容。
這對(duì)短視頻制作尤其有用。
比如AI演同款,就是用AI技術(shù)自動(dòng)學(xué)習(xí)熱?短視頻,結(jié)合自己的IP角色,就能一鍵生成表演同款視頻了。
又比如TTS視頻,TTS指的是文字演繹,你只要輸入一段動(dòng)作描述文字,就能自動(dòng)生成一條相應(yīng)動(dòng)作的短視頻。
又比如AI唱歌,通過(guò)TTS轉(zhuǎn)化唱歌,虛擬人的口型、表情、動(dòng)作都自動(dòng)與歌曲合拍。
又比如AI跳舞,可以通過(guò)對(duì)2D動(dòng)畫(huà)的舞蹈進(jìn)行動(dòng)作識(shí)別,再讓3D人物學(xué)會(huì)跳舞。
還有AI動(dòng)效,通過(guò)圖像識(shí)別技術(shù),匹配UI動(dòng)效,增加角色的趣味性。
以及AI換臉,如果品牌更換代言人,可以直接在原有內(nèi)容上,更換品牌代言人的臉,快速生成運(yùn)營(yíng)內(nèi)容。
以上這些,顯然都能極大簡(jiǎn)化虛擬人短視頻生產(chǎn)的復(fù)雜度,甚至做到一鍵生成,這樣一來(lái),虛擬人短視頻就能具備和真人視頻比產(chǎn)量、比速度的能力。
傳統(tǒng)動(dòng)畫(huà)視頻的生產(chǎn)制作都是相當(dāng)緩慢的,即使想做快也快不到哪里去,往往還過(guò)于簡(jiǎn)陋。
而結(jié)合AI增強(qiáng)的虛擬人視頻演繹,將有機(jī)會(huì)開(kāi)啟一個(gè)超級(jí)生產(chǎn)的時(shí)代。這對(duì)現(xiàn)在的短視頻制作生態(tài)有相當(dāng)大的顛覆作用,也對(duì)未來(lái)產(chǎn)生不可估量的影響。
05
充分兼容導(dǎo)入
已有3D/2D模型
這意味著——現(xiàn)在已有的眾多3D、2D動(dòng)漫角色,可以直接在平臺(tái)上轉(zhuǎn)化為自己專屬的數(shù)字虛擬人,省去了IP創(chuàng)作方的再開(kāi)發(fā)時(shí)間。
也就意味著,現(xiàn)有眾多高創(chuàng)作力、低技術(shù)能力的IP開(kāi)發(fā)方,直接具備轉(zhuǎn)化自己的IP為虛擬人的能力,可以無(wú)需建模、快速做出自己的數(shù)字虛擬人,甚至是虛擬偶像。
設(shè)想一下到未來(lái),從喜羊羊灰太狼到熊出沒(méi)光頭強(qiáng),從哪吒到姜子牙,從許仙到白蛇青蛇,從刺客伍六七到非人哉、全職高手,都能彼此交互的場(chǎng)景吧。
這將開(kāi)啟全I(xiàn)P的虛擬世界……
“數(shù)字明星運(yùn)營(yíng)平臺(tái)”上的其他功能,還包括20位現(xiàn)成虛擬偶像,讓你可以先不急著打造新的IP,直接在平臺(tái)上選擇,快速一分鐘上崗。
以及三種驅(qū)動(dòng)模式:AI驅(qū)動(dòng)、擬合驅(qū)動(dòng)和真人驅(qū)動(dòng),讓你既可以不需要真人直接用AI智能驅(qū)動(dòng),也可以用真人在背后進(jìn)行“中之人”演繹。
還有豐富的數(shù)字資產(chǎn)庫(kù),包括多種風(fēng)格類型的場(chǎng)景庫(kù)、讓鏡頭表達(dá)更自由的機(jī)位鏡頭庫(kù)、道具庫(kù)(包括動(dòng)態(tài)道具)、貼紙庫(kù)、音效庫(kù)、服裝庫(kù)、發(fā)型庫(kù)、表情庫(kù)、動(dòng)作庫(kù)等等。
這些都很直觀易懂,不必做詳細(xì)介紹。
06
IP運(yùn)營(yíng)平臺(tái)
與
燦星計(jì)劃
“數(shù)字明星運(yùn)營(yíng)平臺(tái)”不只能開(kāi)發(fā)IP,還能運(yùn)營(yíng)IP,是一體化智能的閉環(huán)體系。
而“燦星計(jì)劃”是可以和所有現(xiàn)有IP運(yùn)營(yíng)者進(jìn)行合作的計(jì)劃。
簡(jiǎn)單來(lái)說(shuō),就是通過(guò)平臺(tái)的支持,讓不具備制作和運(yùn)營(yíng)數(shù)字虛擬人的IP開(kāi)發(fā)者、眾多品牌,直接具備開(kāi)發(fā)和運(yùn)營(yíng)能力。
從而增加IP所有者的各種收入。
比如,可以通過(guò)平臺(tái)進(jìn)行IP直播帶貨、IP直播社交、還可以進(jìn)行IP商業(yè)演出、進(jìn)行IP廣告代言、IP聯(lián)名,甚至可以讓IP參演各種影視。
既可以合入百度現(xiàn)有的商業(yè)生態(tài)里,進(jìn)行比如開(kāi)屏廣告、信息流廣告、直播賣(mài)貨和聯(lián)名營(yíng)銷等,也可以在百度之外的平臺(tái)上進(jìn)行。
平臺(tái)還建立了三維虛擬演播室系統(tǒng),可以直接將虛擬人IP內(nèi)容,推流到各大平臺(tái),而且不限于在百度,當(dāng)然,在百度生態(tài)內(nèi)還會(huì)有流量扶持計(jì)劃。
所有這些,都是通過(guò)“數(shù)字明星平臺(tái)”,用最簡(jiǎn)單、快捷的方式實(shí)現(xiàn)。
從現(xiàn)在到未來(lái),數(shù)字虛擬人有兩種最重要的表達(dá):
1. 一個(gè)是“代表我”:在社交娛樂(lè)等領(lǐng)域,虛擬形象成為人們創(chuàng)造個(gè)性化分身的基礎(chǔ)設(shè)施,在不同場(chǎng)合下,讓人們充分表達(dá)自我,釋放個(gè)性。
2.二個(gè)是“服務(wù)我”:各種服務(wù)趨向個(gè)性化、定制化,虛擬形象作為服務(wù)的實(shí)體化表現(xiàn),有機(jī)會(huì)成為人們的私人助理、朋友甚至伴侶,為用戶提供情緒價(jià)值和實(shí)用價(jià)值,參與用戶的生活。
前者是用戶個(gè)人的虛擬人化,后者是品牌、商業(yè)服務(wù)的虛擬人化,共同構(gòu)成了未來(lái)的元宇宙。
一個(gè)能簡(jiǎn)化數(shù)字虛擬人創(chuàng)意生產(chǎn)制作的新平臺(tái),能充分幫助實(shí)現(xiàn)這一切,產(chǎn)生無(wú)限的可能。
當(dāng)平臺(tái)讓數(shù)字虛擬人的開(kāi)發(fā)和運(yùn)營(yíng),變得簡(jiǎn)單、快捷、高效和低價(jià)時(shí),就有可能實(shí)現(xiàn)——眾多品牌+眾多創(chuàng)意小團(tuán)隊(duì)+個(gè)人創(chuàng)造者的共贏生態(tài)平臺(tái)。
數(shù)字虛擬人才能夠成為互聯(lián)網(wǎng)的基礎(chǔ)服務(wù),實(shí)現(xiàn)從購(gòu)物到娛樂(lè)、從教育到新聞、從內(nèi)容到社交的大爆發(fā),一直到元宇宙……虛擬人是元宇宙的奠基石。
作者:陳格雷(老小格)及團(tuán)隊(duì)
《超級(jí)IP孵化原理》作者,品牌IP孵化人
加微信SXSZZZ,了解更多的虛擬人平臺(tái)信息
參考文章:
「小圓桌」實(shí)戰(zhàn)型IP研習(xí)會(huì)
IP培訓(xùn)、品牌IP實(shí)戰(zhàn)演習(xí)、項(xiàng)目交流
有興趣的企業(yè)可加微信SXSZZZ……
俺的小書(shū)店開(kāi)業(yè)了
可買(mǎi)到俺親筆簽名的《超級(jí)IP孵化原理》
每一本都有作者親筆簽名,歡迎掃碼購(gòu)買(mǎi)
已有超過(guò)20多家頂級(jí)IP和品牌將此書(shū)作為案頭工具
歡迎合作IP咨詢、IP營(yíng)銷培訓(xùn)、品牌IP開(kāi)發(fā)
點(diǎn)擊可參見(jiàn)過(guò)往培訓(xùn)咨詢通道:微信SXSZZZ或致電15910881406
轉(zhuǎn)載請(qǐng)?jiān)谖恼麻_(kāi)頭和結(jié)尾顯眼處標(biāo)注:作者、出處和鏈接。不按規(guī)范轉(zhuǎn)載侵權(quán)必究。
未經(jīng)授權(quán)嚴(yán)禁轉(zhuǎn)載,授權(quán)事宜請(qǐng)聯(lián)系作者本人,侵權(quán)必究。
本文禁止轉(zhuǎn)載,侵權(quán)必究。
授權(quán)事宜請(qǐng)至數(shù)英微信公眾號(hào)(ID: digitaling) 后臺(tái)授權(quán),侵權(quán)必究。
評(píng)論
評(píng)論
推薦評(píng)論
暫無(wú)評(píng)論哦,快來(lái)評(píng)論一下吧!
全部評(píng)論(0條)