她叫Siren，不是人，也可以是所有人
首發：騰訊（ID：tencent）
今天，介紹一個人，名字叫Siren（塞任）。
朱唇輕啟，嘴角含笑，這半張臉很普通。
而整個人，看上去也很普通。但她不普通，因為，她，不是人。
作為數字虛擬人，她有自己的名字，Siren，意為古希臘傳說中半人半鳥的女海妖。由騰訊互娛事業群的NEXT Studio 與Epic Games、Cubic Motion和3Lateral等業內各領域頂尖公司聯合團隊開發而成。
她，實際上也是人。
她的面部形象，來自于中國的女演員姜冰潔。
但Siren 也可以是所有人，她能夠惟妙惟肖地“演繹”出其他人的表情，包括你的。
這項成果代表了目前實時渲染技術的業界頂尖水平。
Siren 所有的動作表情都是實時捕捉并實時渲染。只要將這套動捕設備，戴在你頭上。它能實時跟蹤200多個面部特征點，并將這些數據實時地映射到Siren的面部Rig（骨骼綁定）驅動Siren的3D臉部模型。動作表情以每秒60幀輸出在屏幕上。
最最重點的是——數字虛擬人是可以基于任何人的樣子進行掃描，掃描之后，TA就是被掃描者的復刻和分身了。而驅動這一數字虛擬人的表情和動作的，可以是其他人。
這樣，很多奇妙的事情就可以發生了。
周杰倫曾經幻想，能穿越時空，回到30年前，跟鄧麗君合唱一首歌。他說：那是多么榮幸的一件事啊。30年后，他真的，跟她，隔空對唱。
周杰倫沒有想到——這場機緣來自科技，是45名工程師耗2個月心血打造，這場重逢，讓兩個時代的歌手，在萬千目光中，共譜了一曲。
《速度與激情7》里，保羅·沃克在不幸離世前，電影只拍完了八成左右的戲份，劇組是如何處理余下未拍攝的呢？
導演只好用CG方式來制作數字替身，輔以3D跟蹤和相機運動匹配來完成剩余鏡頭，他還找來沃克的兄弟拍攝沃克的戲份。影片的結尾，導演把保羅之前的影像剪輯到一起，給影迷一份深刻動人的完美懷念。
過去，讓逝去的人重生，仿佛是一個無法實現的夢。科技讓一切變得可能。
Siren 的出現，可以讓人物“還原”，變得更簡單。
如果說3D“鄧麗君”、“保羅”像電影特效制作一樣，是一幀幀通過離線渲染摳出來的，那么Siren則是實時渲染出來的，可以實時互動。這個過程在15毫秒內完成，一般人幾乎感受不到延遲。
而為了追相片級的表現，整個開發過程，團隊都需要在不同光照條件和相機位置下對比真實照片和引擎渲染結果，一點點修正。
換衣服對于她來說，就是揮揮手，抖三抖的事。
現在Siren不管是高精度的面部動捕，還有長時間的身體動作捕捉，都一步步的做到盡可能的接近真實。有了它，你可以和任何一個“人”實時互動交流。
那么有了Siren之后，會帶來哪些改變？
我們可以大膽想象，未來，你也可以像《頭號玩家》里的主人公一樣，將自己的一舉一動映射到虛擬角色身上，他是通過魔幻眼鏡完成自由變身，而你通過Siren，完成置換。
除了在游戲中感受虛擬人的魅力，Siren在影視方向的想象空間也很大。
要知道，從替身到摳像，從人體皮膚的面具到真人倒模，在這些方面，電影的創意可謂層出不窮。
有了Siren之后，你再也不用擔心這些流量小花鮮肉的演技了，形象掃一掃，剩下的表情驅動請交給真正的“演技派”。
當然對于老藝術家，我們也可以在他們年輕時，用數字化技術將他們定格在最美的時候，讓他們的才華在藝術作品中以最鮮活的姿態存在。
除了成為“復刻”的明星，Siren本身是不是也可以成為全能偶像？
完全可以啊。初音未來多火不用說，洛天依的名字你想必也不陌生，那么對于更真實的Siren，潛力更是無限。
出個MV，上綜藝，甚至開演唱會，代言游戲都不是問題，如果被賦予人工智能，能夠想象的空間足夠大。
你也可以成為虛擬主播？
脫離各種后期加持，無需動漫制作，告別濾鏡、醫美，面對最考驗實時技術的直播，相信Siren小姐姐，也能應付自如，不用錄播，人設就立在那里?？赡苣闼吹降呐許iren背后，驅動的是一個摳腳大漢呢。
還能變身智能語音助手？
Siren現在還需要真人驅動，未來，是否可以由AI驅動？那么想象家里像《銀翼殺手》里，有一個虛擬伴侶或助手，想必很奇妙，叫你起床，關照你增添衣物，家里的一切因為她而變得舒心，感覺擁有了一個田螺姑娘呢。
“高保真，實時渲染，可交互，虛擬數字人....."
這些技術亮點背后，是Project Siren背后站著的一群人帶來的嘗試。這群由騰訊互娛事業群的NEXT Studio 與業內各領域頂尖公司聯合組成的開發團隊，正努力鍛造超真實虛擬偶像的可能性。
未來，充滿不確定性和挑戰，我們期待Siren的再一次“改變”。
轉載請在文章開頭和結尾顯眼處標注：作者、出處和鏈接。不按規范轉載侵權必究。
未經授權嚴禁轉載，授權事宜請聯系作者本人，侵權必究。
本文禁止轉載，侵權必究。
授權事宜請至數英微信公眾號(ID: digitaling) 后臺授權，侵權必究。
評論
評論
推薦評論
全部評論（9條）