來源:量子位
賈浩楠 曉查 發自 凹非寺
量子位 報道 | 公眾號 QbitAI
3D游戲人物建模,虛幻引擎可以算標桿了吧?
要是我告訴你,只要會自拍,就能用虛幻引擎開發出和3A游戲一樣逼真的3D角色呢?
表情、毛發,甚至是臉上的皺紋,都栩栩如生。
沒錯,不需要學游戲開發,也不用苦練美術功底,隨時隨地打開手機,虛幻引擎隨便用!
Epic為iPhone推出了一個App,利用蘋果的增強顯示工具ARKit和前置深感攝像頭(也就是玩Animoji用的那個),可以造出非常逼真的虛擬人。
這款工具到底有多強大多方便?油管上有網友直接在demo下感嘆:
正勤學苦練想當3D建模師呢,虛幻引擎直接把這個職業消滅了…..
iPhone開發3A大作第一步:打開前置攝像頭
Epic開發的這套3D人物實時建模工具,名叫MetaHuman,超級人類。
作為一款游戲開發工具,他最顛覆的地方,在于一改以往CG制作中,復雜且昂貴的動作、表情捕捉技術。
比如,“忍者理論”使用虛幻引擎開發《地獄之刃》時,女主的動作、面部表情,都是真人演員在佩戴特征采集裝置的情況下,一幀接一幀表演出來的:
而MetaHuman利用機器學習,可以直接識別演員面部表情細節,實時反應在已經完成渲染的人物模型上:
成品效果有多好,不妨來看一下:
因為太過逼真,并且是實時投射,這個應用甚至引起了不少人的擔心
這項工具意味著,任何人,在任何時間、地點,都能無障礙變成其他人。
為了安全,有必要給作品加水印標簽,或者開發識別機制。
這還僅僅針對手機應用端的強大功能。
虛幻引擎4.25中集成了MetaHuman工具,App內的數據,可以直接導入PC開發平臺。
在平臺上,虛幻引擎4.25中集成了MetaHuman工具,App內的數據,可以直接導入PC開發平臺。
除了能實現利用視頻材料捕捉表情,還集成了人物模型開發工具,毛發、年齡、膚色等等細節,能實時調整:
對于開發者來說,用iPhone開發3A大作,方便又省錢,還大大降低了游戲制作門檻。
如果你不是開發者,Live Link Face中已經建好的任務模型,也能讓你玩個痛快。
從專業設備到iPhone
幾年前,面部捕捉還是一項門檻很高的技術。
虛幻引擎全新的面部捕捉方法讓《地獄之刃》的開發過程改頭換面。
2016年,“忍者理論”為了讓女主角更逼真,請來了真人進行面部捕捉。但那時候還要用到專業拍攝設備,角色臉上的關鍵點也要貼上標記。
到了2019年發布《地獄之刃2》預告片時,游戲主角的面部表情已經變得更加自然了,動作幅度也更大。
雖然《地獄之刃2》還沒有開發完成,但Epic透露可以通過“元人類創造者”(MetaHuman Creator)用iPhone錄制和生成游戲角色表情。
其中的法寶就是iPhone的前置深感攝像頭。
游戲角色的創作甚至可以像直播一樣實時進行。
實際上,在2018年已經有公司在用手機開發游戲了,不過他們使用的是Unity引擎。
當時,來自芬蘭的游戲工作室Next Games使用iPhone X的前置深感攝像頭來記錄面部動作,再一鍵傳回電腦。
Epic則在去年實現了實時的面部捕捉:這邊iPhone錄制人臉,那邊電腦上實時輸出角色動作。
這款用在iPhone上的面部捕捉App去年已悄悄上架,只要注冊成為一名虛幻引擎的開發者,經過一番簡單的設置,你也可以創造游戲角色。
首先在電腦端創建一個虛擬人的3D模型,然后連上局域網內的iPhone即可。
整個虛擬視頻的生成過程都是實時的。面部捕捉過程會生成一個mov視頻文件,和一個csv原始數據文件。
如果直接把輸出的3D數據進行復原,那么在iPhone的眼中,你的臉會是這樣的。
除了人臉外,虛幻引擎和ARKit還能碰撞出更高級的玩法。
讓物體在空中漂浮,光影效果讓人難辨真假:
或者把二次元妹子放在桌上。
看到這些,你是不是也想去做游戲開發了?
參考鏈接:
[1] https://twitter.com/pvalexander/status/1364422983926771719
[2] https://www.theverge.com/2020/7/9/21318440/unreal-engine-facial-capture-ios-app-arkit-truedepth-front-facing-camera-animation
[3] https://docs.unrealengine.com/en-US/AnimatingObjects/SkeletalMeshAnimation/FacialRecordingiPhone/index.html
[4] https://docs.unrealengine.com/en-US/AnimatingObjects/SkeletalMeshAnimation/FacialRecordingiPhone/index.html
(聲明:本文僅代表作者觀點,不代表新浪網立場。)