光是自拍不夠過癮?來看看這個能把自拍照片轉成為三維立體頭像的應用軟體。
加州初創公司推出智能 3D 模型軟體 Loom.ai ,利用機器學習和電腦視覺技術,根據使用者 2D 平面照片,來生成 3D 頭像。該公司表示,此技術能做到:
- 媲美 3D 掃描的的視覺保真度
- 頭像是可動的,就像動畫人物一樣
- 演算法生成的 3A 級臉部肌肉,自動符合不同的臉型
- 頭像可以透過嘴巴、眼鏡、臉部肌肉的活動做出各種表情,表現豐富的情感
- 去除照片光線。生成的頭像可以融入各種光線環境,來產生不同光照效果
光說無憑,我們來看看實際效果。開發者上傳了一幫名人的照片,給 Loom.ai 平臺。結果變成了這個樣子:
看出是誰來了嗎?沒錯,他們是安潔莉娜裘莉、馬斯克和威爾·史密斯。裘莉的性感厚唇很傳神,不過髮型是怎麼了?開發人員們,給 Loom.ai 加幾款髮型吧!如果便是不了披肩長髮。那廣大自拍女神怎麼辦呢?
別管頭髮的問題,我們來看看眼部細節:
是不是很傳神呢! Loom.ai 不僅可以做高擬真的細節,還能讓頭像高度虛擬化,成為可愛的動漫人物:
這些 3D 頭像可以表現傷心、快樂、憤怒和感興趣的情緒。但目前也只能這樣,Loom.ai 只開發了這麼幾種表情包。該系統只需要一分鐘來生成 3D 頭像,再利用一分鐘生成個性化的面部表情。它使用 Sketchfab (一個 3D 模型的展示、分享網站)來查看完成的頭像,而上傳頭像至 Sketchfab 需要五分鐘。
好消息是,這家初創公司正在開發讓用戶改變頭像髮型(安潔莉娜裘莉鬆了口氣)、眼睛顏色,以及添加裝飾品(眼鏡)的功能,以便把 Loom.ai 應用於3D 虛擬世界中的合成動畫場景和動態互動。
開發背景
Loom.ai 是視覺特效藝術家 Mahesh Ramasubramanian 和 Kiran Bhat 的研究心血。這兩人的來頭都不小。Mahesh Ramasubramanian 此前在好萊塢夢工廠(DreamWorks Studios)工作,為《史瑞克》、《功夫熊貓》等動畫電影擔任視覺效果監督。而 Kiran Bhat 之前在盧卡斯電影公司,為《加勒比海盜》和《復仇者聯盟》做特效。
Kiran Bhat,Mahesh Ramasubramanian 和同事 Akash Garg 的 3D 頭像。這麼有科技感,不愧是 Loom.ai 開發者。
Kiran Bhat 對福布斯說:「我們認為需要把使用者帶到(虛擬空間)體驗之中。這意味著,要找到一種把普通用戶像電影演員那樣數位化的方式(但不能那麼貴)。」
於是,他們開發出這款只需要一張照片,就能對整個頭部進行建模的軟體。機器演算法會識別照片中的臉部細節。至於照片中無法獲得的資訊(畢竟只有臉的正面),人工智慧會自動進行填充。
隨著 Loom.ai 處理越多的照片,它將會不斷進步,而補充臉部特徵和表情的能力也會不斷提高。
這項技術仍舊在 beta 測試階段。公測之後,用戶只需要登錄 Loom.ai 網站,上傳臉部正面照片(謝絕 45° 仰望天空),等待兩分鐘,就可以獲得你自己的、或者你想創造 3D 頭像的那個人的3D頭像。開發者目前尚未公佈 iOS 或 Android 手機端的計畫。
未來
Loom.ai 將同意協力廠商公司使用,讓他們把 3D 頭像功能加入自己的平臺。事實上,已經有些公司在秘密測試 Loom.ai 。但開發者拒絕透露這些客戶都有誰——除了 Facebook。Mahesh Ramasubramanian 表示:
「Facebook 有海量用戶。如果他們用 Loom.ai 技術來把用戶的 2D 頭像變成會做表情的 3D 頭像,我們會很高興。」
隨著 Oculus VR 的熱銷,Facebook 甚至在十月份推出了 VR 版的 Facebook,用戶可以加入 VR 虛擬空間,可以一起看電影,也可以去火星旅遊。但目前 Oculus 的 Toybox 沙箱遊戲還是這樣的:
可以想像,若舉行 VR 情人節集體活動,出現頻率最高的一句話將會是:“親愛的,哪個是你?”從這可以看出,Loom.ai 在 VR 的應用潛力幾乎是無限的。雷鋒網認為,真人 3D 建模是 VR 體驗的關鍵一環——這決定了你能否在 VR 中辨認出熟悉的朋友。將來和女朋友在 VR 中探索世界,登喜馬拉雅,漫步火星,但你一定不願像圖中這樣,兩個“光頭”含情脈脈,對吧?
這兩年有個很熱門的動漫《刀劍神域》(Sword Art Online),不知各位是否看過?在它的設定中,被困在 VR 遊戲「刀劍神域」裡的玩家,由於 VR 顯示事先拍下了真實照片, 所以每個人在遊戲裡會以真面目出現。正因如此,後來桐人和亞絲娜的愛情情節才成為可能(否則面對千篇一律的網路遊戲角色造型,戀愛就談不下去了吧)。
《刀劍神域》戴著腦電波 VR 頭盔(真的是頭盔啊)的女主角 Asuna
雖然原著出版時,Loom.ai 還未誕生。但《刀劍神域》未卜先知的為這類 3D 建模軟體的 VR 遊戲應用指明了方向。即便是傳統桌游、網路遊戲,比如《模擬人生》、WOW 和《九陰真經》,如果能讓玩家用自己的“真面目”遊戲,也應該會更受歡迎吧。
雖然 VR、遊戲、動漫電影可能是 Loom.ai 在將來潛力最大的領域,但不可忽視它眼下可能掀起的社交革命——Facebook 已經在進行相關測試。若 Facebook、微信這樣的社交平臺推出一個小遊戲,讓用戶創建、分享自己的 3D 頭像,它可能會像此前的「臉萌」一樣,迅速紅遍世界。但這還不是最重要的,更有前景的是 Mahesh Ramasubramanian 所指出的:讓 Facebook 和微信這樣的社交應用,支援動態的真人 3D 模型來做頭像——當你點開好友主頁,看到的不再是她的大頭貼,而是會賣萌、會對你笑的立體頭像,說不定還能配合表情說個“藍瘦香菇”,那會多麼有趣?至少,玩這樣的社交軟體不必再通過看自拍照「猜真人」了。
一個顛覆性的事實是:人體 3D 掃描技術其實一直存在,只是從未使用於大眾消費者,而 Loom.ai 有能力讓它迅速普及。 此前,如果有人想要這麼做,要去找專門的遊戲、電影工作室,還要付一大筆資金。所以它根本無法在大眾市場商業化。對遊戲產品和社交軟體來說,由於沒人用,也確實沒有必要支持真人 3D 頭像。
但現在不一樣了,通過 Loom.ai ,每個人都可以為自己建立數位 3D 頭像。在將來,Loom.ai 是否能支援掃描全身照片,對人體 3D 建模呢?
感興趣的讀者,可以去 Loom.ai 網站預約登記,開放公測時網站將會通知你,並獲得第一批嘗鮮的特權。在此,雷鋒網善意提醒 Loom.ai ,公測前務必升級伺服器,防火防盜防流量爆,具體請參考黑色星期五和中國雙十一。
via dailymail