Skip to content

這個IT大佬騙過了全世界,直到他自己跳出來揭露…

  • 新聞

英偉達今年 4 月份那場發布會,你曾看出什麽不對勁的地方嗎?

你品,你細品:

3648c8b564eddb41d6cc362ffa4617b7

剛剛,在計算機圖形學頂會 SIGGRAPH 2021 上,英偉達通過一部紀錄片自曝:那場發布會內藏玄機~

你看到了老黃,但也沒完全看到。因為,這是一場當麵 “造假” 的發布會。

d9b28ef3979efb43de0e0f51e21e3f68

畫麵中老黃的廚房、標誌性的皮衣,甚至他的表情、動作、頭發……全都是合成出來的。

 

這是一場開在元宇宙裏的發布會,發表演講的是英偉達 CEO 黃仁勳的數字人替身。

40d2a8a76ba803bf24bdd6987e37020b

彼時彼刻,恰如此時此刻。

黃老板真給自己找了個替身。

af3e4d20f85216d6223ae87a27519986

沒錯,全世界都被黃仁勳騙了

整整三個多月誰也沒發現。

而且不光他自己,大到廚房的家具抽屜:

db7dd534e9eb7c8291a515be4cd43714

小到廚房裏擺放的金屬罐、甚至是老黃的樂高小人,都是被渲染出來的:

ef3d1dbfe1b720bac3b3402e29da9e6c

知道真相的我就如同導演李安:

87ab39d5b899ca527941281ce0f7b769

這一切是怎麽發生的呢……

到底怎麽造假的?

數字人想要以假亂真,一定要做到細節豐富。

因為人腦專門有一套係統用於識別同類,有一點不對勁之處都會在幾毫秒之內引起警覺。

所以要造假的老黃,得到攝影棚裏拍上幾千張各種角度的照片,通過一套 3D 掃描,把他臉上的每道褶子都采集成數據。

e2af1460fb154b0d3d9559b5d600828f

為了讓效果更逼真,他那件拉風的皮衣還得單獨拍。

a4d8c2587007ad5299094a1e84edbd97

用得到的數據對老黃做 3D 建模,為了方便後期編輯,先要把他的頭發薅光!

9775076fee3add49ce276593c579a3cf

具體到手指的細節,也需要非常仔細地調整:

6c8b27fd9d3b5f44434c38d35cc559dd

建模完成好,下一步是讓老黃動起來。

不過這裏就不需要費時費力地進行手工操作了,AI 已經能夠勝任

c0c2fd2a5c5d5a38b831a6786d3cfb3e

就像這樣,用上最新的Audio2Face模型,AI
可以隨著語音播放自動調整模型的麵部動作表情。

動作是沒問題了,但是皮膚材質看起來還是不夠好,和發布會上的效果沒法比。

這就需要另一個 AI,用一張老黃的照片就能匹配上動作合成到動畫裏去。

3cb749d5e2a6ef2949e320378e781f05

身體動作就不用老黃自己采集了,而是找來專業的動作捕捉演員,畢竟 CEO 肯定時間有限。

8dc07cc5c7e42b187a3aa8ef238b6a6e

b8b7701fefaeeccef0f0ec0c0de01a25

這樣所有的前期準備工作就完成了,接下來是渲染。

看看這個自研的 Omniverse RTX 渲染器:

c0c2fd2a5c5d5a38b831a6786d3cfb3e

就真的是字麵意義上的實時光線追蹤,移動視角,調整光線都立刻完成更新。

這背後具體用了多少塊顯卡英偉達倒是沒具體說,總之是多 GPU+ 雲計算才能搞定。

這場虛擬發布會,總共有34個 3D
美術師和15個軟件研究人員參與。

他們一共做了21 個版本的數字老黃,從中選出最像的那個,做出了這場精彩的發布會。

還真是把全世界都騙過了。

8243edb0a8e2dd413f2fe621dcb45f7d

英偉達 ” 造假 ” 有多強

上麵這些 ” 造假 ” 的效果,背後都來自於一個名為Omniverse的平台。

沒錯,英偉達研發的計算機圖形學(CG)技術太多,多到已經能整合成一個平台了。

d4a54fcb6e9ca175d2ccee51b06a19cd

從 CG 到優化技術,從工具包到引擎,Omniverse 都有提供。

光看 Omniverse 所承載的 CG 技術,其實遠不止這次發布會用到的 ” 造假 ”
效果,它從渲染、材質,到光影、照明(光追、路徑追蹤等)都有涉及,還會不斷更新相關技術。

原本隻是一紙論文的技術,可能不久後就被英偉達放到了 Omniverse 上,不少都是與 AI 相關的技術:

例如,缺損像素修補、插幀,已經被用到老照片和古早視頻的修複中;還有基於 GAN 生成超分辨率圖像、直接把 2D 照片渲染成 3D
場景,都已經能直接在平台上使用……

c0db5231076ff2bb140093c22c47c975

Omniverse 上的渲染技術,究竟達到一個什麽樣的水準?

據英偉達表示,平台現在可以實時實現電影級別的畫質渲染。

以渲染中非常重要的光源模擬為例,我們都知道,真實世界的光源多種多樣,我們看到的其實是各種光照下的景物。

傳統的計算機渲染,至少需要將光源迭代30+次,才能達到逼真到毛發的效果,即使用最先進的機器渲染,每一幀也基本都需要幾十秒。

用上 Neural Radiance Cache 等技術後,結合 RTX GPU 硬件和 Omniverse
平台,光源渲染直接就能實時進行。

例如,這次 GTC 大會上對於主機的渲染,就采用了 Omniverse 平台的技術:

c0c2fd2a5c5d5a38b831a6786d3cfb3e

除此之外,包括 LOD 自動生成等技術也能用AI
節約計算量
,同時保證足夠好的渲染效果。

不止是 ” 以假亂真 ” 的渲染效果,Omniverse 還能完成更多意想不到的 AI 技術。

英偉達利用數字人實時渲染技術,在 Omniverse 中就能構建更逼真的、更符合物理定律的人類模型。

例如,幫助車輛、自主機器、機器人等更好地識別,真實的人類是什麽樣的,從而更好地設計工廠(圖中為數字人):

344b65cd31b37c80f2ce3f8ab797ba2f

這是英偉達在 Omniverse 上更新了另一項數字孿生技術(Issac Digital Twin),將機器人 AI
放到虛擬環境中訓練完成後,可以直接部署到真實環境中

741e03b0d202ecda97b850089c35cf6e

目前,寶馬已經用英偉達的數字孿生技術,對數字工廠的生產流程進行了優化,效率直接拉高
30%

看看這個渲染的速度:

745989c435e13e2c110bb9d0be2d4fc8

具體渲染效果來看,連光照和細節都能被模擬出來。

c0c2fd2a5c5d5a38b831a6786d3cfb3e

不止是寶馬工廠,包括機器人仿真、自駕車仿真在內的一係列技術,也會用到 Omniverse 平台。

c0c2fd2a5c5d5a38b831a6786d3cfb3e

c1d5eba5adfbdbec5fb89f3c7758e767

例如,自動駕駛和工廠的 AI
檢測可能存在行人誤判,將街頭、公告張貼的人臉圖片識別為行人,導致事故發生。將逼真的數字人和渲染等技術結合後,就能在仿真環境訓練下模擬行人,讓
AI 學會判斷圖片和真人的區別。

fff01a37cedb37e40a4c562155751f5f

從效果到效率,英偉達都直接刷新了人們對 ” 元宇宙 ” 的認知。

重新定義「元宇宙」

號稱 ” 永遠實時在線 ” 的 Omniverse,是英偉達打造元宇宙的關鍵。

它不僅能跨平台支持所有用戶的物理渲染、模擬和仿真,還能讓創作者、審核者在任何地方,隻通過軟件應用就在一個共享的虛擬世界中進行合作。

畢竟,Omniverse 本身就構建於通用場景描述( Universal Scene
Description,簡稱 USD ) 之上。

這是一種開源 3D 場景數據標準和文件格式,USD 之於 Omniverse 就相當於 HTML 之於互聯網。

USD 由皮克斯開發,現在成了英偉達、皮克斯和蘋果共同推廣的行業標準。USD 注重非破壞性便捷和跨軟件協作,是 x86、arm
平台以及各種軟件都程能夠統一到 Omniverse 平台上的基礎。

c0c2fd2a5c5d5a38b831a6786d3cfb3e

目前,全球已經有 500 多家公司的專業人士上手使用了
Omniverse。這其中包括美國航天航空製造商洛克希德馬丁公司(用它做山火模擬)、曾榮獲艾美獎的《南方公園》工作室等知名企業。

國內央視的《飛向月球》太空紀錄片,也同樣有用到 Omniverse,尤其是裏麵的數字人:

1eca7462fddbfcb9de55652b6e2a9ce5

從 Omniverse 硬件和軟件的支持情況來看,英偉達這一次更新也真的是誠意滿滿。

” 將數百萬新用戶帶入元宇宙世界 “,真的不是說說而已。

首先,Omniverse
這一次集成了BlenderAdobe來實現大規模擴展。

Blender 是全球領先的開源 3D 動畫工具,他們將在 Blender 3.0 版本加入 USD 支持,使用戶能夠在
Blender 中直接訪問 Omniverse 製作流程,這無疑會讓創作者們的效率直線 up。

29cab71936e0125924af7eb7a90a1e59

Adobe 就不用多介紹了,家喻戶曉。

現在,他們正在和英偉達合作開發一個為 Omniverse 提供 Substance Material 支持的 Substance
3D 插件。

使用這個插件,可以讓用戶在 Omniverse 中直接調整 Substance 3D 中的素材。

這能為用戶在改稿過程中,節省導出、重新上傳的時間。

與此同時,英偉達還發布了一個人工智能 3D 建模擴展:GANverse3D –
Image2Car

它可以讓 AI 進行 3D 建模變得更加容易。

隻需通過一張汽車照片,GANverse3D 就能建立出一個虛擬的 3D 模型。

這無疑讓 3D 畫師們創建場景變得更輕鬆了。

393de0a3723a03548b79dbcd7401f86c

其次,在硬件上,NVIDIA RTX 和 GeForce RTX 係列都支持
Omniverse。

這不,英偉達同時還發布了小巧、節能的 RTX
A2000,它適用於各種標準和小型工作站,可以說是專為創作者的日常工作而設計。

英偉達放言稱,A2000 將會成為數百萬設計師進入元宇宙的門戶。

909c5b849c5dfa8f69cc28f31aca5236

而 Omniverse 的生態係統也在持續壯大,Adobe、Autodesk、Bentley Systems
等多家軟件公司都已加入 Omniverse 的生態圈。

ace18f831f4de1732114816888feea1a

現在,Nvidia Omniverse 企業版的訪問名額已經 ” 開搶 ” 了,華碩、BOXX
Technologies、戴爾、惠普、聯想、必恩威和超微等平台上都能使用。

不知道以後英偉達的發布會還能不能當真(手動狗頭)。

反正老黃的假臉是一臉真誠~

fa3641c5e327692e94075e1102551926

One More Thing

回到 4 月那場發布會。我們在英偉達自曝紀錄片中,隱約讀出另一個事實,當時的老黃是真真假假,虛實交替的。

那麽,哪一段是真?哪一段是假?

作為找茬八級團隊,怎麽能這麽輕易就給人騙過去?於是,我們重新去回看了一遍 4 月份那場發布會。

果不其然,我們發現了一些不對勁的地方。(注意內搭衣服領口和皮衣)

74f8f6b0a2d23a5ea45dde336a611a42

這是老黃第一次在發布會上出現時候的樣子。看上去問題不大是吧?OK,接著往下看:

d959bc724ada10205e1fbb4198f02ad2

這是剛剛那張圖 4 分鍾之後,老黃的樣子。注意到什麽不一樣的地方了嗎?

請注意,他身上忽然間變成了另外一件皮衣,裏麵穿的也從 Polo 衫變成了圓領 T 恤。

如果你再仔細一點看,你會發現他廚房有些物品的放置也變了。

還有個最直觀的區別:老黃本人,還有他背後的廚房,怎麽好像分辨率突然提上去了(不是我網絡問題啊)?

高到腦門上的抬頭紋都多了幾條。

這還沒完。

16a1c975967fa1bb304cc1a63cbef3de

到發布會後半段,老黃穿著同一件皮衣,可是裏麵的衣服又換回了 Polo 衫 。

4e1a476799a0b7d85f64427ffc3bf7bc

過了一會,他搖身一變,把皮衣和 Polo 衫全換了。

好家夥,你擱這玩排列組合呢?

真搞不懂,老黃來來回回在這換裝,是圖個啥。除非這是英偉達故意的。

41316f9e5048db625a24676518adae58

於是,我們拿著放大鏡去看了視頻,終於注意到,這段老黃手上的動作,有明顯的不自然。而且畫麵也是糊的。

懂了:)

總之,一段視頻騙了全世界 3 個月,不得不說,黃老板真是又高又硬。

bb6e1a81cafb4f69c4a8c8b22b85081f

贗品是個好東西!

英偉達紀錄片回看:

https://www.nvidia.cn/events/siggraph/

face-vid2vid 相關論文:

https://arxiv.org/abs/2011.15126

華客新聞 | 時事與歷史:這個IT大佬騙過了全世界,直到他自己跳出來揭露…

相关推荐: 雙總理爭權、幫派暴力及疫情上升 海地被黑暗籠罩

海地面臨政局不穩、暴力四起、疫情上升等3大威脅,外國憂心恐將爆發難民潮。(法新社) 〔編譯孫宇青/綜合報導〕我國邦交國海地總統摩依士7日被暗殺後,國家陷入嚴重亂局。《紐約時報》和《華盛頓郵報》指出,海地社會動盪已久,如今又出現臨時總理喬塞德(Claude Jo…