作為圖形技術(shù)領(lǐng)域的龍頭,英偉達(dá)正在積極向全軟件堆棧的AI計算平臺公司轉(zhuǎn)變,借助Omniverse平臺切入元宇宙。
11月9日舉行的GTC 2021大會上,英偉達(dá)最新推出了用于生成交互式AI化身的技術(shù)平臺阿凡達(dá)(NVIDIA Omniverse Avatar),并同時發(fā)布3個虛擬人。
據(jù)介紹,阿凡達(dá)平臺集成了語音、計算機視覺、自然語言理解、推薦引擎和模擬方面的技術(shù),生產(chǎn)的Avatar是具有光線跟蹤3D圖形的互動角色,可以看到、說話、就廣泛的主題進(jìn)行交談,并理解自然對話的意圖。
在共同虛擬“元宇宙,未來之‘應(yīng)’”會議現(xiàn)場,英偉達(dá)中國區(qū)Omniverse經(jīng)理何展進(jìn)行了《從Omniverse“技術(shù)底座”看元宇宙的可能方向》的主題演講,分享了他對于元宇宙的理解和發(fā)展方向判斷。
在何展看來,元宇宙可以理解為人類的新技術(shù)革命,或者是新的體驗方式。人、物、場景、意識和信仰、數(shù)字經(jīng)濟體系是元宇宙中需要創(chuàng)建的五大要素,這些要素都需要一些平臺和工具創(chuàng)建出來。
英偉達(dá)的元宇宙概念平臺Omniverse作為一個技術(shù)底座,涵蓋英偉達(dá)過去二十多年積累的科學(xué)技術(shù)的經(jīng)驗和算法,提供給開發(fā)者進(jìn)行APP和應(yīng)用的創(chuàng)作。
以下英偉達(dá)中國區(qū)Omniverse經(jīng)理何展在共同虛擬“元宇宙,未來之‘應(yīng)’”會議獨家的主題演講及會后視頻訪談。
點擊視頻了解現(xiàn)場獨家訪談
主題演講
Omniverse平臺是我們元宇宙概念平臺,今天不過多講技術(shù)的一些內(nèi)容,主要是想和大家分享一些我們的看法。
大家都談元宇宙,今年3月份到現(xiàn)在我已經(jīng)講了200多場的元宇宙。在介紹之前要跟大家分享,英偉達(dá)其實起名字非常有意思,其實它是一個希臘的神靈,對瞳孔和視覺非常敏感的神靈的名字。
我有三個問題跟大家交流。
第一個問題:
為什么2018年之后的特效等可視化技術(shù)制作二隊作品觀看體驗好?
我們不過多講技術(shù),從1968年開始,無數(shù)的算法科學(xué)家在研制和圖形相關(guān)的算法,直到1986年出了渲染方程,再到2018年提出算法實時光線追蹤,有了算法專家不斷地科學(xué)進(jìn)步,才有了新的視覺體驗。
有兩個詞大家記住就好,“光柵化”和“光纖追蹤”,光柵化就是騙大家眼睛的。2013年大家還記得一個片子《怪獸大學(xué)》,皮克斯出的,這部片子之前全部都是騙人的,所有的特效制作都是騙人的,在之后有了實時光線追蹤就不一樣了。為什么說騙人呢?要過渡新的技術(shù)呢?難點就是周圍看不到光線,計算機看不到光線。
第二個難點,周圍有什么?我沒有辦法模擬,所以必須要過渡到這個階段。后來我們提出實施光線的追蹤技術(shù)的圖靈架構(gòu),時間原因不展開了。
迪士尼和皮克斯為什么從過渡階段選擇了英偉達(dá)呢?這里面有一個對比,大家可以看到,先從成本上的對比,有了成本大幅度的降低,同時我們又能夠保證渲染的質(zhì)量,所以科技的進(jìn)步一定會觸動這件事情的過渡和發(fā)展。
第二個問題:
專業(yè)圖形可視化技術(shù)+AI=?
第二個問題,有這樣好的圖形可視化技術(shù),現(xiàn)在又有近5、6年非常熱的AI,加在一起會出現(xiàn)什么?我?guī)韼讉€案例跟大家分享,新的市場市值是很恐怖的數(shù)字,他們兩個迭代在一起會創(chuàng)造4000億美金的市場。
第一個例子,這是2021年疫情最嚴(yán)重的時候,奧斯卡頒的視效大獎叫做《愛爾蘭人》,這部片里阿爾·帕西諾從這個人物20歲演到了73歲。制作過程非常難,導(dǎo)演也非常不想讓他戴著動捕頭盔,因為會影響他的表演。所以我們和奈飛和工業(yè)光魔一起開發(fā)出一套算法軟件平臺,讓電影制作的時候,從人物20歲到73歲所有的表演,全部用AI和圖形可視化技術(shù)完成,這是非常顛覆性的事件。
第二個例子,大家看到這個視頻是攝像機拍攝的,但是它同時生成了360度任意一個點去看這個人的視頻,這個叫做體積視頻,這是用AI,用圖形可視化的技術(shù)實時生成的。
今年的東京奧運會直播,跳馬比賽、籃球比賽等,我們跟央視首次進(jìn)行合作嘗試這樣的技術(shù),在直播過程當(dāng)中給觀眾不同的視角,大幅度提升了觀看體驗。我們明年冬奧會也會有這樣的體驗,大家可以在滑雪運動員翻高山的時候感受到空中翻騰,都是實時AI生成的。
第三個例子,跟宋婷的理念很像。我們錄了一段計算機深度學(xué)習(xí)的過程,這是我們以120萬張地球的景觀圖片,利用我們的StyleGAN2算法生成幾幅油畫的過程,計算機腦子轉(zhuǎn)得非常快,有藝術(shù)感。
第四個例子,我們做了5分鐘,只截取了14秒放在大會上進(jìn)行演講。五分鐘,如果好萊塢用傳統(tǒng)的技術(shù)做制作,假設(shè)100人的團隊,至少要需要4-6個月。我們7天做完的,而且是十幾人的團隊。這就是算法帶來以前不可能的,顛覆性的過程,這里黃顏色的都是我們算法人員研發(fā)出來的平臺可以實現(xiàn)的顛覆性的進(jìn)步。
第三個問題:
NVIDIA Omniverse和元宇宙
我們的元宇宙概念平臺Omniverse,不管怎么樣大家討論元宇宙是什么樣,我們要看到人類新的體驗,與之帶來的巨大的技術(shù)革命,用這個觀點看就非常棒了。
Omniverse這個平臺大家記住它是一個技術(shù)底座,不是代替Maya,unreal,unity的這些傳統(tǒng)的DCC軟件。他是什么呢?只要涉及AI,涉及高性能計算,涉及圖形學(xué)技術(shù)的都來可以調(diào)用這些我們過去二十多年積累的科學(xué)技術(shù)的經(jīng)驗和算法,還有各種各樣的軟件。我們還是提供開源的部分,大家可以基于這個平臺來做一些APPS和應(yīng)用。
這是我們Omniverse平臺的介紹,我們大概有250萬的開發(fā)者一起共建生態(tài)。
所以技術(shù)離不開幾大環(huán)節(jié),需要有開放的語言,一定要改變現(xiàn)有的互聯(lián)網(wǎng)架構(gòu),一定要有沉浸式的交互體驗,還有數(shù)字經(jīng)濟體。
給大家分享一下我們的新做的成果,大家可以看到,這個是我們和洛克希德·馬丁合作的,加州的火燃得非常兇猛,美國人也在想怎么盡快滅火。這是我們Omniverse平臺制作的,真實的火焰燒在森林不同的結(jié)構(gòu)中,結(jié)合了當(dāng)?shù)貧庀髮W(xué)的各種數(shù)據(jù)復(fù)現(xiàn)出來的效果。其實大屏展示的效果非常逼真,而且實際上的火什么時候燃燒成什么樣子,計算機模擬出來就是什么樣子。
最后給大家分享我們能做的,不單單是玩游戲,我們是面向全部行業(yè)的。
部分視頻訪談問答
EW:請介紹下您公司以及公司在產(chǎn)業(yè)中的定位。
何:英偉達(dá)其實上是在圖形可視化的 GPU、顯卡以及芯片相關(guān)產(chǎn)品,在國際上處于領(lǐng)導(dǎo)的地位的一家公司。在過去的五六年間,其實我們引入了 AI的一些深度學(xué)習(xí)的方案,包括硬件、軟件,整個算法層面的一系列產(chǎn)品。所以其實我們公司在逐步向全軟件堆棧的AI計算平臺公司去轉(zhuǎn)變,這是我們最近提出的公司戰(zhàn)略方向。
EW:公司的突出優(yōu)勢是什么?介紹一下代表性案例。
何:剛剛我介紹了我們公司是一個全軟件堆棧的AI計算平臺公司,前面的定語是全軟件堆棧,其實我們一直是一個軟件平臺公司,一個計算平臺公司。公司其實向全球提供從 AI到HPC,也就是高性能計算,還有圖形可視化相關(guān)的三大方向的產(chǎn)品軟件,硬件,各種算法。
比如說我們的硬件平臺,我們有AI的超級計算機、DGX等等這樣產(chǎn)品,還有加速度的計算卡,比如說我們新推出的安培架構(gòu)的A100。軟件這邊我們會有元宇宙概念平臺Omniverse,以及我們的一些vGPU虛擬化的一些平臺軟件。算法層面,我們還有近千種不同算法的開源平臺,供全球的開發(fā)者免費使用,持續(xù)地開發(fā)。
所以我們的產(chǎn)品有軟件、硬件、算法,還有各類SDK的平臺,遍布在各個行業(yè),能提供面向AI,面向高性能計算,面向圖形可視化這樣三大方向的產(chǎn)品。
EW:對公司而言,現(xiàn)階段中國市場出現(xiàn)的需求或機會?
何:我本人從今年3月份開始,已經(jīng)有200多場的元宇宙相關(guān)的演講。大家都覺得今年是元宇宙元年,突然這個概念變得非常熱。其實上我想和大家分享的是,元宇宙可以理解為一個人類的新技術(shù)革命,或者是新的體驗方式,用這樣的方式去和大家分享,大家都會輕松一些。
關(guān)于元宇宙大家都有不同的聲音,有人覺得是不是太虛了,是不是太超前了。其實我覺得我們需要更務(wù)實一些,面向一個新技術(shù)概念的出現(xiàn),面向一個新時代的到來,我們需要懷抱一顆對新科技進(jìn)步的敬畏之心,生活在這個時代,能夠和元宇宙這樣類似的新技術(shù)一起生存成長,也需要懷抱一顆感恩之心。
所以我們?nèi)绾慰创钪妫鋵嵥鼤尤祟惏l(fā)展的變革。它的概念非常大,它包含著數(shù)字孿生,包括我們剛才提到的數(shù)字人應(yīng)用,還有一些沉浸式體驗,像XR技術(shù)的推廣,這些全都包含在里面,所以它的概念非常大。
總結(jié)一點,為什么現(xiàn)在大家都在說這個概念,是因為人類科技的進(jìn)步,在過去的幾年里,在這幾個不同的方向上集中地落地和應(yīng)用的爆發(fā)。所以不管是國際知名的大公司,還是國內(nèi)的這些科技公司的中堅力量,也都看到了它能夠?qū)崿F(xiàn)的過程的客觀現(xiàn)實,所以現(xiàn)在大家都在這里面。
最后再說一點,元宇宙的概念,不是一家公司可以完成和實現(xiàn)的,需要這些所有有興趣,有意愿看到它未來發(fā)展方向的平臺和公司一起共建和努力。
EW:對元宇宙的趨勢,有哪些布局和準(zhǔn)備?
何:今天的我們的Omniverse的平臺,更像是我們提出創(chuàng)建元宇宙的一個平臺。元宇宙空間里可能有人,有事物,有環(huán)境,還有一些意識信仰,一些數(shù)字經(jīng)濟體,這些它都需要一些平臺和工具創(chuàng)建出來。我們其實定位于創(chuàng)建和連接,通過AI技術(shù),通過圖形可視化技術(shù)和元宇宙空間進(jìn)行連接的這樣的一個平臺。
我們這個平臺已經(jīng)布局至少三年多,我們不是為了元宇宙而創(chuàng)建這樣的平臺,而是我們看到的技術(shù)需求和技術(shù)的發(fā)展趨勢,能夠促進(jìn)和督促我們推出這樣的平臺。所以我們研發(fā)了三年多了,實際上正式是在2019年發(fā)布,然后去年年底在全球進(jìn)行公測。今年我們又發(fā)布了面向企業(yè)級的Omniverse的Enterprise平臺,所以這個布局實際上早早已經(jīng)做好了。
最后,其實Omniverse平臺的提出,背后邏輯就是在于我們要去面向多行業(yè)需求。比如我們在年初發(fā)布的寶馬工廠的數(shù)字孿生的概念,這是汽車相關(guān)的;發(fā)布了和愛立信在邊緣計算,在5G計算相關(guān)的一個案例;發(fā)布了在媒體娛樂制作相關(guān)的一些案例;還發(fā)布了 KPF建筑方向的應(yīng)用;同時我們還有科學(xué)運動仿真的各類的應(yīng)用,面向的行業(yè)是方方面面的。我們也有信心,我們Omniverse的平臺可以提供到面向多行業(yè)不同需求的技術(shù)和以及相關(guān)的硬件資源的匹配。
EW:希望未來在哪方面有所突破?
何:我們認(rèn)為在研發(fā)也好,發(fā)布平臺的過程中也好,我們都是有不同的時間節(jié)點和節(jié)奏。比如我們發(fā)現(xiàn)創(chuàng)建數(shù)字化虛擬世界這個過程中,你具備的其實是多方面的科學(xué)技術(shù)的能力。我們看到了不同的路線,有一部分我們可以第一時間解決,比如我們現(xiàn)在面向的像傳媒娛樂行業(yè),建筑行業(yè),我們已經(jīng)處于非常成熟的階段了,也打通了各種軟件的生態(tài)和平臺,這兩個行業(yè)里我們很多的應(yīng)用都已經(jīng)完成了。
我們第二個階段是面向產(chǎn)品設(shè)計。產(chǎn)品設(shè)計的面很大,有制造業(yè)的,也有各種不同的產(chǎn)品。我們面向的是所有產(chǎn)品的設(shè)計,那是我們PHASEⅡ階段,我們的原計劃包括現(xiàn)在計劃中也是2022年底完成整個的階段二的一些研發(fā)工作。我們最終實現(xiàn)的是真正的數(shù)字化孿生全部完成的一個階段,這個階段我們也拭目以待,相信不遠(yuǎn)的將來就全部完成。
EW:元宇宙在應(yīng)用層面,哪些可期待,哪些需要再探索?
何:這個問題的核心邏輯在于元宇宙這樣的全球概念究竟能不能幫助人類的生活,這個是最關(guān)鍵的。我個人也在想一些例子,如果某一天我戴上了AR眼鏡,或者到像戴眼鏡這樣輕便程度的AR眼鏡,可以在你腦海中生成一個元宇宙,這樣的元宇宙中的什么內(nèi)容會幫助到我呢?
比如我是一個打籃球的粉絲,是某某NBA球星的球迷,可能在我的元宇宙空間里會存儲很多他的數(shù)字資產(chǎn)。比如我想要看他所有的動作的視頻,我在打籃球的時候戴上眼鏡就可以感受到,去復(fù)現(xiàn)它的過程,這個就會對我有幫助。
再比如我現(xiàn)在比較關(guān)注家里的病族史,比如我父母,我的姥姥姥爺爺爺奶奶,甚至再上幾輩的家里人,他有沒有得過同一種病,這個就叫病族史。
這個病族史能不能存到我的元宇宙空間里,每天它都會提示。比如說我父母都有心臟類疾病,它會提示核心原因是因為血壓高,血脂高,提示的時候是不是警示我,每天是不是要加強鍛煉,我的飲食是不是合理,我的睡眠是不是充足。這類對我非常有意義,所以舉這兩個例子核心在于這樣的概念能不能幫助到人。
如果真有一天不單單是通過AR眼鏡這樣的方式進(jìn)行交互,可以過渡到比如說馬斯克提出的腦機芯片接口的概念,讓每一個人都能用這樣的輕便的方式去和你的元宇宙空間進(jìn)行交互,這對我們每一個人的生活都有新的促進(jìn)和改變。如果那一天實現(xiàn)了,我真的可能愿意付錢去買那里的數(shù)字內(nèi)容,買那里的體驗,大家可以幻想那一天的到來。
責(zé)任編輯: