VR 普及化曙光!AI 把 2D 畫面變 3D 全景,DeepMind 再登《科學》期刊

繼 DeepStack 之後,Google 旗下 DeepMind 又再度登上《科學》期刊,這次的論文是用 GQN (Generative Query Network) 神經網路,把 2D 畫面重建成 3D 場景,而且可以利用「想像力」從各個視角呈現該場景。更進一步來說,若將這項技術成功普及並應用於 VR 內容製作,可望一舉解決 VR 360 度環境大量建模所耗費的成本。
評論
Photo Credit: DeepMind
評論

DeepStack 之後,Google 旗下 DeepMind 又再度登上 《科學》 期刊,這次的論文是 用 GQN (Generative Query Network) 神經網路,把 2D 畫面重建成 3D 場景 ,而且可以利用「想像力」從各個視角呈現該場景。更進一步來說,若將這項技術成功普及並應用於 VR 內容製作,可望一舉解決 VR 360 度環境大量建模所耗費的成本。

▲應用與目的解說

根據 DeepMind 官方部落格,人類理解虛擬場景背後可不只是看一眼這麼簡單,我們的大腦利用過去的經驗來延伸解讀,最後建構並超越了視網膜接收到的視覺資訊。舉例來說,就算你只在圖片中看到一張三隻腳的桌子,也會腦補第四支腳剛好被擋住;就算你只看到房間一隅,也能描繪並想像出整個房間的格局,甚至從不同角度看起來會是怎樣。

隨著科技進步,我們更需要機器看懂周遭環境,讓機器人能夠找到地方坐、判斷產品材質,或者找到電燈開關。但是對人類來說很簡單的這些環境資訊,卻很難讓 AI 學會,現在訓練 AI 需要靠人工針對人類一個空間的每個角度照相並「貼標籤」讓機器去記憶與學習,非常曠日費時。

而這項 GQN 技術,讓機器自己在環境中收集資訊,並且自己去理解,就像動物和嬰兒一樣自己透過探索來學習,不再需要一個口令一個動作。

▲GQN 原理解說

GQN 模型分為兩大部分,分別為代表網路(representation network)及生成網路(generation network),代表網路將觀察到的輸入資料製作成向量幾何物件,並且再由生成網路去想像表面上沒看見的視角看起來會是怎樣。

雖然目前 GQN 和傳統方法相比也是存有不少限制,而且只有用於虛擬場景,不過 DeepMind 的團隊已經準備要導入更高解析的真實場景訓練,甚至導入時間元素,讓 AI 理解時間與空間的關係,進一步判斷物理運動狀態,因此不只是建模,還能讓它動起來。對於建構 VR 虛擬實境內容方面可望有更多幫助。

更多技術細節與應用可以參考 DeepMind 部落格及論文。

延伸閱讀:


AWS 免費線上研討會,幫助企業掌握 2022 關鍵技術「AI/ML」、加速創新之旅

AWS 於 2022 年 2 月 23 日與 3 月 4 日下午舉辦「人工智慧/機器學習」系列研討會。線上研討會(AWS Web Day)將分享 AWS 的實務經驗與技術結晶,實作工作坊(AWS Workshop)則有專家帶領實作。講座準備有獎徵答,參加即可抽 100 元美食外送平台抵用券。
評論
Photo Credit:AWS
評論

為了有效預測、加速企業決策,愈來愈多企業重視人工智慧(AI)、機器學習(ML)發展,期能借助 AI 的技術能量,為商業提供解決方案。為了協助企業搶得市場先機,AWS 將於 2022 年 2 月 23 日下午 14:00-17:00 舉辦「人工智慧/機器學習」線上研討會,大方分享 AWS 的實務經驗與技術結晶,提供商業程序最佳化與擴展的靈感,激發企業創新。

在深入了解 AWS 人工智慧/機器學習 解決方案與技術實務經驗之後,對此主題感到躍躍欲試,想更深入了解如何運用亞馬遜雲服務,並且有實機操作的機會者,也能夠報名參加 3 月 4 日 14:00-16:30 於 AWS 辦公室線下舉行的 AI/ML 實作工作坊。實作工作坊將由亞馬遜雲科技資深的 AI/ML 專家實際演示,由淺入深的手把手教學,探索如何構建 AI/ML ,借助雲端和人工智慧實現創新。

線上研討會與實作工作坊皆為免費參加,且講座過程中將進行有獎徵答,參加就有機會抽中 100 元美食外送平台抵用券。

立即報名 AWS 人工智慧/機器學習線上研討會

迎戰 AI 時代!AWS 幫助企業加速創新之旅

AWS Marketplace 具備數百種演算法與模型,目前已有 89% 的雲端深度學習專案在 AWS 上執行,能幫助增進資料科學家的生產力高達 10 倍。因此,為了將 AWS 雲端演算的好處分享給更多企業,在本場 AWS 人工智慧/機器學習線上研討會中,將由 AWS 機器學習領域和 AIoT 物聯網專家帶來精彩主題演講;除了重點整理 2021 AWS re:Invent 年底最新發表的 AI / ML 功能之外,也將分享 AWS Professional Service 的機器學習應用導入實例。

立即報名 AWS 人工智慧/機器學習線上研討會

當日議程包括:

  • 人工智慧(AI)/機器學習(ML)新功能發布
  • AWS AI 服務加速創新
  • ML Ops
  • AIoT 相關新服務+案例分享
  • SageMaker 線上零售案例分享
  • AWS ProServe 加速客戶機器學習應用導入實例

無論是開發人員、DevOps、工程師、IT 專業人員、技術決策者、架構師或任何想要了解人工智慧和機器學習的最新趨勢,以推動組織變革和加速創新的人,都能在這次的議程內容獲得新的見解,以解決商業問題並改善用戶體驗。

AWS 人工智慧/機器學習線上研討會報名須知

  • 本場 AWS 人工智慧/機器學習線上研討會為 2 月 23 日線上舉辦,另有實體工作坊為 3 月 4 日於 AWS 辦公室線下舉行。若有意參加兩場工作坊,須分開報名。
  • 若為首次參加線上研討會,官方網路研討會平台 GoToWebinar 會自動偵測參加者的電腦配置,在加入時自動安裝。若是使用手機登入此活動,則需安裝 GoToWebinar 手機應用程式。

立即探索 AI/ML 的最佳實踐,了解其他組織如何憑藉 AWS 賦予的機器學習和 AI 服務,提高效率並做出更準確的預測,為企業加速創新之旅。

立即報名 AWS 人工智慧/機器學習線上研討會