微軟亞洲研究所二十週年 哪些新技術會啟發VR行業?
2018 年 11 月 8 日,微軟亞洲研究所在北京舉行了建院二十週年慶典,向各界展示了其發展歷程和創新成果。而其中哪些展示能對 VR 行業有些探索方向的引領和啟發,筆者有幸到場一一列舉如下:
遊戲產品轉化
作為開場介紹微軟亞洲研究院五大研究方向(網際網路和探索、網路和系統、機器學習和智慧、語音和語言、視覺和圖形)的沈向洋博士,在演講中提到相關於視覺和圖形的研發,可將以往所熟悉的遊戲經典移植轉化到新互動的裝置來遊玩回顧,這項成果已在 Xbox 有所應用,不難想象後期也可將更多 IP 性質的產品再複製到 HoloLens 來體驗。
物體所處光感實時渲染
還記得 IOS12 的 AR 應用 3d Scanner 嗎?能將現實中的物體掃描出來複製模型,但大多數人實踐後大呼不真實,缺的就是細節上的處理。微軟的此專案利用從真實世界中的物體模型、材質屬性以及光照條件,藉助 HoloLens 上攝像頭及定位系統,再現在物體在使用者所處的環境光照,極大地提高混合現實渲染的真實感。而重建物體則利用現成 RGBD 相機採集的幾何資料和材質屬性進行演算法構建。
實時多人姿態跟蹤
微軟亞洲研究院提供了一個多人人體姿態實時跟蹤可互動的系統,該系統基於神經運動網路基礎,通過 RGB 輸入獲得 2D 人體姿態,隨後通過簡單且高效的匹配準則和時域濾波,實現人體骨架運動姿態的跟蹤,不難預料微軟可憑藉此模型引數少、執行速度快等優點,在多人互動大空間、增強現實加入特效上有所衍生。
時尚品味虛擬穿搭
這項系統由國立臺灣大學主場研究,主要有三部分,第一大規模的穿搭評論資料集;第二對於多樣性的衡量方式;第三通過 Topic model 於類神經網路的結合彌補傳統方式的不足。突破傳統購物的只看時尚照片購物,賦予照片特色,增加使用者與評論時尚的感情。臺大教授表示會盡快做出演示並希望將此技術應用於 HoloLens ,可讓你在 AR 購物中將想買的鞋子穿搭身上,省去店內試穿或網購物流的等待。
AI少女微軟小冰
微軟網際網路工程推出的微軟小冰,在 2018 年 7 月已經進入了第 6 代,並與網易、小米、騰訊、華為會推出平臺級合作產品,後續還會推出獨立的互動 APP ,向 EQ+IQ 大方向發展的人工智慧體系,使得小冰擬人化偶像化,如今也更新可互動的 3D 外形和一系列垂直領域解決方案。
現場還有相關 AI 醫療、機器認識、跨語言人工識別: Presentation Translator 等等的展示,萬物相連,這些微軟新興科技的創新必然會帶給我們革命性變化,每一項技術原型也許都可推動各界各行前行,正如現場所說我們並非規劃未來,而已經處於未來之中。
新浪宣告:新浪網登載此文出於傳遞更多資訊之目的,並不意味著贊同其觀點或證實其描述。