通(tōng)過UE4 的 INTEL REALSENSE 插件以(yǐ)新的方式觀(guān)察世界
Intel 一直都對引入創新的工具和科(kē)技感興趣,這(zhè)些工(gōng)具能夠為世界上熱(rè)情的內容(róng)開發者增加能量。如果(guǒ)你還不甚了解,Intel RealSense camera 在普通的 RGB 照(zhào)片和視頻技術上,采用紅外光線來計算深度。為了幫(bāng)助(zhù)開發這個技術的(de)應用程序,Intel 創建了 RealSense SDK,一個用來做可視化算法的庫,包括麵部識(shí)別,圖(tú)片碎片化,以及 3D 掃描。
由於看到了這個技術(shù)在遊戲中的潛在應用,我們現在來為大家介紹 RealSense 插件,這是(shì) Intel 的(de)遊戲工程師們合作的產物,將 RealSense SDK 中的各種特性提供出來以便在虛幻 4 的(de)藍圖可視化腳本係統中使用。
插件概述
這個插件是一組 Actor 組件的形式存在,每個組件封裝了 RealSense SDK 中的一些(xiē)特定(dìng)的(de)功能。通過使用這些相對輕(qīng)量的組件,可以為遊戲中幾(jǐ)乎每種(zhǒng) Actor 添加(jiā) 3D 的感應能力,並且訪問這些數據也很簡單,隻需要對同(tóng)一(yī)個組件在初始化(huà)一個實例即可。
插件組建
目前,插件有三(sān)個 RealSense 組件:
- Camera Streams 組件(jiàn): 提供 RealSense 攝(shè)像頭的原始顏色和深度的視頻流。
- 3D 掃描組件: 支持真實世(shì)界的物體掃描,以及人臉掃描(如上圖)。
- 頭部跟蹤組件(預覽): 支持對用戶頭部(bù)的位(wèi)置和(hé)角度的檢測和跟蹤。
接著很快就會更新,可以期待該(gāi)插件即將到來的更多組(zǔ)建:
- 頭部跟蹤組件(完整版): 用於檢測和跟蹤高達 76 麵部(bù)標誌(zhì)點,脈搏速率,和麵部表情附加功能。
- 背景碎片組件: 將圖(tú)片的前(qián)景和背景(jǐng)分離開,為實時(shí)視頻(pín)創建“綠幕”的效果(如(rú)上圖(tú))。
- 場景掃描組件: 對大場景(約 2m x 2m 的區域)生成 3D 模型來協(xié)助創建(jiàn)用戶生成(chéng)的內容並加強現實(shí)世界的體驗(如下圖)。
- 手(shǒu)部跟蹤組件: 檢測並跟蹤 22 個手部標誌點,識別 14 種手勢,或者跟蹤一個點來作為鼠標類型的交互響(xiǎng)應。
- 語音識別組建: 將輸入語音轉換為文本來(lái)翻譯(yì),或者用於檢測關(guān)鍵字(zì)來作為語音控製(zhì)功能輸(shū)入。
- 上一篇:Unity3d網絡通信(xìn) - NetWork組件使用(yòng) 2019/5/28
- 下一篇:HOLOLENS的SOCKET網絡(luò)通訊1 2019/5/23
