通過UE4 的(de) INTEL REALSENSE 插件以新的方式觀察世界
Intel 一直都對引入創新的工具和科技感興趣,這些工具(jù)能夠為世界上熱情的內容開發者增加(jiā)能量。如果你還不甚了解,Intel RealSense camera 在普通的 RGB 照片和視(shì)頻技術上,采用紅(hóng)外光線來計算深度。為了幫助開發這(zhè)個技術的應用(yòng)程序,Intel 創建了 RealSense SDK,一個用來做可視化算(suàn)法的(de)庫,包括麵部識(shí)別,圖片碎片化,以及 3D 掃(sǎo)描。
由於看到了這個技術在遊戲中的潛在應用,我們現在來為大家介紹 RealSense 插件,這是 Intel 的遊戲工程師們(men)合作的產物,將 RealSense SDK 中(zhōng)的各種特性提供出來(lái)以便在虛(xū)幻 4 的藍圖可視化腳本係(xì)統中使(shǐ)用。
插件概述
這個插件是一組 Actor 組件的形式存(cún)在,每個組件封裝(zhuāng)了 RealSense SDK 中的一些特定(dìng)的(de)功能。通(tōng)過使用這些相對輕量的組件,可以為遊(yóu)戲中幾乎(hū)每種 Actor 添加 3D 的感應能力,並且訪問這(zhè)些數據也很簡單,隻需要對同一(yī)個組件在初始化一個(gè)實例即可。
插件組建
目前,插件有三個 RealSense 組件:
- Camera Streams 組件: 提供 RealSense 攝像頭的原始(shǐ)顏色和深度的視頻流。
- 3D 掃描組件: 支持(chí)真實世界的物體掃描,以及人臉掃描(如上圖)。
- 頭部跟蹤組件(預覽): 支持對用戶頭部的(de)位置和角度的檢測和跟蹤。
接著很快就會更新(xīn),可(kě)以期待該插件即將到來的更多組建:
- 頭部跟(gēn)蹤組件(完整版): 用於檢測和跟蹤高達 76 麵部(bù)標誌點,脈搏速(sù)率,和麵部表(biǎo)情附(fù)加(jiā)功(gōng)能(néng)。
- 背景碎片組件: 將圖片的前景和背景分離開(kāi),為實時視頻創建“綠幕”的效果(如上圖)。
- 場景掃描組件: 對大場景(約 2m x 2m 的區域)生成 3D 模型來協助創建用戶生成的內(nèi)容並加強現(xiàn)實世(shì)界(jiè)的體驗(如下圖)。
- 手部(bù)跟蹤組件(jiàn): 檢測並跟(gēn)蹤(zōng) 22 個手部標誌點,識(shí)別 14 種手勢,或者跟蹤一個點來作為鼠標類型的交互響應。
- 語音識別組建: 將輸入語音轉換為(wéi)文本來翻(fān)譯(yì),或者用於檢測關鍵字來作為語音控製功能(néng)輸入。
- 上一篇:Unity3d網絡通信 - NetWork組(zǔ)件使用 2019/5/28
- 下(xià)一篇:HOLOLENS的SOCKET網絡通訊(xùn)1 2019/5/23