通過UE4 的 INTEL REALSENSE 插件(jiàn)以新的方式觀察世界
Intel 一直都對引(yǐn)入創新的工具(jù)和科技感興趣,這些工具(jù)能夠為世(shì)界上熱情的內容開發者增加能(néng)量。如果你(nǐ)還不甚了解,Intel RealSense camera 在普通的(de) RGB 照片(piàn)和視頻技術(shù)上,采用紅外光線來計算深度。為了幫助開發這個技術的應用程序,Intel 創建了 RealSense SDK,一個用(yòng)來做可視化算法的庫,包(bāo)括麵部識別,圖片碎片(piàn)化,以及 3D 掃描。
由於看到了這個技術在(zài)遊戲(xì)中的潛在(zài)應用,我們現在來為(wéi)大家介紹 RealSense 插件,這是 Intel 的遊戲工程師們合作(zuò)的產物,將 RealSense SDK 中的各種特性提供出來以便在虛幻 4 的藍圖可視化腳本係統中使用。
插件(jiàn)概述
這個插件是一組 Actor 組件的形式存在(zài),每個組件封裝了 RealSense SDK 中的一些特定的功能。通過使用(yòng)這些相對輕量的組件,可以(yǐ)為遊戲中(zhōng)幾乎每種 Actor 添加 3D 的感(gǎn)應能力,並(bìng)且訪問這些數據也很簡單,隻需要對(duì)同一個組件在初始化一個實例即可。
插件組建
目前,插件有三個 RealSense 組件:
- Camera Streams 組件: 提供 RealSense 攝像頭(tóu)的原始顏色和(hé)深度的視頻流(liú)。
- 3D 掃(sǎo)描組件: 支持真實世界的物體(tǐ)掃描,以及人臉掃描(miáo)(如上(shàng)圖)。
- 頭部跟蹤組件(預覽): 支持對用戶頭(tóu)部的位置和角度的檢測和跟蹤(zōng)。
接著(zhe)很快就會更新,可以期待該插件即將到來的更多組(zǔ)建:
- 頭(tóu)部跟蹤組件(完整版(bǎn)): 用於檢測和跟蹤高達 76 麵部標誌點,脈搏速率,和麵部表情附加功能。
- 背(bèi)景碎片組件: 將圖片的前景和背(bèi)景(jǐng)分離開,為實時視頻(pín)創建“綠幕”的(de)效果(如(rú)上圖)。
- 場景掃描(miáo)組(zǔ)件: 對大場景(約 2m x 2m 的區(qū)域)生成 3D 模型來(lái)協助創建用戶(hù)生成的內容並(bìng)加強現(xiàn)實世界的體驗(如下(xià)圖)。
- 手部跟蹤組件: 檢測並跟蹤 22 個手部(bù)標誌點(diǎn),識別 14 種手勢,或者跟蹤一個點來作為鼠標類(lèi)型的交(jiāo)互響應。
- 語音識別組建: 將輸(shū)入語(yǔ)音轉換為文本來翻譯,或者(zhě)用(yòng)於(yú)檢測關鍵(jiàn)字來作為語音控製功(gōng)能輸入。
- 上一篇:Unity3d網絡通信 - NetWork組件使用 2019/5/28
- 下一(yī)篇(piān):HOLOLENS的SOCKET網(wǎng)絡通訊1 2019/5/23