通過UE4 的 INTEL REALSENSE 插件以(yǐ)新的方式觀察世界
Intel 一直都對引入創(chuàng)新的工具和(hé)科技感興趣,這些(xiē)工具能夠為世界上熱情的內容開發者增加(jiā)能量。如果你還不甚了解,Intel RealSense camera 在普通的(de) RGB 照片(piàn)和視頻技術上,采用紅外(wài)光線來計(jì)算深度。為了幫助開發這個(gè)技術的應用程序,Intel 創建了 RealSense SDK,一個用來做可視化算法的庫,包括麵部識別,圖片碎片化(huà),以及 3D 掃描(miáo)。
由於看到了這個技術在遊戲(xì)中的潛在應用,我們現在來為大家介紹(shào) RealSense 插件,這是 Intel 的遊戲工程師(shī)們合作的產物,將 RealSense SDK 中的各種(zhǒng)特性提供出來(lái)以便在虛幻(huàn) 4 的藍圖可視化腳本係統中使(shǐ)用。
插件概述
這個插件是一組 Actor 組件(jiàn)的形式存在(zài),每個組件封裝了 RealSense SDK 中的一些特定的功能。通(tōng)過(guò)使用這些相對輕量的組件,可以為遊戲(xì)中幾乎每種 Actor 添加 3D 的感應能力(lì),並且訪問這(zhè)些數據也很簡單,隻需要對同一個組件在初始化一個實例即可。
插件組(zǔ)建
目前,插件有三個 RealSense 組件:
- Camera Streams 組(zǔ)件: 提供 RealSense 攝像頭的原始顏色和(hé)深(shēn)度的視(shì)頻流。
- 3D 掃描組件(jiàn): 支持真實世界的物體掃描,以及人臉(liǎn)掃(sǎo)描(如上圖)。
- 頭部跟蹤組件(預(yù)覽(lǎn)): 支持對用戶頭部的位置和角度的檢測和跟蹤。
接著很快就會更新,可以期待該插件即將到來的更多組建:
- 頭部跟蹤組(zǔ)件(完整版): 用於檢測和跟蹤高達(dá) 76 麵(miàn)部標(biāo)誌點,脈搏速率,和麵部表情附加功能。
- 背景碎(suì)片組件: 將(jiāng)圖片的前景和背景分離開,為實時視頻(pín)創建“綠幕”的效果(如(rú)上圖)。
- 場景掃描組件: 對大場景(jǐng)(約 2m x 2m 的區域)生成 3D 模(mó)型來協助創建用戶生成的內容並(bìng)加強現實世界的體驗(如下圖)。
- 手部跟(gēn)蹤組件: 檢測(cè)並跟蹤 22 個手部標誌點(diǎn),識別 14 種手勢,或者跟蹤一個點來作為鼠標類型的交互(hù)響應。
- 語音識別組建: 將輸(shū)入語(yǔ)音轉換為文本來翻譯,或者用於檢測關鍵字來作為語音控製功能輸入。
- 上一篇:Unity3d網絡通信 - NetWork組件使用 2019/5/28
- 下一篇:HOLOLENS的SOCKET網(wǎng)絡通訊1 2019/5/23