通(tōng)過UE4 的(de) INTEL REALSENSE 插件以新的方式觀察世界
Intel 一直都對引入創新的工具和科技感興趣(qù),這些(xiē)工具能夠為(wéi)世界上(shàng)熱情的內容開發者增加能量。如果你還不甚了(le)解,Intel RealSense camera 在普通(tōng)的 RGB 照片和視頻技術上(shàng),采用紅外光線來計算深度。為了幫助開發這個技術的應用程(chéng)序,Intel 創建了 RealSense SDK,一個用來做可視化算法的(de)庫,包括麵部識別,圖片碎片化,以(yǐ)及 3D 掃描。
由於看到了這個技術在遊戲中(zhōng)的潛在應用,我們現在來(lái)為大家介紹 RealSense 插(chā)件,這是 Intel 的遊戲工程師們合作的產(chǎn)物,將 RealSense SDK 中的各種特性提供出來以(yǐ)便在虛幻 4 的藍圖可視化腳本係統中使用。
插件概(gài)述
這個插(chā)件是一組(zǔ) Actor 組(zǔ)件的形式存在,每個組件(jiàn)封裝了 RealSense SDK 中(zhōng)的一些特定的功能。通過使用這些相對(duì)輕量的組件,可以為遊戲中幾乎(hū)每種 Actor 添加 3D 的感應能力,並且訪(fǎng)問這些數據(jù)也很簡(jiǎn)單,隻需要對同一個組(zǔ)件(jiàn)在初始化一個(gè)實例即(jí)可。
插件組建
目(mù)前,插件有三個 RealSense 組件:
- Camera Streams 組件: 提供 RealSense 攝像頭的原始顏色和深度的視(shì)頻流。
- 3D 掃描組件: 支持真實世界的物體掃描,以及人臉掃描(如上(shàng)圖)。
- 頭部跟蹤組件(預覽): 支持對用戶頭部的位置和角(jiǎo)度(dù)的檢測和跟蹤。
接著很快就會更新,可以期待該插件即將到來(lái)的更多組建:
- 頭部跟蹤組件(完整(zhěng)版): 用(yòng)於檢(jiǎn)測和跟蹤高達 76 麵部標誌點,脈搏速率,和麵部表情附加功能。
- 背景碎片組件: 將圖片的前景(jǐng)和背景分離開(kāi),為實時視頻創建“綠幕”的效果(如上圖(tú))。
- 場景掃描組件: 對大場景(約 2m x 2m 的區域)生成 3D 模型來(lái)協助創建用(yòng)戶生成的內容並加強現實世界的體(tǐ)驗(如(rú)下圖)。
- 手部跟蹤組(zǔ)件: 檢(jiǎn)測並(bìng)跟蹤 22 個手(shǒu)部標(biāo)誌點,識別 14 種手勢,或者跟蹤一個點來作為鼠標類型的交互(hù)響應。
- 語音識別(bié)組建: 將輸入語音轉換(huàn)為文本來翻譯,或者用於檢測關鍵字來作為語音(yīn)控(kòng)製功能輸入。
- 上一篇:Unity3d網絡通信 - NetWork組件使用 2019/5/28
- 下一篇:HOLOLENS的SOCKET網絡通訊1 2019/5/23