流跳躍運動實際攝像機進給

Question

有沒有一種方法（最好是用JS，但可以用任何一種語言完成）從Leap Motion流式傳輸實際的紅外攝像機視頻？ 在0:52 處看到的演示似乎表明該設備可以提供更多的數據，而不僅僅是點的骨架，我很希望能夠在我的一個項目中顯示實際的“ Leap-View”數據，我認為基本上是灰度圖像。

謝謝！

Answer 1

我叫Led Motion社區團隊的Edwin。 不幸的是，我們早期視頻中介紹的“點雲”是來自某些調試工具的可視化效果。 由於它們在時間或空間上不一致，因此不能用作交互方法。 當前沒有點雲。 我們可以從已有的3D信息中重建出某些東西，但可能不會在短期內增加此功能。

Answer 2

我認為您想要的是這樣的： https : //github.com/meyburgh/forirony/blob/master/misc/leap.cpp

這是一個非常簡單的演示，顯示了每個跳躍運動攝像機的灰度紅外視頻。

該視頻看起來有些奇怪，因此如果您希望它看起來“正常”，則需要對其進行糾正-Leap提供了image.rectify（），但這發生在cpu上，因此為了提高性能，最好使用着色器代替image.rectify（）函數。

要獲得“點雲”，如果您對此感興趣，可以按像素進行視差映射（opencv在cpu / gpu上具有此功能），也可以查看NVIDIA的CUDA工具包，該工具包中包含有視差圖演示。樣本。 鏈接到opencv的立體聲對應關系（也稱為視差映射）： http : //docs.opencv.org/3.0-beta/modules/cudastereo/doc/stereo.html

我可以體會到，通過視差映射獲得的點雲的質量將非常粗糙且嘈雜，因此對於像Edwin在其文章中所說的“交互”沒有用，但是如果您有興趣研究統計技術以了解隱藏在噪音中的信息，或者出於“藝術”原因想要點雲，那么這就是我要說的。