Re: [閒聊] xbox 360 的 Kinect 技術
看板C_Chat (希洽)作者Rabby250 (在沙漠裡尋找星星)時間10小時前 (2025/02/11 07:50)推噓19(19推 0噓 16→)留言35則, 22人參與討論串2/2 (看更多)
※ 引述《wahaha99 (我討厭人類)》之銘言:
: 是說 XBOX 360 的 Kinect 技術
: 在十幾年前就有了
: 但沒看過有人用Kinect來做3D捕捉
: Kinect 好像也沒有出後續的設備
: 到現在 Hololive 在用的家用3D
: 都還常常出包
: 有沒有人能說說看, Kinect 技術為何沒有被應用在 VR、3D捕捉?
: (還是其實是有的?)
: 畢竟當年就是 xbox 360 的一部分,
: 現在的技術要做只會更便宜才對
已經是十幾年前看的東西了,憑記憶寫的,如果有錯請再幫忙糾正
-----
簡單來講是 Kinect 為了能夠以 200 FPS 以上的速度辨認肢體動作用了神奇演算法
但是這個演算法只有特定條件下才能用,比方說相機不能在辨識同時大幅度移動
當時一般辨識肢體動作的演算法大概長這樣:
原圖畫面→從畫面裡剪出人形→辨識特徵(手、腳、頭等等)→照肢體位置辨識動作
先不說辨識動作了,光是辨識特徵就可以花一堆時間
(比方說手離鏡頭遠近、出現在畫面哪裡、是什麼角度等等)
然後 Kinect 必須要用廉價相機外加四肢沒有裝感應器的條件下高速辨識
結果當時有點軟不知道哪個天才工程師居然想出一個神奇方法
他們首先找了幾個演員在 Kinect 前面把所有想的到的動作都作了一遍
然後用建模從得到的動作裡生成不同體型的動作
(比方說這些演員沒有瘦子,就用建模虛構一個瘦子,然後模擬出瘦子的動作)
印象中最後他們搞出了兩百萬筆資料,就用這些資料訓練出了 Kinect 用的辨識模型
用這模型包了辨識特徵和動作兩個最花時間的工作
等到玩家實際在 Kinect 面前玩的時候, Kinect 做的事就是照模型猜出玩家當時動作
然後這模型只是單純的二十層決策樹, 360 執行起來可以做到 200 FPS
自然就達成了遊戲中需要的辨識條件-平價硬體、要快、而且不需要拿感應器
(順帶一提,有點軟後來把這技術拿去電腦視覺學界最著名的發表會 CVPR 發表
很理所當然地拿下了那年的最佳論文獎)
但是反過來說,因為辨識特徵和動作用的模型都是針對 360 遊戲環境特別開發的
當然不適用於 VR 這種相機會動來動去、光是角度就不知道要照幾張畫面出來的辨識環境
VR 最終也會有 VR 能夠套用的辨識技術,不過那很有可能就不是跟 360 用同一套了
--
所謂FPS就是「每學期當人比率」(Flunk ratio Per Semester),
是參考老師評價的重要指標之一。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 219.104.141.36 (日本)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1739231450.A.150.html
推
02/11 07:53,
10小時前
, 1F
02/11 07:53, 1F
推
02/11 08:00,
10小時前
, 2F
02/11 08:00, 2F
推
02/11 08:00,
10小時前
, 3F
02/11 08:00, 3F
推
02/11 08:02,
10小時前
, 4F
02/11 08:02, 4F
推
02/11 08:03,
9小時前
, 5F
02/11 08:03, 5F
→
02/11 08:18,
9小時前
, 6F
02/11 08:18, 6F
推
02/11 08:41,
9小時前
, 7F
02/11 08:41, 7F
推
02/11 08:52,
9小時前
, 8F
02/11 08:52, 8F
→
02/11 09:05,
8小時前
, 9F
02/11 09:05, 9F
→
02/11 09:05,
8小時前
, 10F
02/11 09:05, 10F
→
02/11 09:06,
8小時前
, 11F
02/11 09:06, 11F
→
02/11 09:08,
8小時前
, 12F
02/11 09:08, 12F
推
02/11 09:16,
8小時前
, 13F
02/11 09:16, 13F
→
02/11 09:17,
8小時前
, 14F
02/11 09:17, 14F
推
02/11 09:22,
8小時前
, 15F
02/11 09:22, 15F
推
02/11 09:31,
8小時前
, 16F
02/11 09:31, 16F
→
02/11 09:31,
8小時前
, 17F
02/11 09:31, 17F
→
02/11 09:33,
8小時前
, 18F
02/11 09:33, 18F
→
02/11 09:34,
8小時前
, 19F
02/11 09:34, 19F
→
02/11 09:47,
8小時前
, 20F
02/11 09:47, 20F
推
02/11 09:51,
8小時前
, 21F
02/11 09:51, 21F
推
02/11 09:54,
8小時前
, 22F
02/11 09:54, 22F
推
02/11 10:06,
7小時前
, 23F
02/11 10:06, 23F
推
02/11 10:06,
7小時前
, 24F
02/11 10:06, 24F
推
02/11 11:22,
6小時前
, 25F
02/11 11:22, 25F
→
02/11 11:22,
6小時前
, 26F
02/11 11:22, 26F
→
02/11 11:22,
6小時前
, 27F
02/11 11:22, 27F
上面提的 200 FPS 是辨識演算法的速度,不是 Kinect 本身畫面的傳輸速度
CVPR 的原論文在 https://ieeexplore.ieee.org/document/5995316
※ 編輯: Rabby250 (219.104.141.36 日本), 02/11/2025 12:11:21
推
02/11 12:27,
5小時前
, 28F
02/11 12:27, 28F
→
02/11 12:27,
5小時前
, 29F
02/11 12:27, 29F
推
02/11 14:01,
4小時前
, 30F
02/11 14:01, 30F
推
02/11 14:11,
3小時前
, 31F
02/11 14:11, 31F
→
02/11 14:12,
3小時前
, 32F
02/11 14:12, 32F
→
02/11 14:12,
3小時前
, 33F
02/11 14:12, 33F
推
02/11 14:53,
3小時前
, 34F
02/11 14:53, 34F
→
02/11 14:53,
3小時前
, 35F
02/11 14:53, 35F
討論串 (同標題文章)
本文引述了以下文章的的內容:
完整討論串 (本文為第 2 之 2 篇):
C_Chat 近期熱門文章
PTT動漫區 即時熱門文章
3
10