Kinect on HTML5へぇ~

(Kinect for Windows SDK beta)



IIJ 大津繁樹

2011年6月21日

FireFox4以上/Chrome 限定です。

http://html5.ohtsu.org/html5study18/では左右の矢印キーで画面がスライドします。

プレゼンで「へぇ~」と思った時は、左上の「へぇ~ボタン」を押して下さい。(このサイトでは動きません)

第18回HTML5とか勉強会

はじめに、

マイクロソフトのKinectをハックしてHTML5で利用するデモを行います。

テーマが「Google Day」なのに,

       

でも Chrome上で Kinect を動かしますから許して下さい!


動機


端末の中だけではもったいない!

Kinectとは、

以前は数十~数百万円のNUI専門機器が、わずか¥11,693(@Amazon)で!


NUI(Natural User Interaction)


Kinect Hack(その1)



Kinect Hack(その2)


Kinect Hack(その3)

OpenNIでできること

  1. 画像(RGB/IR)情報・深度情報取得(音声取得は未対応)
  2. シーン解析(人物・背景などの分離)
  3. ハンドポイント認識・トラッキング(手のひらを認識)
  4. 骨格認識・トラッキング(全身骨格15ポイントを認識)認識ポーズ(10秒ぐらい)が必要
  5. ジェスチャー認識
    • クリック:手を前後に動かす
    • ウェーブ:手を左右に振る
    • 左にスワイプ:手を左に振る
    • 右にスワイプ:手を右に振る
    • 手を上に挙げる

Kinect for Windows SDK

Kinect for Windows SDK (beta)

マイクロソフトから6/17にリリースされた Kinect用 SDK

非商用利用のみ可能。商用利用ライセンスは今後

Windows7 のみ対応

Visual C++/C#/Basic などで動作

Kinect for Windows SDK

  1. 画像(RGB)情報・深度情報取得
  2. シーン解析(人物・背景などの分離)
  3. 骨格認識・トラッキング(全身骨格20ポイントを認識)驚異の瞬間トラッキング
  4. 重力鉛直ベクトル・フロアベクトル認識
  5. 複数Kinectサポート・モータ操作
  6. オーディオAPI
    • 音方向追跡
    • ノイズサプレッション
    • エコーキャンセリング
    • Microsoft Speech API (音声認識API)との連携

Kinect Windowsアプリデモ

Kinect Windowsアプリのデモ

すみませんが、中継を見てください。

KinectをHTML5の世界に!

KinectをHTML5の世界に!


デモのしくみ

本デモのスケルトン-音源追跡に関してはまだ十分な精度を実現できてきません。

Kinect on HTML5 Demo

おわり

御清聴ありがとうございました。

このプレゼンは、

0へぇ~」

でした。

(0/20)
0へぇ~

閲覧中