Leap Motion 実践活用

2013/09/20

Natural Software

中村薫

自己紹介

中村 薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Visual Studio ALM

kaorun55@naturalsoftware.jp

http://www.buildinsider.net/small/leapmotioncs

http://www.buildinsider.net/small/leapmotioncpp

OpenNI

3Dセンサー

プログラミング

秀和システム社より

発売中

Tokyo Motioncontrol Network Vol.02

• 日時• 9月26日(木)• 19:00〜21:30• 懇親会〜23:00

• 場所• コクヨ・エコライブオフィス品川

(品川駅港南口徒歩約5分)

http://kokucheese.com/event/index/108562/

アジェンダ

•さまざまなモーションセンサー

•Leap Motion の活用

モーションセンサー

モーションセンサーとは

• 赤外線やステレオカメラ(カメラを2つ)を利用することで、距離をセンシングすることができるセンサー

• 距離をセンシングすることで、人や人の関節、指の動きなどを認識することができる

• Kinect をきっかけに、普及可能な価格帯になり、さまざまなセンサーが登場している

モーションセンサー一覧

Kinect Xtion/Carmine Creative Camera DS325

PlayStation CameraLeapCapriNext Kinect

さまざまなセンサー

KinectとKinect for Window SDK

http://www.youtube.com/watch?v=quGhaggn3cQ

Next Xbox and Kinect

http://www.xbox.com/ja-JP/hub

PrimeSense社のセンサーとOpenNI

PrimeSense Cpari

http://thetechjournal.com/electronics/primesense-unveiled-worlds-smallest-3d-sensor-capri-1-25-at-ces-2013.xhtml

http://www.kickstarter.com/projects/occipital/structure-sensor-capture-the-world-in-3d

SoftKinetic社のセンサーとSDK

iisu SDK

http://www.youtube.com/watch?v=5LvhdFudp50

http://download-software.intel.com/sites/default/files/article/325946/secured-perc-productbrief-q1-2013-327943-003us.pdf

Intel Perceptual Computing SDK

LeapとLeap SDK

https://www.youtube.com/watch?v=_d6KuiuteIAhttps://leapmotion.com/

PlayStation Camera

http://www.jp.playstation.com/ps4/peripheral/#ps4camera

Leap Motion

Leap Motion とは

• Leap Motion社が販売しているデバイス

• 手や指の動きを認識する

なにができるのか

http://www.youtube.com/watch?v=3b4w749Tud8

Leap Motion SDK

Hand and Finger Tracking Gesture

http://www.buildinsider.net/small/leapmotionfirstimp/01

Touch

Leap Motion からの情報

Leap Motion のインタフェース

Leap Motion Application Interface Leap Motion WebSocket Interface

https://developer.leapmotion.com/documentation/GetStarted/Leap_Architecture.html

サポートするプログラム言語

• C++

• Objective-C

• C#

• Java

• Python

• JavaScript

• Other Languages

https://developer.leapmotion.com/documentation/GetStarted/Leap_Architecture.html

サポートするOS

• OS X 10.6 以降

• Windows 7 以降

• Linux(α版)

サポートする環境

• Windows デスクトップ

• Windows ストアアプリ

• Mac OS

• Unity

• ブラウザ

サポートする環境

Windows Desktop App Mac OSX App Unity

Browser Windows Store App(Unofficial)

センサーの認識範囲

https://developer.leapmotion.com/documentation/Languages/C++/Guides/Leap_Overview.html

アプリケーションからの認識

InteractionBox

ProjectionIntersection

https://developer.leapmotion.com/documentation/Languages/C++/Guides/Leap_Screen_Location.html

Leap Motion の得意なこと

• 開いた指の認識

• 手の位置の認識

Leap Motion の苦手なこと

• 閉じた指の認識

• Leap Motion を縦にした認識

内蔵されたLeap Motion

http://gizmodo.com/heres-the-first-laptop-with-leap-motion-built-right-in-1346551607

ディスプレイの制約

Oculus Rift と Leap Motion

http://www.youtube.com/watch?v=KQ6lTeW-_Ws

Haptix camera

http://image-sensors-world.blogspot.jp/2013/08/haptix-follows-leapmotion-steps.html

http://www.youtube.com/watch?v=xaFBjUJj00M

触覚フィードバック

センサーの位置づけ組み込み

外付け

モバイル据え置き