デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

27
センサー&デバイス大集合! KINECT V2+Unityで VRコンテンツを 作ってみたら楽しかった #devsumiA 株式会社システムフレンド/T.M.C.N 前本 知志

Transcript of デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

Page 1: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

センサー&デバイス大集合!

KINECT V2+UnityでVRコンテンツを

作ってみたら楽しかった

#devsumiA

株式会社システムフレンド/T.M.C.N

前本 知志

Page 2: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

・システムフレンドという会社でセンサー&デバイス部長やってます!KINECT等のセンサーを使ったアプリ(イベント用コンテンツ、医療ヘルスケア系)スマフォのARアプリ(最近はやりのぬり絵してキャラに取り込めるやつとか)を作っています。

・エアー書道では何度かテレビ出演をしています2013年1月6日 東京MX TV 「Tokyo, Boy」 新年スペシャル2013年8月26日 日本テレビ 「NEWS ZERO」 などなど。

http://www.systemfriend.co.jp/kinect_nui

・T.M.C.N (Tokyo MotionControl Network)やってます。

自己紹介

Page 3: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

https://www.facebook.com/TokyoMotioncontrolNetwork

Page 4: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

今日のながれ

1• KINECT V2の好きなところ

2• KINECT V2とUnityなら

こんなことやりたくなるよね

3• 作ってみたもののご紹介

Page 5: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

KINECT V2の好きなところ

Page 6: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

最近いろいろ流行ってますよね!

Page 7: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

やっぱりキネクトが好き!

•全身をトラッキングできる

• 6人まで骨格情報が同時にとれる

•カメラ映像も綺麗になった

>> みんなで一緒に盛り上がれる! <<

Page 8: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

最近Unityと相性がよい

• Kinect for Windows v2 SDKが公式にUnityプラグインを提供>> 簡単にKINECTを使えるプレファブ群>> サンプルシーンの提供

• Visual Studio 2013 Tools for Unity>> Visual Studioでデバッグが可能>> UnityのGameObject用コード補完

Page 9: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

KINECT V2とUnityならこんなことやりたくなるよね

Page 10: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

座標系合わせたくなるよね

• KINECTの3D骨格情報を取得(メートル座標系)

• Unity座標系と対応させる(1Unity=1メートル設定で考える)

X

Y Z

1メートル↓

1Unity

Page 11: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

リアルとバーチャルをシンクロしたくなるよね

• KINECTのリアル位置とUnity内のカメラ位置、角度、視点を合わせる

•カメラ映像とのシンクロを取る

<三種の神器>• メジャー• 養生テープ• 三角関数

Page 12: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

3Dモデルを操りたくなるよね

•骨格情報をリアルタイムに3Dモデルに反映してみると…

このコンテンツは、『ユニティちゃんライセンス』で提供されています。

Page 13: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

やばい、たのしい!!!

http://youtu.be/M8e9mCI-u80

Page 14: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

で、色々作ってみました。

Page 15: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

• 全身で音を奏でながらエアーで描く完全3D書道。http://www.systemfriend.co.jp/airshodou-kanade

エアー書道・奏<KANADE> VR

Page 16: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

完全3D VR書道!

http://youtu.be/BicMlnN7qA4

http://youtu.be/NMUgsgxK6Bc

Page 17: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

PROJECT DAFTYDAFTY Live System

http://youtu.be/_Cu9--ZGnAw

Page 18: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

エアーシンセ

• 一緒に踊ってエアーで音を鳴らすアプリ(単純)http://www.systemfriend.co.jp/airsynth

Page 19: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

シ、シンセがうごくぞ

• MIDI機器をエアーでコントロールできます。

Page 20: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

子どもは大好きみたいです

Page 21: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

いろんなパーティにオファーが!

•ロフトワーククリスマスパーティ 2014The Extensions of Man (身体の拡張)

http://youtu.be/J85o2tOYn-s

Page 22: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

いろんなパーティにオファーが!

• アキバで学べるパーティAKIPARTY vol.3 ~くりすますだお☆~

http://youtu.be/ihjBRNcXf00

Page 23: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

DUVETICA 10th Anivarsary Party2015.01.09-10 Omotesando Hills

http://www.systemfriend.co.jp/node/606 http://youtu.be/wQ6vI_VlCzs

Page 24: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

セレブ感っw

http://youtu.be/u6UzljigPhI

Page 25: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

表参道ヒルズでこんなに子どもたちが遊んでるの見たことないw

Page 26: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

家族写真も撮れて楽しかったw

Page 27: デブサミ2015 KINECT V2+UnityでVRコンテンツを作ってみたら楽しかった

ということで

KINECT V2から入力されるの3次元データをUnityの3D表現力で可視化してやるとかなり楽しい!

みんなで遊べる、楽しめるコンテンツをぜひ作ってみてください。

TMCNではセンサー&デバイス系デモ、LTを中心にしたイベントを開催していますので是非おいでください。

https://www.facebook.com/TokyoMotioncontrolNetwork