高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26...

37
高速プロジェクタの衝撃 東京大学 渡辺義浩

Transcript of 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26...

Page 1: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

高速プロジェクタの衝撃東京大学 渡辺義浩

Page 2: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

なぜプロジェクタを高速化するのか

I N T R O D U C T I O N

Page 3: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

OUR MISSION

Page 4: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

REACTIONSENSING

Page 5: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

秒間1,000回

SPEED

Page 6: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 7: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

Color, 3D shape,

3D motion, Reflectance, etc

REACTIONSENSING高 速 に 実 世 界 を 把 握 す る 高 速 に 実 世 界 を 制 御 す る

Projector

Page 8: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

プロジェクタに求められるもの

Page 9: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

L IGHT MATTER PERCEPTION

Page 10: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

L IGHT MATTER PERCEPTION

Page 11: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

U S E R I N T E R F A C E

P R O J E C T I O N M A P P I N G

C O M P U T E RV I S I O N

Materiable (2016) TOKYO STATION VISION (2012) 3D Scanner by Texus Instruments

Page 12: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

プロジェクタに求められるもの

光で知覚上の現実を変質させる

自然・アンビエント・調和

light perception matter

Page 13: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

L IGHT MATTER PERCEPTION

Page 14: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

HIGH-SPEEDPROJECTION & SENSING

O U R M I S S I O N

Page 15: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

SENSING PROJECTION

1,000fps

30-120fps

Low Frame RateHigh Latency

Page 16: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

100ms delay 10ms delay 1ms delay

Human can perceive6.04ms projection delay [Ng, et al. 2012]

Page 17: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

高速プロジェクタDynaF la sh

8 - b i t i m a g e p r o j e c t o r a t 1 , 0 0 0 f p s w i t h 3 m s d e l a y

Page 18: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 19: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 20: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

ダイナミックプロジェクションマッピング

d i g i t a l t e x t u r e

Page 21: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 22: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 23: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

リアリスティックディスプレイ

p e r c e p t u a l r e a l i t y

Page 24: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

COMPUTERGRAPHICS

STOPMOTION

http://www.telyuka.com/

YouTube: Kubo and the Two Strings: Behind the Scenes Time Lapse

Page 25: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

運動視差

光線再現

裸眼

両眼融合

L IMITATIONS

提示したい実物体をそのまま利用しては?

Page 26: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

光で知覚上の現実を変質させるlight perception matter

COMPUTATIONAL ILLUMINATION

Page 27: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

28P a g e

臨界融合周波数

PERSISTENCE OF VISION

空間融合 時間融合

Page 28: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 29: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する
Page 30: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

さいごにC O N C L U S I O N

Page 31: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

L IGHT MATTER PERCEPTION

Page 32: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

PROJECTOR &SPEED

K E Y P O I N T 1

Page 33: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

K E Y P O I N T 2

PROJECTOR &SOCIETY

Page 34: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

PROJECTOR &REALITY

K E Y P O I N T 3

Page 35: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

Researches are done by

Doctor Course: L. Miyashita

Master Course: G. Narita, T. Yoshida, S. Tatsuno

Page 36: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

WEBhttp://www.k2.t.u-tokyo.ac.jp/

YouTubehttps://www.youtube.com/user/IshikawaLab

Page 37: 高速プロジェクタの衝撃ishikawa-vision.org/members/watanabe/20161026_PRJ.pdf2016/10/26  · Color, 3D shape, 3D motion, Reflectance, etc SENSING REACTION 高速に実世界を把握する

38P a g e

高速プロジェクタの衝撃Strong Impact by High-speed Projector

プロジェクションディスプレイ技術研究会