Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 ·...

28
Jak pokazać świat niewidomemu? Jak pokazać świat niewidomemu? Pawel Strumillo Zaklad Elektroniki Medycznej Pawel Strumillo Zaklad Elektroniki Medycznej

Transcript of Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 ·...

Page 1: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Jak pokazać świat niewidomemu?

Jak pokazać świat niewidomemu?

Paweł Strumiłło

Zakład Elektroniki Medycznej

Paweł Strumiłło

Zakład Elektroniki Medycznej

Page 2: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 2

Instytut ElektronikiInstytut ElektronikiInstytut Elektroniki

� elektronika medyczna (analiza sygnałów

i obrazów), interfejsy człowiek komputer, wspomaganie osób niepełnosprawnych

� układy elektroniczne i termografiakomputerowa

� systemy telekomunikacyjne

Page 3: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 318.09.2008

Page 4: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 4

Utrata wzrokuUtrata wzroku

� Utrata 90% zdolności percepcyjnej

negatywny wpływ na funkcje psychofizyczne

� Wykluczenie społeczne i zawodowe

brak wykształcenia, kilka procent zatrudnionych

� 1 mln osób niewidomych w Europie

(ok. 80 tys. w Polsce), starzejące się społeczeństwo

� Koszty USA: 51 mld $ rocznie

(e-Health EU – 6 mld €)

Page 5: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 5

Problemy niewidomychProblemy niewidomych

I. Samodzielne poruszanie się i bezpieczeństwo

• przeszkody, kolizje z pojazdami

• nieciągłości nawierzchni (wykopy, schody)

• napady, kradzieże, ...

II. Nawigacja

• określanie własnej lokalizacji

• kierunek marszu i orientacja w otoczeniu

III. Dostęp do informacji

• tekst, znaki graficzne, interfejsy

urządzeń (społeczeństwo informacyjne)

Gdzie jestem?

Dokąd idę?

Jak się tam dostać?

Page 6: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 6

Idea substytucji sensorycznejIdea substytucji sensorycznej

• wzrok (80-90% informacji o otoczeniu)

• słuch

• dotyk

• węch

• smak

Pismo Braille’a

Page 7: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 7

Kazimierz Noiszewski (1859–1930)Kazimierz Noiszewski (1859–1930)

� profesor okulistyki USB (1919-21) i UW (1921-29); opracował oryginalną metodę przeszczepiania rogówki

(1921)

� skonstruował elektroftalm (tzw. sztuczne oko), urządzenie przetwarzające energię świetlną na bodźce dotykowe

i dźwiękowe (1889)

Klinika Okulistyki Wydziału Lekarskiego

Akademii Medycznej w Warszawie

Page 8: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 8

Technologie XXI wiekuTechnologie XXI wieku

� małe i szybkie urządzenia obliczeniowe

(minikomputery, notebooki, PDA,…)

� sieci teleinformatyczne PAN, LAN i WAN

(WiFi, internet, telefonia komórkowa 3G,…)

� systemy nawigacji satelitarnej

(GPS, Galileo, Glonass, kieszonkowe odbiorniki)

� zaawansowane algorytmy obliczeniowe i narzędzia

programistyczne, …

� miniaturyzacja urządzeń elektronicznych

(czujniki, implanty, mikromaszyny, nanotechnologia)

� techniki medyczne (diagnostyka,transplantologia, …) ©ADAC Laboratories

Page 9: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 9

Protezy wzroku i nowe terapieProtezy wzroku i nowe terapie

- terapia genowa

(mała liczba przypadków klinicznych)

- przeszczep komórek macierzystych

Leczenie

Page 10: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 10

Konsekwencje długotrwałej

utraty wzroku

Konsekwencje długotrwałej

utraty wzroku

Rogówka

Osoby, które po latach odzyskały wzrok:

- rozpoznają: ruch i kolory

- nie rozpoznają: liter, twarzy, przedmiotów

- błędnie oceniają odległość

Przyczyna:plastyczność komórek nerwowych –zanik ośrodków nerwowych w korze wzrokowej

Mike May

Page 11: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 11

Kora słuchowa

Kora wzrokowa

Badania fMRIBadania fMRI

Widzenie uaktywnia ok. 70% obszarów mózgu

Page 12: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 12

Systemy ostrzegania o przeszkodachSystemy ostrzegania o przeszkodach

Ulepszenia „białej laski”

- rozszerzone pole wykrywania przeszkód

LaserCane, UltraCane, SonarCane

Page 13: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 13

Systemy ostrzegania o przeszkodachSystemy ostrzegania o przeszkodach

Systemy obrazowania otoczenia:

- złożoność

- duży koszt

- nadmiar informacji dźwiękowej

SonicGuide, vOICe, Navbelt, Virtual Acoustic Environment

Dzisiaj, ponad 100 lat po pionierskich

pracach Noiszewskiego, urządzenia

techniczne wspomagające samodzielne

poruszanie się nie są przez niewidomych

powszechnie używane!

Dzisiaj, ponad 100 lat po pionierskich

pracach Noiszewskiego, urządzenia

techniczne wspomagające samodzielne

poruszanie się nie są przez niewidomych

powszechnie używane!

Page 14: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 14

Dźwiękowe obrazowanie otoczeniaDźwiękowe obrazowanie otoczenia

Obrazy stereo

Segmentacja Kodowanie

dźwiękowe

Mapa

odległości

Uproszczona

scena 3D

Rekonstrukcja

3D

audio

Scena

dźwiękowa

Page 15: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 15

Obrazowanie odległościObrazowanie odległości

Page 16: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 16

Dźwiękowe obrazowanie otoczeniaDźwiękowe obrazowanie otoczenia

Scena 3DScena 3D

Page 17: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 17

Model akustyczny głowyModel akustyczny głowy

Page 18: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 18

Dźwięk przestrzennyDźwięk przestrzenny

8,1ºŹródło wirtualne

3,1ºŹródło rzeczywisteRuchomeźródła

Page 19: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 19

Realizacja systemuRealizacja systemu

Procesor DSP TMS320DM642, 720 MHZ,

3 porty video, emulacja JTAG,

IDE Code composer studio

Page 20: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 20

Nawigacja osoby niewidomejNawigacja osoby niewidomej

GPSModel 3D

Stereowizja, wideo

GIS

Mapa cyfrowa miasta, MODGiK

Page 21: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 21

System zdalnej nawigacji niewidomegoSystem zdalnej nawigacji niewidomego

Page 22: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 22

Pokaz systemu zdalnej nawigacji

Pokaz systemu zdalnej nawigacji

Page 23: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 23

Pokaz terminala

zdalnego asystenta

Pokaz terminala

zdalnego asystenta

Page 24: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 24

Telefon komórkowy z syntezą mowyTelefon komórkowy z syntezą mowy

Telefon komórkowy jako inteligentny asystent osoby niewidomej:

- funkcje telefonu

- synteza mowy

- nawigacja GPS

Page 25: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 25

Wykład inauguracyjny prof. KorzecaWykład inauguracyjny prof. Korzeca

Wykład inauguracyjny prof. Korzeca w roku 1975.

Prognoza na 33 lata do przodu?

Page 26: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 26

Prevent nuclearterror

Securecyberspace

Engineer thetools of scientificdiscovery

Advancepersonalizedlearning

Make solarenergyeconomical

Manage thenitrogen cycle

Advance healthinformatics

Provide energyfrom fusion

Provideaccess to clean water

Engineer bettermedicines

Develop carbonsequestrationmethods

Restore andimprove urbaninfrastructure

Reverse-engineerthe brain

Enhancevirtual reality

National Academy of Engineering, USA –Grand Challenges

Page 27: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 27

Page 28: Jak pokaza wiat niewidomemu?eletel.p.lodz.pl/pstrumil/inauguracyjny_2008.pdf · 2008-10-04 · systemy nawigacji satelitarnej (GPS, Galileo, Glonass, kieszonkowe odbiorniki ) zaawansowane

Paweł Strumiłło, Wykład inauguracyjny PŁ 2008/2009 28

PodziękowaniaPodziękowania

Osobom niewidomym biorącym udział w badaniach

Polskiemu Związkowi Niewidomych w Łodzi

Współpracownikom i doktorantom

Zakładu Elektroniki Medycznej

MNiSW – finansowanie badań