گفتار مرا تو باید آغاز کنی آغاز سخن مرا سرافراز کنی در غیبت تو گره به گفتار من است
به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل...
description
Transcript of به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل...
![Page 1: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/1.jpg)
به نام خدا
سمینار درس مدلسازی سیستم های بیولوژیکی:
مدل محاسباتی نورال بیس تولید و درک گفتار
ارائه دهنده: ویدا مهدی راده فراستاد راهنما: آقای دکتر توحید خواه
88-89نیمسال اول
![Page 2: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/2.jpg)
فهرست مطالبo مقدمهo ساختار مدل : بخش تولید گفتار
بخش درک گفتار o مقایسه با مدلDIVAo :به دست آوردن اطالعات گفتارBabbling
Imitationoنتیجه گیری
![Page 3: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/3.jpg)
مقدمه محدودیت عملکرد سیستم های بازشناسی و
تلفیق گفتار فعلی عدم توجه به مراحل پردازش عصبی تولید و درک
گفتار هدف این مطالعه: ارائه یک مدل عصبی پیاده
سازی شده کامپیوتری با استفاده از شبکه عصبی ، دارای قابلیت تقلید از پردازش های تولید و درک
گفتار انسان
![Page 4: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/4.jpg)
ساختار مدل محاسباتی نورال بیس
8
![Page 5: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/5.jpg)
بخش تولید گفتار phonemic map - Phonetic map – motor plan map - primary motor map - articulation
![Page 6: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/6.jpg)
برای سیالب تکرار شونده حالتphonemic باعث می شود.phoneticفعالیت یک نرون در نقشه
فعال شدن حالت های حسیauditory و somatosensory(و حالت طرح حرکت motor
plan بواسطه نقشه )phonetic برای سیالب غیر تکرار شونده، ابتدا طراحی
motor planحرکت و سپس
![Page 7: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/7.jpg)
Motor plan هماهنگی زمانی حرکتآرتیکوالتورها
Motor execution کنترل و تصحیح طرححرکت بوسیله فیدبکهای دریافتی
Primary motor map تشخیص واقعی هر حرکت گفتار
فعال کردن واحدهای موتوری و حرکت آرتیکوالتور
![Page 8: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/8.jpg)
مقایسه فیدبکauditory و somatosensory آیتم گفتارتولید آموزش دیدهsomatosensory و auditoryشده با حالت
تصحیحmotor plan سه پارامترv : high-low, front-back, rounded-
unrounded چهار پارامترc : labial, apical, dorsal, exact closing
position11 نرون برای نقشه motor plan 110 نرون برای Primary motor map11 نرون برای نقشه auditory38 نرون برای نقشه somatosensory
بیس نورال محاسباتی مدل ساختار
![Page 9: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/9.jpg)
بخش درک گفتار Auditory receptors – auditory map- phonetic map - phonemic map
![Page 10: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/10.jpg)
DIVA مقایسه مدل پیشنهادی با مدل (Directions Into Velocities of Articulators)
شباهت ها: مسیرهای کنترلیfeedback و feedforward شبکه هایSOM روش آموزشbabbling وimitation
تفاوتها: ادغامmotor planning و motor execution نقشهphoneticDIVA مدل تولید گفتار :
![Page 11: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/11.jpg)
به دست آوردن اطالعات گفتار
اطالعات در نگاشت ها به صورت مقادیر وزنیاتصاالت نرون ها است که در طول آموزش
تنظیم می شوند.دو مرحله آموزش:
BabblingImitation
![Page 12: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/12.jpg)
Babbling training بررسی آیتم های گفتار بدون در نظر گرفتن زبان
شناسی آنهاتولید رندوم آیتم های گفتار گوش دادن به آیتم ها از طریق فیدبکauditiry تنظیم وزن های بین نقشه های حسی وmotor
plan بوسیله نقشه phonetic اطالعات مستقل از زبان یادگیری رابطه حسی- حرکتی مجرای صوتی و کنترل
و motor planعصبی آن یعنی رابطه بین حالت های somatosensory و auditoryحالت های
![Page 13: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/13.jpg)
شامل دو آموزش حالت های vocalic و syllabic مجموعه آموزشیvocalic حالت 1076 شامل
مجموعه آموزشیsyllabic آیتم آموزشی 279 شامل حاالت حرکتی برایVC و CV بر اساس پارامترهای زیر تعیین می
شود.: دو پارامترvocalicحرکات آرتیکوالتورموقعیت بسته شدن در حروف بی صدا
![Page 14: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/14.jpg)
استفاده از شبکه خود ساماندهنرون های الیه جانبی و تنظیم وزن ها بین
Hebbianنرون الیه مرکزی به روش
![Page 15: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/15.jpg)
Motor plan and auditory link weight values after babbling and imitation training
phonetic map )15*15 neurons(
![Page 16: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/16.jpg)
Imitation training تنظیم وزن های بین نقشهphoneticو phonemic اطالعات به دست آمده ازimitation.وابسته به زبان است مدل در طول آموزش یاد می گیرد که نرون هایی با ویژگی های
phonemic.متفاوت را به حالت های حسی متناسب آنها وصل کند Phone regionنرونی در این ناحیه قرار دارد که مقدار :
باشد.0.95 ، باالی phonemicوزنی اتصال آن با نرون متناظر در نقشه پردازش آیتم آکوستیک خارجی
تخمینmotor plan
Positions of all auditory patterns of vocalic training
![Page 17: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/17.jpg)
identificationand discrimination test
مدل مختلف20آموزش 20شنونده مجازی Measured discrimination تخمین فاصله :
phoneticنرونها در نقشه Calculated discrimination بر اساس احتمال :
شناسایی
![Page 18: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/18.jpg)
identificationand discrimination test
![Page 19: به نام خدا سمینار درس مدلسازی سیستم های بیولوژیکی: مدل محاسباتی نورال بیس تولید و درک گفتار](https://reader035.fdocuments.net/reader035/viewer/2022081416/5681645f550346895dd6358a/html5/thumbnails/19.jpg)
با تشکراز توجه شما