A számítógépes nyelvészet elmélete és gyakorlata A...
Transcript of A számítógépes nyelvészet elmélete és gyakorlata A...
![Page 1: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/1.jpg)
A számítógépes nyelvészet elmélete és gyakorlata
A számítógépes feldolgozás szempontjából fontos természetes nyelvi jelenségek
![Page 2: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/2.jpg)
A szövegfeldolgozás lépései
- elektronikusan hozzáférhető szövegek
- a feldolgozás első lépése a szegmentálás: fejezetek, bekezdések, mondatok, szavak
- feladatok: a formátum információ és a szöveg szétválasztása, a szöveg tagolása, a mondathatárok meghatározása, szóalakokra bontás (tokenizálás)
![Page 3: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/3.jpg)
A szövegfeldolgozás lépései
- szótövesítés (lemmatizálás): nyelvfüggő
- magyar: agglutináló
- angol: flektáló (sing-sang)
- a vizsgálat környezettől független
- termet (fn.) alanyeset – termet (fn) tárgyeset
- minden egyes szó szófajának meghatározása
- http://corpus.nytud.hu/people/joker/demo/egy/
![Page 4: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/4.jpg)
A szövegfeldolgozás lépései
- mondatelemzés
- főnévi csoportok kijelölése:
egy nagy piros ház
a kocsit nagy sebességgel húzó vonattal
![Page 5: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/5.jpg)
Természetesnyelvi jelenségek
- a nyelvfeldolgozás minden szintjén jelentkeznek
nem nyelvspecifikusak
mögöttük általános nyelvészeti, nyelvelméleti jelenségek állnak
a beszélők számára nem okoznak gondot, triviálisak
megkerülhetetlenek
![Page 6: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/6.jpg)
1. lexikális többértelműség
Több jelenség egységes kezelése, nem számít, hogy
poliszémia vagy homonímia áll-e a háttérben
Feladat: a helyes lexikonbeli kód gyors megtalálása
Hét egér volt az asztalon.
A rejtvényt fejtem.
Három színes toll esett le a földre.
Rose rose to put rose roes on her rows of roses.
Mj: 1 millió szavas korpuszban a szavak 52%-ának volt több
lehetséges címkéje
![Page 7: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/7.jpg)
1. lexikális többértelműség
Feladat: terem, állam, állatok, sütőtök, köröm, hullám, művére, női, sort, bájt, termet, mondat, lejár, élek, sírok, laknak, falnak, halnak, telefonnak, váza, kacsa, héja, léptet, ereszt, béget, települ, diák, torok, tubák, törtet, kopaszt, horpaszt, adunk, kapunk, tudatunk
![Page 8: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/8.jpg)
2. képzett szavak, összetett szavak, főnévi jelzők
paper bag, beer mug
A magyarban is sok alaktanilag jelöletlen
szerkezet van, pl. összetett szavak szintaktikai
feldolgozási problémái.
…verseny, úszó…
értelmezési problémák főnévi jelzős kifejezéseknél: bird damage, propeller damage, madárkár, légcsavarkár
főnévi jelzők jelöletlen sora:
water meter cover adjustment screw
németben gyakori
helyesírási problémák
![Page 9: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/9.jpg)
3. szerkezeti többértelműségek
Az ajtót kinyitva találtam/távozott.
Az oroszlán simogatása veszélyes.
Fehér házak és hajók voltak a képen.
![Page 10: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/10.jpg)
4. vonzatok, esetkeretek, idiómák
Funkcionális szerep és esetadás:
Elgondolkoztam az eseten/a buszon.
Nominális bővítmények:
Egész délután a hajókat néztük a Dunán.
Láttam a lányt a presszóból.
I once shot an elephant in my pajamas. How he got in my pajamas, I dunno.
Egy pincsi követte a lányt farmerban. Aztán jött egy anya egy nagyon kicsi gyerekkel, aki babakocsit tolt.
![Page 11: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/11.jpg)
4. Vonzatok, esetkeretek, idiómák
Idiómák:
csütörtököt mond, feldobta a talpát, dugába dől, felveszi a nyúlcipőt
![Page 12: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/12.jpg)
5. megszakított vagy távoli összetevős szerkezetek
igekötős ige segédigével: meg szeretné oldani, el fog tudni indulni
Megszakított birtokos szerkezet:
Tegnap elszakadt Péter könyve.
Péternek tegnap elszakadt a könyvtárban a könyve.
![Page 13: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/13.jpg)
6. beágyazás, rekurzió
önhivatkozó eljárás
The cat in the hat in the hat ….
A Pegazus mögötti ló mögötti ló … kopasz.
A fiú, akit a barátom meghívott, elment.
The rat the cat the dog bit chased escaped.
![Page 14: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/14.jpg)
7. kihagyásos szerkezetek
0-morféma:
Ez piros. (This is red.)
A fehér kutyám kergeti a fekete kutyám.
Rég láttam a gyerekeid.
Ellipszis:
A fiam iskolába jár, a lányom még nem.
![Page 15: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/15.jpg)
8. kérdések
4 típus lehetséges válaszaikkal:
Eldöntendő: p és nem p
Választó: p1, …, pn
Kiegészítendő: x1, …, xn
Nyitott: p1, …, pn
![Page 16: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/16.jpg)
9. aktuális mondattagolás: a kommunikatív funkció figyelembe vétele
topik-komment: Mari megszerette a derelyét.
fókusz: ‘Mari szerette meg a derelyét.
A derelyét ‘Mari szerette meg. Mari ‘a derelyét szerette meg.
Kontrasztív topik: Finnül tud Mari, de angolul nem.
![Page 17: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/17.jpg)
10. tagadás
a tagadás hatóköre, tagadás és egyéb jelenségek együttes megjelenése:
Péter megjött.
Nem Péter jött meg.
Péter nem jött meg.
![Page 18: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/18.jpg)
11. determinánsok és kvantorok
névelők, egzisztenciális és univerzális kvantorok
Egész este egy kocsmát kerestünk.
A hód gátat épít.
Everyone loves someone.
Valakit mindenki szeret.
Mindenki szeret valakit.
![Page 19: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/19.jpg)
12. jelző és jelzett szó
szürke/kis elefánt
sárga pisztoly/ játék pisztoly
![Page 20: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/20.jpg)
13. névmások és más referenciális elemek
A lány szerette a fiút, aki megcsókolta őt.
A man walks in the park. He whistles.
*He whistles. A man walks in the park.
Every farmer who owns a donkey, beats it.
![Page 21: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/21.jpg)
14. előfeltevések
- határozott főnévi szerkezetek: Mari bátyja egyetemista. (előfeltevések: Van valaki, akit Marinak hívnak. Marinak van bátyja.)
- faktív igék:Elpanaszoltam, hogy milyen szemtelen voltál. (előfeltevés: Szemtelen voltál.)
- állapotváltozást jelölő igék: Mari meggyógyult. (előfeltevés: Mari korábban beteg volt.)
![Page 22: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/22.jpg)
15. beszédaktusok
performatív megnyilatkozások
lokúció: a kimondás aktusa, egy hangsor
illokúció: a cselekvés, amit a lokúcióval teszünk
perlokúció: valódi, létrejött következmény, hatás
Meg tudná mondani hány óra van?
![Page 23: A számítógépes nyelvészet elmélete és gyakorlata A ...lingua.arts.unideb.hu/doc/sznyelv_2013_3ea.pdf · 4. vonzatok, esetkeretek, idiómák Funkcionális szerep és esetadás:](https://reader033.fdocuments.net/reader033/viewer/2022041602/5e31e73ec469e434fe5711a1/html5/thumbnails/23.jpg)
Irodalom
Prószéky Gábor: Számítógépes nyelvészet. Budapest, 1989.