Szabó - Varjú: Automatikus értékelés- és érzelemelemzés magyar nyelvű szövegeken

32
Automatikus értékelés- és érzelemelemzés magyar nyelvű szövegeken VARJÚ ZOLTÁN Precognox Informatikai kft. [email protected] A NYÍLT INFORMÁCIÓGYŰJTÉS FEJLŐDŐ TERÜLETEI nemzetközi tudományos-szakmai konferencia 2015. november 3-4. SZABÓ MARTINA KATALIN Precognox Informatikai kft. [email protected] Szegedi Tudományegyetem, Szláv Intézet, Orosz Filológiai Tanszék [email protected] szeged.hu

Transcript of Szabó - Varjú: Automatikus értékelés- és érzelemelemzés magyar nyelvű szövegeken

Page 1: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Automatikus értékelés- és érzelemelemzés magyar nyelvű szövegeken

VARJÚ ZOLTÁNPrecognox Informatikai kft. [email protected]

A NYÍLT INFORMÁCIÓGYŰJTÉS FEJLŐDŐ TERÜLETEI nemzetközi tudományos-szakmai konferencia

2015. november 3-4.

SZABÓ MARTINA KATALIN• Precognox Informatikai kft.

[email protected] • Szegedi Tudományegyetem,

Szláv Intézet, Orosz Filológiai Tanszék [email protected]

Page 2: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

R-index és nowcasting

Page 3: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken
Page 4: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken
Page 5: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken
Page 6: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Racionalitás és érzelmek

Page 7: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Racionalitás?

Page 8: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Descartes tévedése

• Érzelmek hiányában döntésképtelenek vagyunk, mivel nem tudjuk gyorsan rangsorolni a lehetséges alternatívákat

Page 9: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Darwin

•Az érzelmek kifejezéséről embernél és állatoknál

Page 10: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Ekman

• Hat alapvető emóció• Mikrokifejezések

akaratlan megjelenése az arcon

Page 11: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Mi a helyzet a nyelvvel?

• A gazdasági döntésekre nagy hatással vannak a gazdasági hírek• A mindennapi döntéshozatal során

gyorsan kell határoznia a szereplőknek• Találhatunk-e összefüggést a

hírekben megjelenő emóciók és a makromutatók alakulása között?

Page 12: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Az értékelés- és az érzelemelemzés

Az új megoldások

Page 13: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Cél és haszon

• A nyelvtechnológia részfeladatai• Céljuk: automatikus tartalmi elemzés nagy mennyiségű szövegről• Magas hasznosíthatóság különböző alkalmazásokban;  pl. ogazdasági trendek azonosítása és előre jelzése;oA vásárlói hangulat mérése;opolitikusokkal, pártokkal szembeni aktuális beállítódás mérése;oegy adott társadalmi, gazdasági jelenségre reflektáló

közönséghangulat;opszichológiai szempontú szövegelemzés; ostb.

Page 14: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Bővebben az értékeléselemzésről•Másképpen: szentimentelemzés • A feladat: az értékelő véleményt kifejező tartalmak

automatikus kivonatolása. Pl.94 millió forintos vagyoni hátrányt okozott a győri

kórház gazdálkodásért felelős vezetője. (forrás: index.hu)

A közelmúltban ötletes szuperhősös könyvtartó duójával hívta fel magára a figyelmet (…) az ügyesen kitalált, rajzfilmfigura-szerű minimalista, mágneses sziluettcsalád gyerekeket és felnőtteket egyaránt képes levenni a lábairól. (forrás: index.hu)

Page 15: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

És …

•…nem csak a detektálás, a következők is fontosak:oaz értékelés típusa (másképpen: polaritás): pozitív

vagy negatívointenzitásoaz értékelés tárgya (target)

Page 16: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Bővebben az érzelemelemzésről•A nyelvtechnológiában kisebb jelentőséget

tulajdonítanak a az emócióknak, mint a szentimenteknek. Az érzelemelemzés új irány máshol központi szerep, pl. viselkedéstudomány vagy pszichológia. •A magyar nyelvre: Precognox Informatikai kft.

foglalkozik•A feladat célja: a szövegekben tükröződő érzelmek

kivonatolása.

Page 17: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

PéldákFélelem, aggodalom: Tisztaság- és illatmániásként először féltem a folyékony mosódiótól. Mi lesz, ha nem a megszokott tisztaság lesz az eredmény? (forrás: hazipatika.com)Bánat, elkeseredettség: Nem értem. Semmit nem fogyok, értem hogy mozogni kell, minden nap biciklivel járok, és gyaloglok sokat. (…) Már nagyon el vagyok keseredve. (forrás: gyakorikerdesek.hu)Meglepetés: Amikor a műtétem után terveztem a szezont, nem is hittem volna, hogy ilyen gyorsan javul az állapotom. Nincs semmilyen panaszom. (forrás: mob.hu)

Page 18: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

A technikai háttér

• Szentiment- és emóciószótárak• Szentimentszótáraink: • pozitív polaritású kifejezések• negatív polaritású kifejezések

• Emóciószótáraink: • az Ekman-féle hat kategória szerint: ÖRÖM, DÜH, BÁNAT,

FÉLELEM, UNDOR, MEGLEPŐDÉS• nyolc kategória szerint: + FESZÜLTSÉG, VONZALOM

Page 19: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Értékelés- és érzelemelemzésa gyakorlatban

Page 20: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

A vizsgált korpuszAz INDEX-korpuszoA szöveggyűjtés eszköze: az index.hu keresőjeoA szöveggyűjtés időpontja: 2015. január 2.oKritériumok: oazok a szövegek, amelyek tartalmazták a válság és a

recesszió szavak valamelyikétoa 2006. január 1. és 2014. december 31. közé eső

időszakbóloA korpusz mérete: összesen 1731 cikk

Page 21: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

A fontosabb események és jelenségek, amelyekre figyelünk

országgyűlési választások

2006 zavargások

negatív gdp növekedési időszakok

Page 22: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Szófelhők a szentimentek

relatív arányából

Page 23: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Szentimentelemzés a korpuszon

Page 24: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Düh

Page 25: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Bánat

Page 26: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Félelem

Page 27: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Meglepődés

Page 28: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Undor

Page 29: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Öröm

Page 30: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Összegzés, távlatok

•Az érzelmek feldolgozása olyan folyamatokra is rámutat, amelyekre semmilyen más tartalomelemző megoldás nem•A targeteket kezelnünk kell az egyik

jelenlegi projektünk

Page 31: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Köszönjük a figyelmet!

Page 32: Szabó - Varjú: Automatikus  értékelés- és érzelemelemzés magyar nyelvű szövegeken

Elérhetőségek:

http://precognox.com/http://kereses.blog.hu/

SEMANTIC SEARCHTEXT MINING

AGILE SOFTWARE DEVELOPMENT

• Phone: +36-82-222-193• Fax: +36-82-222-193• Email: info at precognox dot

com

• SZABÓ MARTINA KATALIN

[email protected]

• VARJÚ ZOLTÁ[email protected]