Dialogové systémy Luděk Bártek Značkování Dialogové systémy Luděk Bártek Laboratoř vyhledávání a dialogu, Fakulta Informatiky Masarykovy Univerzity, Brno jaro 2019 Dialogové systémy a emoce Dialogové systémy Luděk Bártek ■ Počítače pracující s emocemi - počítače, které mají Dialogové systémy a schopnost vyjádřit emoce, rozpoznat emoce a měnit své emoce Značkování chování podle emocí uživatele. emocí ■ Schopnost určit emocionální stav uživatele - přizpůsobení dialogové strategie: ■ klidný uživatel vs. spěchající uživatel ■ klidný uživatel vs. rozčilený uživatel ■ rostoucí napětí uživatele ■ ■ Emocionální stav má souvislost s prozódií. ■ TTS může modelovat emoce pomocí prozódie. ■ Při rozpoznávání lze detekovat emoce pomocí prozódie. Dialogové systémy a emoce Oblasti využití Dialogové systémy Luděk Bártek Značkování Dialogová rozhraní informačních systémů -spokojenost/nespokojenost, spěch, ... DS pro výuku - uživatel se nudí, je napjaty, unavený, ... Umělá (počítačová) empatie. Automobilové systémy. Systémy bojových letadel, vrtulníků, simulace vojenských operací. Co jsou to emoce? Dialogové systémy Luděk Bártek ■ This is a very tough question, that has produced significant amounts of headaches to scientists in the past . .. Dialogové systémy a emoce ■ ... many researchers have opted to study systematically Značkování emocí phenomena that most consider emotional. (Laval University Quebec) ■ René Descartes: ,,Only mathematics is certain, so all must be based on mathematics" ■ Dělení emocí: ■ Primární (základní) - vyskytují se u všech lidí a u části vyssich živočichu. ■ Sekundární (vyšší) - mohou být intelektuální, morální a estetické; mohou se lišit mezi jednotlivými kulturami. ■ Velkých šest - hněv, zklamání, štěstí, smutek, strach, překvapení. Emoce Další autoři Dialogové systémy Luděk Bártek ■ Arnold - hněv, averze, odvaha, sklíčenost, touha, Dialogové systémy a zoufalství, strach, nenávist, naděje, láska, smutek. emoce Značkování ■ Ekman, Friesen, and Ellsworth - hněv, odpor, strach, emoci radost, smutek, překvapení. ■ Frijda - touha, štěstí, zájem, překvapení, údiv, zármutek. ■ Gray - vztek a hrůza, touha, radost. ■ Izard - hněv, pohrdání, odpor, rozrušení, strach, vina, zájem, potěšení, hanba, překvapení. ■ James - obava, žal, láska, vztek. ■ Panksepp - očekávání, obava, vztek, panika. Emoce Centra výzkumu Dialogové systémy Luděk Bártek Dialogové systémy a emoce ■ University of Geneva (Klaus Scherer) Značkování emocí ■ Laval University, Quebec (Arvid Kappas) ■ Queen's University, Belfast (R. Cowie) ■ MIT Media Laboratory (R. W. Picard) ■ IBM (Almanden Labs) ■ University of California, Berkeley. Zjišťování emocí Dialogové systémy Luděk Bártek Značkování Lze provádět pomocí: ■ Změn galvanických vlastností kůže (změna odporu): Změn tlaku krve a pulsu Zjišťování emocí pokračování Dialogové systémy Luděk Bártek Značkování Lze provádět pomocí: ■ Změn dýchání: Změn elektrické aktivity mozku: Zjišťování emocí Rozdíly charakteristik Hněv/Smutek Zjišťování emocí IBM Blue Eyes Project Dialogové systémy Luděk Bártek Značkování K detekci emocí využívá ■ kameru: Výrazy tváře - Yale Face Database Dialogové systémy Luděk Bártek Značkování Radost: Smutek: Výrazy tváře - Yale Face Database Dialogové systémy a emoce Značkování emocí ■ Ospalost: ■ Překvapení: gr> 4 1 ► 4 1 ► 1 O o, O Značkovaní emocí Dialogové systémy Luděk Bártek Značkování Standard EmotionML Slouží k označkovaní emocí pro počítačové zpracování: f f f v v' ■ rozpoznávaní reci ■ syntéza řeči ■ sémantická analýza Značkování může být prováděno automaticky, manuálně a nebo poloautomaticky. Více při probírání multimodálních DS. O 0,0