Audio-lingual and Visual-facial Emotion Recognition: Towards a Bi-modal Interaction System

Author(s):  
E. Alepis ◽  
I.-O. Stathopoulou ◽  
M. Virvou ◽  
G.A. Tsihrintzis ◽  
K. Kabassi
2013 ◽  
Vol 61 (1) ◽  
pp. 7-15 ◽  
Author(s):  
Daniel Dittrich ◽  
Gregor Domes ◽  
Susi Loebel ◽  
Christoph Berger ◽  
Carsten Spitzer ◽  
...  

Die vorliegende Studie untersucht die Hypothese eines mit Alexithymie assoziierten Defizits beim Erkennen emotionaler Gesichtsaudrücke an einer klinischen Population. Darüber hinaus werden Hypothesen zur Bedeutung spezifischer Emotionsqualitäten sowie zu Gender-Unterschieden getestet. 68 ambulante und stationäre psychiatrische Patienten (44 Frauen und 24 Männer) wurden mit der Toronto-Alexithymie-Skala (TAS-20), der Montgomery-Åsberg Depression Scale (MADRS), der Symptom-Check-List (SCL-90-R) und der Emotional Expression Multimorph Task (EEMT) untersucht. Als Stimuli des Gesichtererkennungsparadigmas dienten Gesichtsausdrücke von Basisemotionen nach Ekman und Friesen, die zu Sequenzen mit sich graduell steigernder Ausdrucksstärke angeordnet waren. Mittels multipler Regressionsanalyse untersuchten wir die Assoziation von TAS-20 Punktzahl und facial emotion recognition (FER). Während sich für die Gesamtstichprobe und den männlichen Stichprobenteil kein signifikanter Zusammenhang zwischen TAS-20-Punktzahl und FER zeigte, sahen wir im weiblichen Stichprobenteil durch die TAS-20 Punktzahl eine signifikante Prädiktion der Gesamtfehlerzahl (β = .38, t = 2.055, p < 0.05) und den Fehlern im Erkennen der Emotionen Wut und Ekel (Wut: β = .40, t = 2.240, p < 0.05, Ekel: β = .41, t = 2.214, p < 0.05). Für wütende Gesichter betrug die Varianzaufklärung durch die TAS-20-Punktzahl 13.3 %, für angeekelte Gesichter 19.7 %. Kein Zusammenhang bestand zwischen der Zeit, nach der die Probanden die emotionalen Sequenzen stoppten, um ihre Bewertung abzugeben (Antwortlatenz) und Alexithymie. Die Ergebnisse der Arbeit unterstützen das Vorliegen eines mit Alexithymie assoziierten Defizits im Erkennen emotionaler Gesichtsausdrücke bei weiblchen Probanden in einer heterogenen, klinischen Stichprobe. Dieses Defizit könnte die Schwierigkeiten Hochalexithymer im Bereich sozialer Interaktionen zumindest teilweise begründen und so eine Prädisposition für psychische sowie psychosomatische Erkrankungen erklären.


2017 ◽  
Vol 32 (8) ◽  
pp. 698-709 ◽  
Author(s):  
Ryan Sutcliffe ◽  
Peter G. Rendell ◽  
Julie D. Henry ◽  
Phoebe E. Bailey ◽  
Ted Ruffman

2020 ◽  
Vol 35 (2) ◽  
pp. 295-315 ◽  
Author(s):  
Grace S. Hayes ◽  
Skye N. McLennan ◽  
Julie D. Henry ◽  
Louise H. Phillips ◽  
Gill Terrett ◽  
...  

2019 ◽  
Author(s):  
Ingrid Tortadès ◽  
Roberto Gonzalez ◽  
Francesc Alpiste ◽  
Joaquín Fernandez ◽  
Jordi Torner ◽  
...  

BACKGROUND Emotional Recognition (ER) is one of the areas most affected in people with schizophrenia. However, there are no software tools available for the assessment of ER. The interactive software program ‘Feeling Master’ (a cartoon facial recognition tool) was developed to investigate the deficit in facial emotion recognition (FER) with a sample of patients with schizophrenia in a pilot project framework. OBJECTIVE The aim of the study was to test the usability of ‘Feeling Master’ as a psychotherapeutic interactive gaming tool for the assessment of emotional recognition in people with schizophrenia compared with healthy people, and the relationship between FER, attributional style and theory of mind. METHODS Nineteen individuals with schizophrenia and 17 healthy control (HC) subjects completed the ‘Feeling Master’ including five emotions (happiness, sadness, anger, fear, and surprise). Regarding the group with schizophrenia they were evaluated with the Personal and Situational Attribution Questionnaire (IPSAQ) and the Hinting Task (Theory of Mind) to evaluate social cognition. RESULTS Patients with schizophrenia showed impairments in emotion recognition and they remained slower than the HC in the recognition of each emotion (P<.001). Regarding the impairment in the recognition of each emotion we only found a trend toward significance in error rates on fear discrimination (P=.07). And the correlations between correct response on the ‘Feeling Master’ and the hinting task showed significant values in the correlation of surprise and theory of mind (P=.046). CONCLUSIONS In conclusion, the study puts forward the usability of the ‘Feeling Master’ in FER for people with schizophrenia. These findings lend support to the notion that difficulties in emotion recognition are more prevalent in people with schizophrenia, and that these are associated with impairment in ToM, suggesting the potential utility of the FER in the rehabilitation of people with schizophrenia.


Sign in / Sign up

Export Citation Format

Share Document