Klaus Weber M.Sc. M.Sc.
Telefon: | +49 821 598 - 2329 |
E-Mail: | klaus.weber@uni-a.de |
Raum: | 2041 (N) |
Adresse: | Universitätsstraße 6a, 86159 Augsburg |
Forschungsinteressen
- Human-Agent-Interaction (HAI)
- Persuasive AI
- Explainable (persuasive) AI
- Conversational and Reflective Engagement
- Reinforcement Learning
Auszeichnungen
-
Proceedings of the 20th ACM International Conference on Multimodal Interaction (ICMI '18)
Best Paper Runner-Up Award
-
Proceedings of the 19th International Conference on Autonomous Agents and Multi-Agent Systems (AAMAS '20)
Best Paper Award Finalist
Abschlussarbeiten & Projektmodule
Abschlussarbeiten (Bachelor und Master) und Projekt-/Praxismodule können bei mir u.a. (nicht ausschließlich in den folgenden Bereichen/Themengebieten mit Kontext Argumentation und argumentatives Verhalten bearbeitet werden:
- Reinforcement Learning (RL)
- Neuronale Netze (NN, CNN, GAN)
- Explainable AI (XAI)
Bei Interesse sendet mir gerne eine E-Mail mit einem der oben genannten Stichwörter, dann können wir einen Termin zur weiteren Besprechung vereinbaren. Oder kommt einfach vorbei in meinem Büro.
Offene Arbeiten (Auswahl, nicht auschließlich):
- Understanding Subliminal Emotions in Argumentative Speeches via Explainable Artificial Intelligence (MA, PM)
tba (Bei Interesse einfach direkt bei mir melden).
- Automatic Rule-Based Argument Generation Based on Valence and Arousal (BA, PM)
Studien weisen stark daraufhin, dass es signifikanten Unterschied macht, auf welche Art und Weise Argumente zur persuasiven Beeinflussung vorgetragen werden. Ein wesentliches Merkmal hierbei ist die Art der verwendeten Emotion. Im Rahmen eines Praxismoduls wurden Argumente einer Datenstruktur so umgeformt, dass sie mit verschiedenen Emotionen (inhaltlich) vorgetragen werden können. Die textuellen Änderungen sind dabei aus der Literatur übernommen und hard-codiert in den Datensatz eingepflegt. Wünschenswert wäre aber eine automatische Generierung neuer Textbausteine auf Basis eines regelbasierten Ansatzes, uim die gewünschte Emotion (Valence & Arousal) zu erhalten. Ziel der Arbeit ist die Einarbeitung in relevante Literatur und die Entwicklung eines Moduls am Beispiel einer vorgegebenen Argumentstruktur mit 43 Argumenten. Vorkenntnisse in Python 3.x sind wünschenswert, jedoch nicht zwingend notwendig.
- Emotionale TTS auf Basis des Pleasure-Arousal Models und neuronaler Netze (MA, PM)
Bekannte TTS-Systeme erzeugen oftmals nur neutrale und emotionslose Stimmen. Dies führt dazu, dass diese als weniger natürlich wahrgenommen werden. Eine Variante dies zu verbessern ist aus Anwendersicht zwar mit Hilfe der EmotionML geschaffen worden, jedoch wird diese von vielen (guten) TTS-Systemen (Amazon Polly, Cerevoice) nicht unterstützt bzw. klingt alles andere als natürlich (MaryTTS). Das Paper „Emotional End-to-End Neural Speech synthesizer“ beschreibt einen Ansatz auf Basis des TTS Tacotron models (neural network) emotionale TTS zu generieren. Eine eigene am Lehrstuhl verwendete Idee befasst sich mit der Manipulierung der Audio-Files mit Hilfe von Cycle-GANs. Ziel der Arbeit ist es sich in die entsprechende Literatur einzuarbeiten und ein Modell zu trainieren und dieses abschließend zu evaluieren. Gute bis sehr gute Kenntnisse in Python 3.x sind wünschenswert.
- Exploring Persuasive Bias using counter-factual training (MA, PM)
In persuasiven übermittelten Nachrichten spielt das WIE oftmals eine wichtigere Rolle als das WAS. Dies kann die Tonlage sein, die Stimme im allgemeinen oder die Emotion, die über die Stimme übertragen wird.
Ziel der Arbeit ist es den Unterschied zwischen überzeugenden und nicht überzeugenden Stimmen aufzuzeigen. Eine interessante Variante sind sogenannte Counter-Factuals. Die Grundidee ist, dass man vesucht von einer Domäne A (überzeugende Stimmen) in eine Domäne B (nicht-überzeugende Stimmen) zu konvertieren. Dies wird meistens mit sogenannten Cycle-GANs gemacht (Eine einfache Einführung findet sich hier: https://machinelearningmastery.com/what-is-cyclegan/. Ziel der Arbeit ist es auf Basis dieser C-GANs (aufbauend auf existieren Modell-Architekturen) zu untersuchen, ob und inwieweit sich die Konvertierung von überzeugenden und nicht-überzeugenden Stimmen realisieren lässt und anhand eines Beispiel-Korpus ein Modell zu trainieren und anschließend zu evaluieren. Gute bis sehr gute Kenntnisse in Python 3.x und neuronalen Netzen (TF, Keras, etc.) sind wünschenswert.
In Bearbeitung:
- Understanding Subliminal Persuasive Body Language in Political Speeches via Explainable Artificial Intelligence (Lukas Tinnes)
- Towards dynamic behavior animations (Norman Szabo)
Abgeschlossen :
- Exploring qualitative reasoning for engaging argumention of virtual agents (Eva Pohlen)
Links
Publikationen
2021 |
Niklas Rach, Klaus Weber, Yuchi Yang, Stefan Ultes, Elisabeth André and Wolfgang Minker. 2021. EVA 2.0: emotional and rational multimodal argumentation between virtual agents. it - Information Technology 63, 1, 17-30. DOI: 10.1515/itit-2020-0050 |
2020 |
Klaus Weber, Niklas Rach, Wolfgang Minker and Elisabeth André. 2020. How to win arguments: empowering virtual agents to improve their persuasiveness. Datenbank-Spektrum 20, 161-169. DOI: 10.1007/s13222-020-00345-9 |
Hannes Ritschel, Thomas Kiderle, Klaus Weber, Florian Lingenfelser, Tobias Baur and Elisabeth André. 2020. Multimodal joke generation and paralinguistic personalization for a socially-aware robot. Lecture Notes in Computer Science 12092, 278-290. DOI: 10.1007/978-3-030-49778-1_22 |
Hannes Ritschel, Thomas Kiderle, Klaus Weber and Elisabeth André. 2020. Multimodal joke presentation for social robots based on natural-language generation and nonverbal behaviors. In Second Workshop on Natural Language Generation for Human–Robot Interaction at HRI 2020, March 23, 2020, Cambridge, UK. |
Klaus Weber, Kathrin Janowski, Niklas Rach, Katharina Weitz, Wolfgang Minker, Stefan Ultes and Elisabeth André. 2020. Predicting persuasive effectiveness for multimodal behavior adaptation using bipolar weighted argument graphs. In Proceedings of the 19th International Conference on Autonomous Agents and Multi-Agent Systems (AAMAS '20). ACM, New York, NY, 1476-1484 |
Klaus Weber, Lukas Tinnes, Tobias Huber, Alexander Heimerl, Eva Pohlen, Marc-Leon Reinecker and Elisabeth André. 2020. Towards demystifying subliminal persuasiveness: using XAI-techniques to highlight persuasive markers of public speeches. Lecture Notes in Computer Science 12175, 113-128. DOI: 10.1007/978-3-030-51924-7_7 |
2019 |
Niklas Rach, Klaus Weber, Annalena Aicher, Florian Lingenfelser, Elisabeth André and Wolfgang Minker. 2019. Emotion recognition based preference modelling in argumentative dialogue systems. In Takuya Maekawa and Peizhao Hu (Ed.). 2019 IEEE International Conference on Pervasive Computing and Communications Workshops (PerCom Workshops), 11-15 March 2019, Kyoto, Japan. IEEE, Piscataway, NJ, 838-843. DOI: 10.1109/percomw.2019.8730650 |
Henner Gimpel, Sarah Bayer, Elisabeth André, Ivo Benke, Alexander Benlian, Nicholas Cummins, Oliver Hinz, Kristian Kersting, Alexander Maedche, Jan Riemann, Björn Schuller and Klaus Weber. 2019. Humane anthropomorphic agents: the quest for the outcome measure. In AIS SIGPrag Workshop on Value and Ethics in the Digital Age, December 14, 2019, co-located with ICIS 2019, Munich, Germany. |
2018 |
Niklas Rach, Klaus Weber, Louisa Pragst, Elisabeth André, Wolfgang Minker and Stefan Ultes. 2018. EVA: a multimodal argumentative dialogue system. In Sidney K. D'Mello, Panayiotis (Panos) Georgiou, Stefan Scherer, Emily Mower Provost, Mohammad Soleymani and Marcelo Worsley (Ed.). Proceedings of the 2018 on International Conference on Multimodal Interaction - ICMI '18, Boulder, CO, USA, October 16 - 20, 2018. ACM Press, New York, NY, 551-552. DOI: 10.1145/3242969.3266292 |
Klaus Weber, Hannes Ritschel, Ilhan Aslan, Florian Lingenfelser and Elisabeth André. 2018. How to shape the humor of a robot - social behavior adaptation based on reinforcement learning. In Sidney K. D'Mello, Panayiotis (Panos) Georgiou, Stefan Scherer, Emily Mower Provost, Mohammad Soleymani and Marcelo Worsley (Ed.). Proceedings of the 2018 on International Conference on Multimodal Interaction - ICMI '18, Boulder, CO, USA — October 16 - 20, 2018. ACM Press, New York, NY, 154-162. DOI: 10.1145/3242969.3242976 |
Klaus Weber, Hannes Ritschel, Florian Lingenfelser and Elisabeth André. 2018. Real-time adaptation of a robotic joke teller based on human social signals. In Elisabeth André, Sven Koenig, Mehdi Dastani and Gita Sukthankar (Ed.). AAMAS '18 Proceedings of the 17th International Conference on Autonomous Agents and MultiAgent Systems, Stockholm, Sweden, July 10 - 15, 2018. IFAAMAS - International Foundation for Autonomous Agents and Multiagent Systems, Richland, SC, 2259-2261. |