Empower End-Users to Improve Chatbots: An Experimental Study to Evaluate Explainable AI Features for Collecting Chatbot Response Improvements

ISSD - KIT
Many service providers are currently dealing with the development of chatbots. Chatbots are software-based systems that communicate with the user over text- or speech-based natural language. They can be used to communicate with customers, provide information, or offer any other kind of digital service.
WHO CAN APPLY? Only enrolled students from KIT (Karlsruher Institut für Technologie) with course of studies Wirtschaftsinformatik, Wirtschaftsingenieurwesen, Informationswirtschaft, or Technische Volkswirtschaftslehre.
Du hast wenig Konkurrenz. Nutze deine Chance.
Empower End-Users to Improve Chatbots: An Experimental Study to Evaluate Explainable AI Features for Collecting Chatbot Response Improvements


Problem Description
Many interactions with chatbots are not perceived as natural. Most chatbot responses are rather short, constrained by limited vocabulary, and contain incomplete statements. The overall quality of chatbot responses is limited by the amount of effort chatbot engineers invest in their development. Because this is a very difficult task, chatbot developers need a system that supports them in this endeavor.
What is currently missing is a system that enables chatbot engineers to efficiently engage domain experts in the response generation process. To address this need, we already developed a system which domain experts can use to improve the responses of a chatbot. However, it is unclear which design features are needed to engage domain experts to contribute many chatbot response improvements. As a consequence, this Master Thesis should come up with different design ideas on how user feedback to improve chatbot responses can be collected. Particularly, the design features should build on knowledge from the research stream about explainable AI. Subsequently, an experimental evaluation should compare the different design ideas to show their effectiveness.
Required Skills
- Interest in human-chatbot interaction
- High motivation to solve interesting real-world problems in an experimental evaluation
Sprachen
Interessengebiete
Über ISSD - KIT
The research group “Information Systems & Service Design” (ISSD) headed by Prof. Mädche focuses in research, education, and innovation on designing interactive intelligent systems. The research belongs to the Institute of Information Systems and Marketing (IISM) and is embedded into the Information Systems & Engineering group. ISSD is also part of the Karlsruhe Service Research Institute (KSRI). The research group is positioned at the intersection of Information Systems (german: Wirtschaftsinformatik) and Human-Computer Interaction (HCI). Our mission is to create impactful scientific knowledge for designing interactive intelligent systems that enable humans to perform activities more efficiently, effectively, and meaningful. We believe that delivering cutting-edge knowledge and inspiring education, as well as an ongoing dialog with the public need to go hand in hand to maximize the impact of our work in organizations and society. The group is organized in three research departments: Digital Experience & Participation, Intelligent Enterprise Systems, and Digital Service Design & Innovation. Current topics of research are Human-AI Interaction, Cognitive Interaction Technologies, Physiological Computing Systems, Interactive Business Intelligence & Analytics Systems, and Interactive Systems Engineering.
Unser Standort
Häufige Fragen
Wer oder was ist Campusjäger?
Campusjäger ist mehr als eine Jobbörse. Wir unterstützen dich und unsere Partnerunternehmen dabei, zu einander zu finden. Unternehmen schreiben Jobangebote über uns aus, als Kandidat kannst du dich schnell und einfach mit deinem Campusjägerprofil auf viele verschiedene Jobs bewerben. Dabei haben wir immer ein Ziel vor Augen: Dich mit dem Job zusammen zu bringen, der wirklich zu dir passt.
Ist der Job, den ich sehe, überhaupt noch verfügbar?
Ja, alle Jobs die du auf unserer Plattform findest, sind noch zu besetzen.
Welche Dokumente benötige ich für meine Bewerbung?
Das hängt ganz vom Job ab, auf den du dich bewirbst. Häufig reicht es schon aus, wenn du deinen PDF Lebenslauf hochlädst bzw. dein Campusjägerprofil vollständig ausfüllst.
Wo kann ich meine Unterlagen bzw. Dokumente hochladen?
Sämtliche Unterlagen, die du deiner Bewerbung hinzufügen willst, kannst du in dein Campusjägerprofil hochladen. Unternehmen, bei denen du dich bewirbst, gestattest du mit deiner Bewerbung Zugriff auf die Informationen in deinem Profil.
Kann ich mich auch ohne Lebenslauf bewerben?
Um einen möglichst umfassenden ersten Eindruck von dir zu erhalten, benötigt das Unternehmen von dir einen Lebenslauf. Diesen musst du auch nur einmal und nicht für jede Bewerbung aufs Neue hochladen. Wenn du noch keinen PDF Lebenslauf hast, kannst du einfach deinen Campusjäger Lebenslauf ausfüllen. Alternativ hast du die Möglichkeiten dein XING oder LinkedIn Profil als PDF Datei zu exportieren.
Wo finde ich weitere Informationen zum Unternehmen?
Im Unternehmensprofil von ISSD - KIT findest du weitere Informationen.
Kann ich meine Bewerbung nachträglich bearbeiten?
Du kannst deine Bewerbung solange bearbeiten, bis du zu einem Vorstellungsgespräch eingeladen wurdest. Gehe dazu einfach in deine Bewerbungen und wähle die Bewerbung aus, die du bearbeiten möchtest. Dort hast du die Möglichkeit, alle deine Angaben anzusehen und zu verändern. Außerdem kannst du dein Campusjägerprofil jederzeit um weitere Informationen und Unterlagen ergänzen, die dem Unternehmen dann zusätzlich zur Beurteilung deiner Bewerbung vorliegen.
Wie bekomme ich Neuigkeiten zu meiner Bewerbung mit?
In deiner Bewerbungübersicht hast du jederzeit einen Überblick über den Bewerbungsverlauf. Sobald etwas Neues passiert, informieren wir dich umgehend darüber. Damit du auch sicher nichts verpasst, senden wir dir zusätzlich E-Mails zu den wichtigsten Statusänderungen.
Kann ich auch mehrere Bewerbungen gleichzeitig abschicken?
Die Anzahl deiner Bewerbungen ist nicht limitiert. Einen Überblick über deine Bewerbungen findest du hier.
Können andere Unternehmen sehen, wo ich mich noch beworben habe?
Nein, Unternehmen können immer nur Bewerbungen für sich selbst sehen.
Kann ich den Ansprechpartner des Unternehmens auch direkt kontaktieren?
Das Unternehmen kommt auf dich zu, sobald deine Bewerbung angesehen wurde. Solltest du vorher Fragen haben, hilft dir gerne dein persönlicher Candidate Manager von Campusjäger weiter.
What do I have to consider, if I am not from Germany?
Please make sure to provide all necessary documents within your Campusjäger profile. It should include an EU work-permit (if you have no EU citizenship) and a CV at least. Be aware of different employment types in Germany. Depending on the position you are applying to, you could also be asked for a certificate of enrollment and a transcript of records.
What do I have to consider, if German is not my mother tongue?
Please take into account the job’s language requirements and make sure the requirements match your skills. It is also helpful to provide language certificates. This article may support you during the application process.
Ich glaube, ich erfülle nicht alle Anforderungen. Kann ich mich trotzdem bewerben?
Oft können nicht erfüllte Anforderungen durch andere Fähigkeiten ausgeglichen werden. Wenn du daher die eine oder andere Anforderungen nicht vollständig erfüllst, ist es dennoch einen Versuch wert. Solltest du allerdings viele oder sogar alle Anforderungen nicht erfüllen, ergibt eine Bewerbung wenig Sinn.
If you are interested in this topic and want to apply for this thesis, please apply via Campusjäger.