Logo des Repositoriums
 

Evaluation von LLM- und Intent-basierten Ansätzen zur Umsetzung eines Chatbots für die Unterstützung bei der Studienorganisation

Kurzanzeige
dc.contributor.authorCordes, Andre
dc.contributor.editorSchulz, Sandra
dc.contributor.editorKiesler, Natalie
dc.date.accessioned2024-09-03T16:26:17Z
dc.date.available2024-09-03T16:26:17Z
dc.date.issued2024
dc.description.abstractConversational User Interfaces wie Chatbots bieten großes Potential, Studierende ergänzend zu bestehenden Beratungsangeboten bei der Studienorganisation zu unterstützen. Insbesondere durch die Fortschritte im Bereich der Large Language Models (LLMs) eröffnen sich neue Herangehensweisen an die Konstruktion solcher Chatbots. Diese sind jedoch mit Chancen und Risiken verbunden, so dass die Wahl eines geeigneten Ansatzes sorgsam abgewogen werden muss. In diesem Beitrag werden drei Ansätze zur Erstellung solcher Chatbots untersucht und miteinander verglichen: ChatGPT mit Retrieval Augmented Generation (RAG), das Open-Source LLM Mistral mit RAG und ein Intent-basierter Chatbot. Die Ansätze werden hinsichtlich Qualität der Antworten und Risiken (z.B. Halluzinationen) verglichen. Insgesamt zeigt sich, dass alle Ansätze potenziell Anwendung für die Unterstützung bei der Studienorganisation finden können. Aus den gewonnenen Erkenntnissen lässt sich jedoch keine klare Empfehlung für einen Ansatz ableiten, weshalb in weiteren Arbeiten ein hybrider Chatbot untersucht werden sollte.de
dc.identifier.doi10.18420/delfi2024_12
dc.identifier.eissn2944-7682
dc.identifier.issn2944-7682
dc.identifier.urihttps://dl.gi.de/handle/20.500.12116/44493
dc.language.isode
dc.pubPlaceBonn
dc.publisherGesellschaft für Informatik e.V.
dc.relation.ispartofProceedings of DELFI 2024
dc.relation.ispartofseriesDELFI
dc.subjectChatbot
dc.subjectKünstliche Intelligenz
dc.subjectEvaluation
dc.subjectLarge Language Models
dc.subjectRetrieval- Augmented Generation
dc.titleEvaluation von LLM- und Intent-basierten Ansätzen zur Umsetzung eines Chatbots für die Unterstützung bei der Studienorganisationde
dc.typeText/Conference paper
mci.conference.date09.-11. September 2024
mci.conference.locationFulda
mci.conference.sessiontitleKI Einsatz in der Hochschule I
mci.document.qualitydigidoc
mci.reference.pages141-152

Dateien

Originalbündel
1 - 1 von 1
Vorschaubild
Name:
Andre-Cordes.pdf
Größe:
677.61 KB
Format:
Adobe Portable Document Format
Herunterladen

Sammlungen

P356 - DELFI 2024 - Die 22. Fachtagung Bildungstechnologien