Systematische Evaluation und Erweiterung einer Chatbot-Plattform: Nutzerfeedback als Grundlage für technische und funktionale Verbesserungen

Hintergrund

Die Lübecker Firma MACH GmbH setzt seit wenigen Monaten einen eigenen LLM-basierten Chatbot ein. Dieser basiert auf der Open Source AI Plattform Open WebUI und bietet Zugang zu verschiedenen Sprachmodellen von Mistral und Anthropic.

Aktuell nutzen nur 25% der Mitarbeiter:innen den Chatbot regelmäßig. Eine unternehmensweite Umfrage soll systematisch erfassen, welche technischen und nutzerbezogenen Hürden die breite Akzeptanz verhindern. Die in der Umfrage identifizierten Hindernisse sollen anschließend durch Lösungsansätze für die Weiterentwicklung der Open WebUI Plattform adressiert werden. Mögliche Lösungen umfassen die Integration unternehmensspezifischer Daten (RAG) oder die Erweiterung um multimodale Funktionen (z.B. Bildgenerierung).

Das solltest du mitbringen:

• Programmierkenntnisse in Python
• Grundkenntnisse zu LLMs und RAG
• Erfahrung in Gestaltung von Umfragen wünschenswert

Die Arbeit kombiniert Nutzerforschung (Umfrage, Auswertung) und technische Entwicklung (z.B. RAG-Integration, UI-Anpassungen) im Verhältnis von etwa ein Drittel zu zwei Drittel. Die Ergebnisse der Arbeit fließen direkt in die Weiterentwicklung des Chatbots ein und verbessern so die Arbeit für über 500 Mitarbeiter:innen.