SDI Werkstattbericht

Projekt „Smart Data Insights“ mit Feature zur Kategorisierung von Freitextantworten

Im Rahmen des Smart Data Insights (SDI) Projektes ist die Entwicklung unserer Data Analytics Plattform evainsights offiziell gestartet. In diesem Artikel stellen wir Ihnen das meistgewünschte Feature – die automatische Erkennung von häufig diskutierten Themen – in Kürze vor.

Automatische Erkennung von Themen in Freitextantworten

Angeleitet von Dr. Christoph Stanik entwickeln wir unsere KI-Anwendungen nach wissenschaftlichem Standard und streben die Veröffentlichung der Verfahren auf Konferenzen und in Journalen an. Aber was verbirgt sich hinter unseren KI-Anwendungen? Wir möchten Ihnen das Feature, in dem es um die automatische Erkennung von häufig diskutierten Themen geht, in Kurzform vorstellen.

 

Kontext

Betrachten wir einen Fragebogen mit Freitextantworten. Während man diese in kleinen Kohorten noch manuell lesen und bearbeiten kann, haben Umfragen in großen Kohorten oft Hunderte bis Tausende Rückläufe. Gelegentlich haben die Fragebögen dann noch mehrere Items (bspw. Fragen) mit Freitextfeldern. Bei solchen Mengen ist eine manuelle und repräsentative Bearbeitung der Freitextantworten außerordentlich mühselig und zeitintensiv bis unmöglich.

 

Lösung und Vorgehen

evasys bietet Ihnen bereits die Möglichkeit, Freitextantworten manuell zu kategorisieren. In SDI arbeiten wir an einer Lösung, die alle von Ihnen ausgewählten Items mit Freitextantworten automatisch in semantisch ähnliche Kategorien gruppiert. Um das Ziel optimal zu erreichen, experimentieren wir mit bewährten Methoden und dem neusten Stand der Forschung. Um die Relevanz der Ergebnisse sicherzustellen, entwickeln wir die Ansätze auf Basis anonymisierter Daten unserer Pilotpartner*innen und gehen in regelmäßige Feedbackgespräche.

Nutzen

Sie können frei auswählen, welche Items mit Freitextantworten analysiert werden sollen. Die KI kann mit sehr großen Datenmengen umgehen und Ihnen aufzeigen, welche Themen wie häufig angesprochen werden. Mit einem Klick auf ein Thema können Sie die konkreten Kommentare explorieren. Durch diese KI-Anwendung können Sie viel Zeit sparen und sich auf Themen konzentrieren, die Sie interessieren und einen ersten und kondensierten Eindruck der Freitext-Kommentare erhalten. Im Gegensatz zu fest definierten Kategorien können Sie so neu auftretende Themen erkennen und gegebenenfalls darauf reagieren.

Insgesamt lassen sich hierdurch offene Fragetypen deutlich umfänglicher nutzen, da die automatische Auswertung sowie Clusterung und Analyse deren umfangreiche Bearbeitung erst ermöglicht. Durch die vermehrte Verwendung offener Antworten können Sie somit bei künftigen Evaluationsprojekten deutlich komplexere Sachverhalte evaluieren.

Rückblick: Die evaexam Tagung 2022

Lesen Sie hier einen kurzen Rückblick der evaexam Tagung 2022 und verpassen Sie nicht die praxisnahen Anregungen für eine gelungene Qualitätssicherung im Prüfungszyklus von unserer Prüfungsexpertin.

Komplex in der Aussage, einfach in der Handhabung: Berichterstellung in qurricula

Lernen Sie in diesem Artikel ein besonderes Berichtsformat in qurricula kennen: den Qualitätsindikatorenbericht.

Ausblick auf die kommende evasys und evaexam Version 9.1

Sind Sie neugierig, worauf Sie sich beim Release der neuen Version 9.1 freuen können? Gerne gewähren wir Ihnen in diesem Beitrag einen kurzen Blick hinter die Kulissen!…