KI-basierte Bewertung von Projektmanagementberichten
Projektziele & Projektergebnis
Umsetzung projekt in den Bereichen „Service & Support“ mit dem Ziel der Erhöhung/Steigerung/ Optimierung der Produkt- / Servicequalität, des wirtschaftlichen Erfolges (Umsatz, Gewinn, Marktanteile) und von Prozessen.
Das Ziel ist die automatisierte Bewertung von Projektreports durch die Anwendung von KI-Werkzeugen. Das angestrebte Ergebnis ist eine prototypische Umsetzung eines Bewertungstools.
Gesamtprojekt
Top Erkenntnisse aus dem Projekt
Ausgangslage
Zentrale Fragestellungen im Projekt
- Eine besondere Herausforderung war die zielgerichtete Extraktion von Textbausteinen aus den Projektmanagementberichten.
- Wie können wir erreichen, dass die Antworten des LLM besser werden?
- Gibt es Ansätze, um dem KI-Modell Fachwissen zu geben?
Projektdetails
Herausforderung
Im Rahmen der von dem Unternehmen angebotenen Lehrgänge werden von den teilnehmenden Projektreports angefertigt. Diese Reports werden gegenwärtig mit einem hohen manuellen Aufwand durch qualifiziertes Fachpersonal geprüft und bewertet. Dieser Prozess erweist sich als zeit- und ressourcenintensiv. Die hierfür erforderlichen personellen Kapazitäten stehen aufgrund des Fachkräftemangels nicht zur Verfügung bzw. die Mitarbeitenden müssen ihre anderen Aufgaben vernachlässigen.
Zielsetzung
Das Ziel dieses Projekts besteht darin, durch die Anwendung von KI-Werkzeugen die manuelle Bewertung von Projektreports zu automatisieren. Hierdurch soll die zeitaufwendige manuelle Korrektur effizienter gestaltet werden, ohne die Qualität zu beeinträchtigen. Das angestrebte Ergebnis ist eine prototypische Umsetzung eines Bewertungstools, welches bei der Bewertung der Projektreports durch Verbesserungsvorschläge unterstützt.
Projektbeschreibung
Für die Zielerreichung werden große Sprachmodelle, sog. Large Langage Models (LLM), eingesetzt. LLMs verfügen über das Potential, nicht nur Texte zu verstehen, sondern sie auch zu bewerten. Im ersten Schritt erfolgt eine umfassende Analyse der bestehenden Anforderungen sowie manuellen Prüfprozesse. Anschließend werden Standards für die Berichtsvorlage definiert, da das Auslesen von Textbausteinen aus den Berichten nur in einer standardisierten Vorlage erfolgen kann. Basierend auf der Vorlage werden spezifische Algorithmen entwickelt, die in der Lage sind, die Berichte zielgerichtet auszulesen und in ein LLM zu übertragen. Gleichzeitig werden Bewertungskriterien als vordefinierte Texteingaben, sogenannte Prompts, formuliert. Schrittweise werden einzelne Textabschnitte der Berichte in das LLM integriert. Die entstehenden Antworten werden gemeinsam mit dem Unternehmen ausgewertet, um die Antworten bzw. Bewertungsvorschläge des LLM zu beurteilen. Dieses Projekt repräsentiert eine innovative Anwendung von KI im Bildungsbereich und hat das Potenzial, den gesamten Prozess der Prüfungsbewertung nachhaltig zu beschleunigen.