Anton Landersdorfer, Miron Schmidt
Das KI-Translation-Management-System hilft dabei, KI-gestützte Modelle für Textübersetzungen zu verwalten und zu bewerten, die über externe Dienste wie Huggingface zugänglich sind. Mit diesem System können verschiedene Modelle – pre-trained oder fine-tuned – verglichen werden. Die Qualität der Modelle wird sowohl durch automatische Metriken wie BLEU oder ROUGE als auch durch menschliche Bewertungen beurteilt.
Um die Qualität der Modelle besser nachvollziehen zu können, erfasst das System wichtige Informationen zu jedem Modell, einschließlich der Trainingsparameter und Versionen. Außerdem verwaltet es die Test- und Trainingsdaten, die für die Modellbewertung und das Fine-Tuning verwendet werden. Dabei wird genau dokumentiert, welche Daten mit welchem Modell verwendet wurden.