Kurzreferat

Dieses Dokument spezifiziert die Evaluierung von Systemen zur Verarbeitung natürlicher Sprache im Sinne der Messung der Qualität der Ergebnisse eines Systems, um seine funktionale Eignung zu beurteilen. Es enthält eine Definition von Evaluierungsmethoden für diese Systeme sowie eine Anleitung zur Auswahl, Implementierung und Interpretation dieser Methoden. Dieses Dokument deckt sowohl quantitative Metriken als auch andere Bewertungsmethoden ab. Es enthält Anforderungen an die Implementierung der beschriebenen Metriken und weitere Anforderungen an die technischen Ressourcen, die am Evaluationsprozess beteiligt sind.

Beginn

2024-02-02

WI

JT021012

Geplante Dokumentnummer

DIN EN ISO/IEC 23282

Projektnummer

04301055

Zuständiges nationales Arbeitsgremium

NA 043-01-42 GA - DIN/DKE Gemeinschaftsarbeitsausschuss Künstliche Intelligenz  

Zuständiges europäisches Arbeitsgremium

CEN/CLC/JTC 21/WG 3 - Ingenieurtechnische Aspekte  

Zuständiges internationales Arbeitsgremium

ISO/IEC JTC 1/SC 42/JWG 5 - Gemeinsame Arbeitsgruppe ISO/IEC JTC1/SC42 - ISO/TC 37 WG: Systeme zur Verarbeitung natürlicher Sprache