Goldstandard

Im Kontext von NLP bezieht sich der Goldstandard auf einen manuell überprüften oder annotierten Datensatz, der als Maßstab zur Evaluation von automatisierten Annotationssystemen wie PoS-Taggern oder NER-Tools verwendet wird, die auf Machine-Learning-Algorithmen basieren. Häufig werden zwei oder mehr unabhängig voneinander manuell erstellte Annotationen abgeglichen, um einen überindividuellen Gold Standard zu erstellen.