Le honeypot ou pot de miel est un processus visant à garantir une meilleure qualité des lots annotés. Dans le contexte des processus de validation, le honeypot (pot de miel) consiste en l’un des quatre types de processus de travail permettant d’évaluer l’exactitude d’une donnée annotée.
Au début du projet, un expert (souvent le client) labellise avec précision un extrait de données. Nous utilisons ensuite cet extrait, connu sous le nom de « honeypot » (pot de miel), comme référence pour évaluer la qualité des annotations ultérieures fournies par les annotateurs. Dans ce processus de validation, chaque donnée est annotée par un seul annotateur, avec l’annotation d’un expert sur un extrait de données en début de projet.
Les quatre types de processus de validation permettant d’évaluer l’exactitude des données annotées et, par conséquent, de mesurer la qualité de l’annotation sont les suivants : sans validation, avec review, annotation par consensus et honeypot (pot de miel).
Vous souhaitez mieux comprendre comment évaluer la qualité d’un projet d’annotation de données ? Consultez notre article !
Synonymes : Ground-truth; Pot de miel
