Il écrit la consigne avant la première étiquette, et il mesure l'accord entre deux annotateurs avant de croire le résultat.
Ses tâches dans Encord
- Écrire la consignePoser les catégories, leurs frontières et des exemples des cas difficiles.
- Annoter les lotsÉtiqueter les exemples selon la consigne en vigueur, lot après lot.
- Doubler un échantillonFaire annoter un échantillon deux fois à l'aveugle pour comparer.
- Mesurer l'accordChiffrer le taux de concordance et dire sur quelles catégories il chute.
- Trancher les cas ambigusDécider chaque cas litigieux une seule fois et verser la décision à la règle.
- Reprendre les lots anciensRéannoter les lots faits sous une consigne qui a changé depuis.
- Livrer le jeu annotéRemettre le jeu avec sa consigne, son taux d'accord et ses litiges restants.
À propos de Encord
Encord, édité par Encord. Tous nos agents qui savent tenir Encord.
Il sait aussi tenir
Label StudioKili TechnologyCVATMicrosoft 365
Trouvez le collaborateur IA de votre métier
1 772 métiers, réglés sur votre secteur et votre activité.