Requête de comparaison de l'encodage

Les requêtes de comparaison d'encodage servent à comparer l'encodage réalisé par 2 utilisateurs ou 2 groupes d'utilisateurs.

Elles vous permettent de mesurer la fiabilité des évaluateurs (c'est-à-dire le degré d'accord entre les utilisateurs) de deux manières : via le calcul du taux d'accord et via le coefficient Kappa.  

Le taux d'accord représente le nombre d'unités d'accord divisé par le nombre total d'unités de mesure au sein de l'élément de donnée, le tout sous forme de pourcentage.

Le coefficient Kappa constitue quant à lui un indice statistique tenant compte de la proportion d'accord imputable au hasard. Pour en savoir plus, connectez-vous à Internet et consultez cet article de Wikipédia sur le coefficient Kappa de Cohen.

Pour créer une requête de comparaison d'encodage :

1. Dans la Fenêtre des éléments, cliquez sur Requêtes.

2. Dans la barre d'outils Principale, cliquez sur le bouton Nouveau :

3. Cliquez sur l'option Requête de comparaison d'encodage dans ce dossier.

La boîte de dialogue Requête de comparaison d'encodage s'affiche.

4. Dans le champ Comparer l'encodage entre, cliquez sur Sélectionner pour choisir les utilisateurs à inclure dans les groupes d'utilisateurs A et B.

5. Dans le champ Cible, sélectionnez les nœuds à comparer. Cliquez sur Sélectionner pour choisir des nœuds spécifiques.

6. Dans le champ Contexte, sélectionnez les sources à interroger. Cliquez sur Sélectionner pour choisir des sources spécifiques.

7. Par défaut, les cases Affichage du coefficient Kappa et Affichage du taux d'accord sont cochées. Vous pouvez choisir de ne pas afficher l'une de ces valeurs en décochant la case correspondante.

8. Si vous souhaitez enregistrer la requête, cochez la case Sauvegarder dans le projet, en haut de la boîte de dialogue. Saisissez un nom et une description dans l'onglet Général  

   Option	Description
   Type de requête	Affiche le type de requête en cours de création. Le contenu de ce champ n'est pas modifiable.
   Nom	Saisissez le nom de la requête.
   Description	Le cas échéant, saisissez une description de la requête.
   Emplacement	Affiche le dossier dans lequel se trouve la requête. Le contenu de ce champ n'est pas modifiable.
   Date de création	Affiche l'heure et la date de création de la requête. Le contenu de ce champ n'est pas modifiable.
   Date de modification	Affiche l'heure et la date de la dernière modification de la requête. Le contenu de ce champ n'est pas modifiable.

    

9. Pour enregistrer les propriétés de la requête sans exécuter cette dernière, cliquez sur OK.

10. Pour exécuter la requête, cliquez sur le bouton Exécuter.

À propos des résultats

Les résultats incluent une colonne Longueur de la source qui fournit les mesures suivantes sur différentes sources :

• documents, mémos et alias = nombre de caractères ;

• fichier média = durée en minutes/secondes/dixièmes de seconde ;

• image = nombre total de pixels exprimé au format "hauteur x largeur".

Si vous avez choisi d'afficher le coefficient Kappa et le taux d'accord, les résultats incluront une colonne dédiée à la valeur Kappa et plusieurs autres colonnes indiquant le taux d'accord et de désaccord entre les groupes d'utilisateurs A et B.

En cas d'accord total entre les utilisateurs, la valeur Kappa (ou κ) est égale à 1. En cas de désaccord total (ou en cas d'accord dû uniquement au hasard), elle est égale ou inférieure à 0.

Les colonnes relatives au taux d'accord affichent les valeurs suivantes :

• Accord = somme des colonnes A et B et Ni A ni B ;

• A et B = pourcentage d'éléments de données encodés à la fois par le groupe d'utilisateurs A et le groupe d'utilisateurs B au nœud sélectionné ;

• Ni A ni B = pourcentage d'éléments de données encodés ni par le groupe d'utilisateurs A ni par le groupe d'utilisateurs B ;

• Désaccord = somme des colonnes A sans B et B sans A ;

• A sans B = pourcentage d'éléments de données encodés par le groupe d'utilisateurs A mais non par le groupe d'utilisateurs B ;

• B sans A = pourcentage d'éléments de données encodés par le groupe d'utilisateurs B mais non par le groupe d'utilisateurs A.

Rubriques associées