Deux étiquettes de modération peuvent venir de personnes différentes

La première option demandait si le texte citait ou rapportait une attaque personnelle provenant d’un autre commentaire. La seconde concernait une attaque personnelle visant le destinataire. Il était possible de choisir plusieurs options. Il s’agissait d’avis sur le texte présenté, pas de décisions de le masquer ni de preuves qu’une règle avait été enfreinte.^[2]

Nous avons considéré une étiquette comme présente dès qu’au moins une des 10 personnes l’avait choisie. Il suffisait donc d’une sélection dans le groupe. Nous n’avons pas exigé de majorité, présenté les étiquettes comme un consensus ou vérifié si elles étaient justes.

Sur les 13 824 extraits sélectionnés, 12 025 ne portaient aucune de ces deux étiquettes. 406 autres avaient une étiquette de citation/récit sans étiquette d’attaque visant le destinataire, et 1 238 avaient une étiquette d’attaque visant le destinataire sans citation/récit. Il restait 155 extraits portant les deux quelque part dans leurs évaluations.

Ces descriptions ne concernent que ces deux options. Un extrait sans étiquette d’attaque visant le destinataire pouvait porter un autre type d’étiquette d’attaque. La présence d’une citation ou d’un récit ne certifie pas que le texte était inoffensif. Nommer les catégories précisément évite de les transformer discrètement en conclusions plus larges.

Dans les 155 extraits, nous avons retrouvé la réponse individuelle derrière chaque étiquette. Pour 98, au moins une personne avait choisi les deux options sur le même extrait. Pour 57, les sélections citation/récit et attaque visant le destinataire venaient uniquement de personnes différentes. Aucune réponse individuelle de ces 57 extraits ne contenait la paire.

La répartition était de 63,2 % avec au moins une personne ayant choisi les deux et de 36,8 % avec des étiquettes fournies uniquement par des personnes différentes. Les deux groupes appartenaient au même ensemble précisément défini de 155 extraits. Le cadre plus large de 13 824 extraits reste important : il montre d’où vient cette comparaison limitée aux extraits portant les deux étiquettes.^[4]

Cette distinction change ce que vous pouvez affirmer à partir d’une synthèse. La présence des deux étiquettes permet de dire que chacune a été choisie quelque part dans les évaluations. Elle ne permet pas, à elle seule, d’affirmer qu’une personne a décrit le texte des deux façons.

Le fait qu’une personne ait choisi les deux ne règle pas non plus le sens des mots. Un extrait pouvait réunir des ajouts effectués lors d’une même modification de Wikipédia, y compris plusieurs messages. Cette double sélection ne prouve pas que le passage cité constituait lui-même l’attaque visant le destinataire. Nous n’avons pas examiné les extraits individuels pour expliquer les évaluations.^[2][6]

Dans une entreprise, un dossier peut passer de la personne qui surveille les commentaires à celle qui est responsable du compte. Pour un créateur, il peut passer d’un assistant au créateur lui-même. La personne qui reprend le dossier doit comprendre ce qui a été remarqué avant de répondre, de rechercher davantage de contexte ou d’appliquer la politique du compte.

Gardez ensemble les sélections de chaque personne. Si quelqu’un choisit les deux options, conservez cette paire comme son évaluation. Si deux personnes choisissent des options différentes, gardez leurs réponses séparées. Un dossier peut réunir plusieurs lectures sans les transformer en un avis que personne n’a réellement formulé.

Ajoutez ensuite une brève explication du passage concerné. Dans votre propre processus, précisez ce qui semble être cité, à qui le texte semble s’adresser et quelle réponse voisine aide à comprendre l’échange. Laissez l’incertitude visible lorsque le contexte ne permet pas de trancher. Ce sont des suggestions pratiques ; les données n’ont pas servi à tester leur effet sur les décisions.

Une note courte peut suffire. Le but est de permettre à la personne suivante de suivre le raisonnement sans refaire tout l’examen. Lorsqu’une équipe transmet des dossiers entre deux permanences, ou entre une marque et un créateur, cela implique de transmettre l’observation d’origine avec la catégorie qui lui a été attribuée.

Prenons deux groupes fictifs, chacun composé de 10 personnes examinant un extrait inventé. Ils servent à expliquer le calcul ; il ne s’agit ni de personnes, ni de citations, ni de cas réels du jeu de données. Les deux synthèses montrent une sélection citation/récit et une sélection attaque visant le destinataire.^[8]

Dans le premier groupe, l’évaluateur A choisit les deux options. Les 9 autres personnes ne choisissent aucune de ces deux options. Une réponse individuelle contient donc la paire. La transmission peut conserver fidèlement cet avis combiné tout en réservant l’action finale à une décision distincte.

Dans le second groupe, l’évaluateur A choisit citation/récit et l’évaluateur B, attaque visant le destinataire. Les 8 autres ne choisissent aucune des deux. Les totaux restent un et un, mais personne n’a choisi les deux. Présenter cela comme l’avis combiné d’une seule personne ajouterait une relation absente des réponses individuelles.

L’exemple explique aussi pourquoi nous avons compté les extraits plutôt que toutes les personnes correspondantes. Si deux personnes du premier groupe avaient chacune choisi les deux étiquettes, l’extrait ne serait compté qu’une fois dans le groupe avec double sélection individuelle. La classification demande si une telle paire existait, pas combien de personnes l’ont fournie.

Pour le second groupe, une courte transmission fictive pourrait dire : « Décision encore ouverte. L’évaluateur A a identifié une citation ou un récit ; l’évaluateur B, un propos visant le destinataire. Conserver les deux notes avec l’extrait et la réponse précédente. La personne responsable du compte vérifiera le passage visé par chacun avant de choisir l’action. » Cette note transmet une question non résolue sans transformer les réponses de deux personnes en une conclusion individuelle.

Dans une transmission réelle, conservez séparément les deux notes du second groupe. La personne suivante peut les lire avec le texte, demander à chacun ce qu’il voulait dire et décider selon la politique du compte. L’étude ne permet pas d’établir si l’un avait raison ou quelle action conviendrait à ce cas fictif.

Décrire ce qui apparaît dans un commentaire et décider quoi en faire répondent à deux objectifs distincts. Quelqu’un peut repérer du langage cité alors que le responsable du compte doit encore considérer l’échange et la politique applicable. Gardez ces étapes séparées pour qu’un lecteur ultérieur puisse comprendre la décision.

Lorsqu’une entreprise travaille avec un créateur, convenez de la personne qui décide avant qu’un échange difficile ne survienne. La personne qui comprend une réclamation produit n’est pas nécessairement autorisée à changer l’approche de modération du compte. Une transmission claire peut nommer les deux rôles sans supposer que chaque cas exige plusieurs évaluateurs.

Pour un créateur travaillant seul, la même distinction peut tenir dans une note : ce que vous avez remarqué, le contexte vérifié et la décision prise. Une personne peut réaliser plusieurs étapes tout en gardant leur rôle clair. Les données ne montrent pas qu’ajouter du personnel ou une étape d’examen améliore les résultats.

Gardez les observations séparées jusqu’à comprendre leur relation. Des sélections différentes peuvent refléter des centres d’attention différents plutôt que des récits contradictoires. Une étiquette de citation/récit n’est pas une exemption automatique, et une étiquette d’attaque visant le destinataire n’est pas une recommandation mesurée de supprimer le commentaire. L’action suivante doit s’appuyer sur l’échange réel et les règles du compte, pas sur une action déduite de nos pourcentages historiques.

Copiez ces champs dans votre document d’examen ou de transmission. Utilisez uniquement les informations nécessaires à l’équipe, avec un accès adapté à la conversation. La fiche est disponible ici sans inscription ; c’est une aide pratique, pas un processus observé dans l’étude.^[8]

Dossier : [Lien ou référence interne.] Compte/canal : [Où l’échange apparaît.] Vérification effectuée le : [Date et heure.] Gardez une référence stable pour que la personne suivante retrouve le même contenu.

Objectif : [Quelle question nécessite une décision ?] Responsable : [Qui décide ?] Personne suivante : [Qui doit recevoir le dossier, le cas échéant ?]

Texte présenté : [Le passage examiné, conservé dans l’espace approuvé.] Contexte : [Réponses antérieures ou ultérieures utiles.] Contexte manquant : [Ce qui n’a pas pu être vérifié.]

Évaluateur : [Nom ou référence interne de la personne.] Évaluation effectuée le : [Date et heure.] Gardez une entrée distincte par personne, même si plusieurs utilisent les mêmes étiquettes.

Observation de citation/récit : [Oui, non ou incertain.] Justification : [Quel passage semble citer ou rapporter l’attaque d’une autre personne ?] N’utilisez pas ce champ pour décider que le texte est inoffensif.

Observation d’attaque visant le destinataire : [Oui, non ou incertain.] Justification : [Quel passage semble viser le destinataire, et pourquoi ?] Gardez cette réponse indépendante de l’observation de citation/récit.

Autres observations utiles : [Toute autre question que la politique du compte demande de considérer.] L’absence d’une des deux étiquettes étudiées ne décrit pas l’échange dans son ensemble.

Relation entre les évaluations : [Une personne a choisi les deux, plusieurs personnes ont choisi des options différentes, ou situation incertaine.] Si les avis diffèrent, conservez les notes individuelles avant de résumer le dossier.

Référence de la politique : [Règle ou recommandation applicable.] Décision : [Action effectivement choisie ou question non résolue.] Motif : [Comment les observations et le contexte justifient la décision.]

Suite à donner : [Qui fait quoi ensuite, le cas échéant ?] Transmission prévue le : [Quand le dossier passe à cette personne.] Résultat : [Ce qui s’est produit après la décision, si cela a été vérifié.] Ne marquez pas comme terminée une action simplement prévue.

Réexaminer lorsque : [Un événement précis ou un élément de contexte manquant, si un nouvel examen est nécessaire.] La fiche n’impose pas de réexaminer chaque dossier plusieurs fois ; choisissez un motif adapté à la situation.

Nous avons prévu deux vérifications complémentaires avant de calculer les sélections conjointes. La première excluait les extraits datés de 2016, car la plage d’années des fichiers publiés dépassait les périodes décrites dans la présentation de la source et l’article d’origine. Il restait 13 809 extraits admissibles de l’échantillon aléatoire. Les mêmes 155 portaient les deux étiquettes, avec la même répartition 98/57.^[5]

L’autre vérification utilisait les données échantillonnées séparément autour d’événements de blocage. Avec la même règle de 10 évaluations exactement par extrait, ce groupe comptait 42 383 extraits. Parmi les 2 457 portant les deux étiquettes quelque part, 1 354 avaient au moins une double sélection individuelle et 1 103 avaient des étiquettes fournies uniquement par des personnes différentes : 55,1 % et 44,9 %, respectivement.

Le groupe enrichi autour des blocages répond à un autre objectif d’échantillonnage ; nous l’avons donc gardé séparé. Ses pourcentages ne remplacent pas le résultat principal et ne constituent pas des preuves sur les commentaires actuels des marques. La vérification par année traite la plage de dates indiquée ; aucune des deux ne dispense d’interpréter les résultats comme des jugements subjectifs sur des extraits historiques sélectionnés.

Nous avons utilisé la version 6 de Wikipedia Talk Labels: Personal Attacks, un jeu public du projet Wikipedia Detox. Les fichiers contiennent du texte issu d’anciennes modifications de pages de discussion et plusieurs évaluations de personnes ayant participé à l’annotation de chaque extrait. Notre analyse a utilisé les réponses individuelles ; elle n’a créé aucun nouveau jugement ni évalué un système de modération.^[1][2]

La comparaison principale est partie du groupe aléatoire de la version publiée et a retenu les extraits avec exactement 10 évaluations complètes de personnes distinctes. Fixer ce nombre à 10 donnait à chaque extrait le même nombre d’occasions de recevoir une sélection conjointe. Cela revenait aussi à sélectionner 13 824 des 37 492 extraits aléatoires publiés : le résultat ne décrit donc pas ce groupe entier.^[3]

Chaque extrait sélectionné contribuait pour un au décompte. Nous avons vérifié si chaque étiquette apparaissait quelque part, puis si les deux figuraient dans la réponse d’une même personne au même extrait. Les cinq catégories sont exclusives et totalisent 13 824. Le dénominateur de 155 vient des deux catégories portant les deux étiquettes, pas de toutes les évaluations ou de tous les extraits sources.^[4]

Avant d’examiner les sélections conjointes, nous avons fixé les groupes, la règle de couverture des évaluations, la vérification par année et un minimum de 100 extraits pour la comparaison principale limitée aux deux étiquettes. Les 155 observés satisfaisaient cette condition. Nous n’avons pas exigé de pourcentage particulier, changé la règle pour favoriser un résultat ou mélangé les données enrichies autour des blocages avec le groupe aléatoire.

La recherche originale utilisait déjà des évaluations individuelles, et des travaux ultérieurs ont agrégé chaque type d’attaque à la majorité. Notre contribution, plus ciblée, décrit qui a fourni les deux options dans un ensemble fixe de jugements. Elle ne corrige pas les méthodes de ces études. Le téléchargement fournit les résultats agrégés, les méthodes et les instructions de reproduction avec les fichiers publics sources disponibles séparément.^[6][7]

La question utile lors de la transmission d’un dossier de modération sur les réseaux sociaux est de savoir qui a fait chaque observation et ce qu’il décrivait. Dans cette comparaison historique sélectionnée, 57 des 155 extraits portant les deux étiquettes n’avaient aucune personne les ayant choisies ensemble. Cette relation disparaîtrait d’une synthèse ne contenant que les noms des étiquettes.

Gardez reliés les observations de la personne, le contexte utile et la décision finale. Une entreprise ou un créateur pourra ainsi expliquer ce que contient le dossier et pourquoi l’action choisie en découle, sans demander à une catégorie de remplacer tout l’examen.