2 תוויות בבדיקת תגובות יכולות להגיע מבודקים שונים

מסירת מקרה לבדיקת תגובה יכולה להציג 2 תוויות בלי להראות מי בחר בהן. הערכות היסטוריות מ־Wikipedia מגלות למה הפרט החסר הזה חשוב למי שיקרא את המקרה בהמשך.

ניתוח מקורי של Influence IQ להערכות נבחרות ממערך הנתונים ההיסטורי של Wikipedia Detox על התקפות אישיות. הניתוח הושלם ב־25 באוקטובר 2026 (UTC).

תקציר

מתוך 13,824 קטעים נבחרים מדפי שיחה היסטוריים של Wikipedia, ב־155 הופיעו גם תווית של ציטוט או דיווח על התקפה וגם תווית של התקפה המופנית לנמען, במקום כלשהו ב־10 ההערכות הנפרדות שלהם. ב־98 מתוך אותם 155 קטעים, לפחות בודק 1 בחר בשתי התוויות. ב־57 האחרים, שהם 36.8%, התוויות הגיעו רק מבודקים שונים. האחוז מתייחס לאותם 155 קטעים, ולא לכל 13,824 הקטעים.[1][4]

לעסקים וליוצרי תוכן שמנהלים תגובות ברשתות חברתיות, הלקח המעשי נוגע להעברת הטיפול: שמרו את התצפיות של כל בודק בצמוד להערכה שלו. הופעה משותפת של 2 תוויות אינה מוכיחה שאדם 1 בחר בשתיהן. המחקר מתאר הערכות סובייקטיביות של קטעי דיון היסטוריים, ולא טעויות בניהול תגובות או כלל להסרת תגובה. דף העבודה שאפשר להעתיק בהמשך הופך את ההבחנה הזאת לרישום מעשי של הבדיקה.

דמיינו שיוצרי תוכן מבקשים מעמית לבדוק תגובה שקשה להכריע לגביה. המקרה מועבר עם 2 תוויות: ציטוט או דיווח על התקפה, והתקפה המופנית לנמען. לפני שמחליטים מה לעשות, חסר פרט נוסף: האם אותו בודק רשם את שתי התצפיות?

זו הבחנה אמיתית שסיכום עלול לאבד. ייתכן שאדם 1 בחר בשתי האפשרויות, וייתכן ש־2 אנשים התמקדו בהיבטים שונים של אותו טקסט. רשימת תוויות לבדה אינה יכולה להבהיר לבודק הבא איזה דפוס התקיים. היא גם עלולה להשאיר לא ברור אילו מילים כל אחד תיאר.

בחנו את השאלה באמצעות הערכות אישיות ממערך נתונים מחקרי מוכר. חומר המקור הגיע מדפי שיחה של Wikipedia. כאן הוא משמש להמחשת הקשר בין תוויות לבודקים, ובהמשך עוזר לחשוב איזה מידע עסק או יוצרי תוכן צריכים לשמר כשהם מעבירים טיפול.

שומרים כל תצפית מחוברת לבודק שלה

2 כרטיסי הערות נפרדים של בודקים מתחברים לכרטיס דיון 1, גדול יותר, עם טקסט הדיון. עיגול וריבוע משמרים את המקור של כל הערה.
איור מושגי. הערות של בודקים נפרדים מתחברות לאותו קטע דיון. הצורות התואמות עוזרות לשמור מאיפה הגיעה כל תצפית.

מתחילים במה שכל תווית מתארת בפועל

האפשרות הראשונה שאלה אם הטקסט מצטט או מדווח על התקפה אישית שמקורה בתגובה אחרת. השנייה עסקה בהתקפה אישית המופנית לנמען. אפשר היה לבחור יותר מאפשרות 1. אלה היו הערכות על הטקסט שהוצג, ולא החלטות להסתיר אותו או ראיות להפרת מדיניות.[2]

התייחסנו לתווית כקיימת אם לפחות בודק 1 מתוך 10 הבודקים בחר בה. זו הייתה השוואה המבוססת על בחירה של בודק כלשהו. לא דרשנו רוב, לא תיארנו את התוויות כהסכמה כללית ולא בדקנו אם הן נכונות.

מתוך 13,824 הקטעים שנבחרו, ב־12,025 לא הופיעה אף אחת משתי התוויות. ב־406 נוספים הופיעה תווית ציטוט או דיווח ללא תווית של התקפה המופנית לנמען, וב־1,238 הופיעה תווית של התקפה המופנית לנמען ללא ציטוט או דיווח. כך נותרו 155 קטעים ששתי התוויות הופיעו במקום כלשהו בהערכות שלהם.

התיאורים נוגעים רק לשתי האפשרויות האלה. קטע ללא תווית של התקפה המופנית לנמען עדיין יכול היה לקבל תווית התקפה מסוג אחר. תווית ציטוט או דיווח אינה מאשרת שהטקסט היה בלתי מזיק. שמירה על שמות מדויקים מונעת מקטגוריה שימושית להפוך בלי משים למסקנה רחבה יותר.

איך תויגו 13,824 הקטעים שנבחרו

תווית נחשבה קיימת אם לפחות בודק 1 מתוך 10 בחר בה. 5 הקטגוריות נוגעות ל־2 אפשרויות מסוימות; ״אף אחת״ אינו אומר שבקטע לא הייתה אף תווית התקפה מכל סוג.

5 ספירות שאינן חופפות של 13,824 הקטעים ההיסטוריים שנבחרו, לפי נוכחות תוויות ציטוט או דיווח והתקפה לנמען ולפי בחירת שתיהן בידי אותו בודק
תוויות ציטוט או דיווח והתקפה המופנית לנמעןקטעים
אף אחת משתי התוויות האלה12,025
ציטוט או דיווח ללא התקפה המופנית לנמען406
התקפה המופנית לנמען ללא ציטוט או דיווח1,238
שתי התוויות, עם צמד 1 לפחות שנבחר בידי אותו בודק98
שתי התוויות, שנבחרו רק בידי בודקים שונים57
מקור: ניתוח של Influence IQ לקטעים הנבחרים מהמדגם האקראי עם בדיוק 10 הערכות ב־Wikipedia Talk Labels: Personal Attacks בגרסה 6. סכום כל 5 הספירות הוא 13,824. 2 הקטגוריות האחרונות יוצרות את הקבוצה המותנית של 155.[1][3][4]

ב־57 קטעים היו שתי התוויות, אך אף בודק לא בחר בשתיהן

בתוך 155 הקטעים בדקנו את התשובה האישית שמאחורי כל תווית. ב־98, לפחות אדם 1 בחר בשתי האפשרויות עבור אותו קטע. ב־57, בחירות הציטוט או הדיווח וההתקפה כלפי הנמען הגיעו רק מאנשים שונים. אף תשובה אישית באותם 57 לא כללה את הצמד.

החלוקה הייתה 63.2% עם צמד תוויות שבחר אותו בודק, ו־36.8% עם תוויות שסיפקו רק בודקים שונים. שתי הקבוצות שייכות לאותה קבוצה מוגדרת בצמצום של 155 קטעים. המסגרת הרחבה יותר של 13,824 קטעים עדיין חשובה, כי היא מראה מאיפה התחילה ההשוואה המותנית הזאת.[4]

ההבחנה משנה את מה שאפשר לטעון מתוך סיכום. אם ידוע ששתי התוויות הופיעו, אפשר לומר שכל אחת נבחרה במקום כלשהו במערך הבדיקות. אין בכך, כשלעצמו, בסיס לומר שבודק מסוים תיאר את הטקסט בשני האופנים.

גם דפוס של בחירה בידי אותו בודק אינו מכריע מה משמעות המילים. קטע מקור עשוי לשלב תוספות מאותה עריכה ב־Wikipedia, כולל יותר מפוסט 1. בחירה של בודק 1 בשתי האפשרויות אינה מראה שהמילים שצוטטו הן עצמן ההתקפה המופנית לנמען. לא בחנו קטעים בודדים כדי להסביר את ההערכות שניתנו להם.[2][6]

ב־57 מתוך 155 הקטעים לא היה צמד של אותו בודק

ההשוואה כוללת רק את 155 הקטעים הנבחרים ששתי התוויות מופיעות במקום כלשהו ב־10 ההערכות שלהם. היא משתמשת בבחירות של בודק כלשהו, ולא בהסכמת רוב או בתוצאות מאומתות של ניהול תגובות.

ספירות ואחוזים מותנים של נוכחות תוויות אצל אותו בודק לעומת בודקים שונים בלבד, בקרב 155 הקטעים שנבחרו עם שתי התוויות
מי סיפק את שתי התוויותקטעיםשיעור מתוך 155 הקטעים
לפחות בודק 1 בחר בשתיהן9863.2%
התוויות הגיעו רק מבודקים שונים5736.8%
ב־98 קטעים נמצא צמד של אותו בודק: 98/155, או 63.2%. ב־57 הופיעו שתי התוויות רק אצל בודקים שונים: 57/155, או 36.8%. המכנה הוא 155, בתוך מסגרת ראשית של 13,824 קטעים היסטוריים שנבחרו.[4]

נותנים לבודק הבא את התצפית שמאחורי התווית

בעסק, הטיפול עשוי לעבור ממי שעוקב אחר התגובות למי שאחראי לחשבון. אצל יוצרי תוכן הוא עשוי לעבור מעוזר ליוצר. מי שמקבל את המקרה צריך להבין מה זוהה לפני שיחליט אם להשיב, לבקש הקשר נוסף או להחיל את המדיניות הקיימת של החשבון.

שמרו יחד את הבחירות של כל אדם. אם בודק בחר בשתי האפשרויות, השאירו את הצמד כהערכה שלו. אם 2 בודקים בחרו אפשרויות שונות, שמרו את התשובות הנפרדות. מקרה יכול לכלול יותר מפרשנות 1, בלי להפוך את הפרשנויות להערכה שאיש לא נתן בפועל.

לאחר מכן הוסיפו הסבר קצר על הקטע הרלוונטי. בתהליך שלכם, ציינו מה נראה כציטוט, למי הטקסט כנראה מופנה ואיזו תשובה סמוכה מסייעת להבין את חילופי הדברים. השאירו את אי־הוודאות גלויה כשההקשר הזמין אינו עונה על השאלה. אלה הצעות מעשיות; מערך הנתונים לא בדק את השפעתן על החלטות.

לעיתים די בהערה קצרה. המטרה היא שמי שממשיך את הטיפול יוכל לעקוב אחרי הנימוק הראשוני בלי לבנות מחדש את הבדיקה כולה. לצוות שמעביר מקרים בין משמרות או בין מותג ליוצרי תוכן, המשמעות היא להעביר גם את התצפית המקורית וגם את הקטגוריה שנקשרה אליה.

דוגמה בדויה עם אותם סכומי תוויות

נבחן 2 צוותי בדיקה מומצאים, שבכל אחד מהם 10 אנשים מעריכים קטע בדיוני 1. הצוותים ממחישים את החשבון; אלה אינם אנשים, ציטוטים או מקרים אמיתיים ממערך הנתונים. בשני הסיכומים יש בחירת ציטוט או דיווח 1 ובחירה 1 של התקפה המופנית לנמען.[8]

בצוות הראשון, בודק A בוחר בשתי האפשרויות. 9 האנשים האחרים אינם בוחרים באף אחת משתי האפשרויות האלה. יש אדם 1 שתשובתו כוללת את הצמד. אפשר להעביר הלאה את ההערכה המשולבת שלו במדויק, ולהשאיר את הפעולה הסופית להחלטה נפרדת.

בצוות השני, בודק A בוחר בציטוט או דיווח ובודק B בוחר בהתקפה המופנית לנמען. 8 הנותרים אינם בוחרים באף אחת מהאפשרויות. סכומי השדות עדיין הם 1 ו־1, אבל אף אדם לא בחר בשתיהן. הצגתם כהערכה משולבת של אדם 1 תוסיף קשר שאינו קיים בתשובות האישיות.

הדוגמה מסבירה גם למה ספרנו קטעים ולא את כל האנשים עם בחירה תואמת. אילו 2 אנשים בצוות הראשון היו בוחרים כל אחד בשתי התוויות, הקטע עדיין היה נספר פעם 1 בקבוצה שבה בודק כלשהו בחר בשתי התוויות. הסיווג שואל אם קיים צמד כזה, ולא כמה אנשים סיפקו אותו.

לצוות השני אפשר לנסח מסירה בדיונית קצרה כך: ״ההחלטה עדיין פתוחה. בודק A זיהה ציטוט או דיווח; בודק B זיהה נוסח המופנה לנמען. שמרו את שתי ההערות עם הקטע ועם התשובה שקדמה לו. האחראי לחשבון יבדוק לאיזה קטע התכוון כל בודק לפני שיבחר פעולה״. ההערה מעבירה שאלה שלא הוכרעה, בלי להפוך תשובות של 2 אנשים למסקנה של אדם 1.

במסירה אמיתית, שמרו את שתי ההערות הנפרדות מהצוות השני. מי שממשיך לבדוק יכול לקרוא אותן לצד הטקסט, לשאול למה התכוון כל אדם ולהחליט לפי מדיניות החשבון. המחקר אינו קובע אם אחד הבודקים צדק או איזו פעולה מתאימה למקרה הבדוי.

אותם סכומי תוויות יכולים לנבוע מדפוסי בדיקה שונים

2 שורות מציגות סיכומים משולבים זהים של התוויות. בשורה העליונה, כרטיס בודק 1 מכיל את שני האסימונים; בתחתונה האסימונים מחולקים בין 2 כרטיסי בודקים.
  1. בודק 1 בוחר בשתיהן

    בצוות הבדוי הראשון יש אדם 1 שבוחר בשתי התוויות ו־9 שלא בוחרים באף אחת משתי האפשרויות האלה.

  2. 2 בודקים בוחרים תווית 1 כל אחד

    בצוות השני יש אדם 1 שבוחר בציטוט או דיווח ואדם אחר שבוחר בהתקפה המופנית לנמען. 8 הנותרים אינם בוחרים באף אפשרות.

המחשה של צוותי הבדיקה הבדויים. הכרטיסים מתמקדים באנשים שסיפקו את שתי התוויות; בכל צוות יש גם בודקים שלא בחרו באף אחת מהן. זו אינה ההתפלגות שנמדדה ב־155 קטעי המחקר.

מפרידים בין תיאור התגובה להחלטה לפי המדיניות

תיאור מה שמופיע בתגובה והחלטה מה לעשות איתה ממלאים תפקידים שונים. בודק עשוי לזהות ציטוט, בזמן שהאחראי לחשבון עדיין צריך לבחון את חילופי הדברים סביבו ואת המדיניות הרלוונטית. שמרו את השלבים בנפרד כדי שיהיה אפשר להבין אחר כך איך התקבלה ההחלטה.

אם העסק עובד עם יוצרי תוכן, הסכימו מראש מי מקבל את ההחלטה, לפני שמגיעה שיחה קשה. מי שמבין את התלונה על המוצר אינו בהכרח מי שמוסמך לשנות את הגישה לניהול תגובות בחשבון. מסירה ברורה יכולה לציין את שני התפקידים בלי להניח שבכל מקרה דרושים כמה בודקים.

ליוצרי תוכן שעובדים לבד, אותה הבחנה יכולה להופיע בהערה 1: מה זוהה, איזה הקשר נבדק ומה הוחלט. אדם 1 יכול לבצע כמה שלבים ולשמור על מטרה ברורה לכל אחד. מערך הנתונים אינו מראה שהוספת עובדים או שכבת בדיקה נוספת משפרת תוצאות.

השאירו תצפיות נפרדות בנפרד עד שמבינים את הקשר ביניהן. בחירות שונות עשויות לשקף מוקדי תשומת לב שונים, ולא תיאורים סותרים. ציטוט או דיווח אינם פטור אוטומטי, והתקפה המופנית לנמען אינה המלצה שנמדדה למחיקה. הפעולה המתאימה היא זו שנתמכת בשיחה בפועל ובכללי החשבון, ולא פעולה שמסיקים מאחוזי הארכיון שלנו.

דף עבודה לבדיקת תגובות שאפשר להעתיק

העתיקו את השדות למסמך הבדיקה או המסירה הקיים שלכם. השתמשו רק במידע שנחוץ לצוות, עם גישה שמתאימה לשיחה. דף העבודה זמין כאן בלי הרשמה; זו הנחיה מעשית, ולא תהליך שנצפה במחקר.[8]

מקרה: [קישור או הפניה פנימית.] חשבון/ערוץ: [היכן מופיעה השיחה.] מועד הבדיקה: [תאריך ושעה.] שמרו על הפניה יציבה כדי שהאדם הבא ימצא את אותו חומר.

מטרה: [איזו שאלה דורשת החלטה?] אחריות: [מי יקבל את ההחלטה?] המשך טיפול: [מי צריך לקבל את המקרה, אם בכלל?]

הטקסט שהוצג: [הקטע שנבדק, שמור בסביבת העבודה שאושרה אצלכם.] ההקשר מסביב: [תשובות קודמות או מאוחרות שרלוונטיות לבדיקה.] הקשר חסר: [מה לא היה אפשר לבדוק.]

בודק: [שם או הפניה פנימית לבודק.] מועד ההערכה: [תאריך ושעה.] השאירו את הרשומה של כל אדם נפרדת, גם אם כמה אנשים משתמשים באותן תוויות.

תצפית על ציטוט או דיווח: [כן, לא או לא ברור.] ביסוס: [איזה קטע נראה כציטוט או דיווח על התקפה של אדם אחר?] אל תשתמשו בשדה הזה כהחלטה שהטקסט אינו מזיק.

תצפית על התקפה המופנית לנמען: [כן, לא או לא ברור.] ביסוס: [איזה קטע נראה כמופנה לנמען, ולמה?] השאירו את התשובה עצמאית מהתצפית על ציטוט או דיווח.

תצפיות רלוונטיות אחרות: [כל עניין נוסף שמדיניות החשבון מחייבת לשקול.] היעדר אחת משתי תוויות המחקר אינו תיאור מלא של חילופי הדברים.

הקשר בין הבדיקות: [אדם 1 בחר בשתיהן, אנשים שונים בחרו באפשרויות שונות, או לא ברור.] אם הבודקים נבדלים בבחירותיהם, שמרו את ההערות האישיות לפני סיכום המקרה.

הפניה למדיניות: [הכלל או ההנחיה הרלוונטיים.] החלטה: [הפעולה שנבחרה בפועל, או השאלה שלא הוכרעה.] נימוק: [איך התצפית וההקשר תומכים בהחלטה הזאת.]

מעקב: [מי יעשה מה בהמשך, אם יש צורך?] מועד המסירה: [מתי המקרה עובר לאותו אדם.] תוצאה: [מה קרה לאחר ההחלטה, אם נבדק.] אל תסמנו פעולה מתוכננת כפעולה שהושלמה.

בודקים שוב כאשר: [אירוע מסוים או פרט הקשר חסר, אם צריך מבט נוסף.] דף העבודה אינו מחייב לחזור ולבדוק כל מקרה; בחרו סיבה שמתאימה למצב.

בדיקת השנה השאירה את אותם 155 קטעים

קבענו 2 בדיקות תומכות לפני חישוב צמדי התוויות. הראשונה הוציאה קטעים משנת 2016, משום שטווח השנים בקבצים שפורסמו נמשך מעבר לתקופות שתוארו בסקירת המקור ובמאמר המקורי. נשארו 13,809 קטעים מתאימים מהמדגם האקראי. באותם 155 הופיעו שתי התוויות, באותה חלוקה של 98/57.[5]

הבדיקה האחרת השתמשה בחומר שנדגם בנפרד סביב אירועי חסימה. עם אותו כלל של 10 הערכות בדיוק, היו בו 42,383 קטעים. מתוך 2,457 עם שתי התוויות במקום כלשהו, ב־1,354 נמצא צמד שבחר אותו בודק וב־1,103 התוויות הגיעו רק מאנשים שונים: 55.1% ו־44.9%, בהתאמה.

לקבוצה המועשרת סביב חסימות יש מטרת דגימה אחרת, ולכן השארנו אותה בנפרד. האחוזים שלה אינם מחליפים את התוצאה הראשית ואינם הופכים לראיה על תגובות עכשוויות למותגים. בדיקת השנה מתייחסת לטווח התאריכים שנרשם; אף בדיקה אינה פוטרת מהצורך לפרש את הנתונים כהערכות סובייקטיביות של קטעים היסטוריים נבחרים.

איך נראו 2 הבדיקות שנבחרו מראש בהשוואה

בכל שורה יש בדיוק 10 הערכות שלמות לכל קטע. למדגם המועשר סביב חסימות יש מטרת דגימה נפרדת. הוצאת 2016 מתייחסת להבדל בין טווח השנים שפורסם לתיאורי המקור.

מסגרת ראשית ו־2 מסגרות רגישות, מכנים מותנים, מספרי קטעים עם צמד תוויות של אותו בודק, מספרי קטעים עם בחירות מבודקים שונים בלבד ואחוזים מותנים של קטעים עם בחירות מבודקים שונים בלבד
השוואה שנבחרה מראשקטעים שעמדו בתנאיםקטעים עם שתי התוויות במקום כלשהועם צמד של אותו בודקבודקים שונים בלבדשיעור הקטעים שבהם התוויות הגיעו רק מבודקים שונים מתוך הקטעים עם שתי התוויות
מדגם אקראי, בדיוק 10 הערכות13,824155985736.8%
מדגם מועשר סביב חסימות, שנשמר בנפרד42,3832,4571,3541,10344.9%
מדגם אקראי ללא 201613,809155985736.8%
בהשוואה הראשית ובהשוואה ללא השנה יש 155 קטעים מותנים בחלוקה של 98/57, כלומר 36.8% עם בודקים שונים בלבד. בהשוואה הנפרדת המועשרת סביב חסימות יש 2,457 בחלוקה של 1,354/1,103, כלומר 44.9%. לא אוגמו מדגמים ולא נאמדה השוואה אוכלוסייתית או סיבתית.[5]

איך קישרנו את התוויות להערכות האישיות

השתמשנו בגרסה 6 של Wikipedia Talk Labels: Personal Attacks, מערך נתונים ציבורי מפרויקט Wikipedia Detox. הקבצים שפורסמו כוללים טקסט שנגזר מעריכות היסטוריות בדפי שיחה, ולכל קטע כמה הערכות של עובדי מיקור המונים. הניתוח הזה השתמש בתשובות האישיות; הוא לא יצר הערכות חדשות ולא בחן מערכת לניהול תגובות.[1][2]

ההשוואה הראשית התחילה בקבוצת המדגם האקראי שבפרסום, ושמרה קטעים עם בדיוק 10 הערכות נפרדות ושלמות. קיבוע המספר ל־10 נתן לכל קטע אותו מספר הזדמנויות לקבל בחירה משותפת של התוויות. התנאי גם בחר 13,824 מתוך 37,492 קטעי המדגם האקראי שפורסמו, ולכן התוצאה אינה מתארת את הקבוצה כולה.[3]

כל קטע נבחר תרם ספירה 1. בדקנו אם אחת מהתוויות הופיעה במקום כלשהו, ואז אם שתיהן הופיעו בתשובה של אדם 1 לאותו קטע. 5 הקטגוריות מוציאות זו את זו וסכומן 13,824. המכנה של 155 קטעים מגיע משתי הקטגוריות שבהן קיימות שתי התוויות, ולא מכלל ההערכות או מכל קטעי המקור.[4]

לפני בחינת הצמדים קיבענו את קבוצות הדגימה, כלל הכיסוי, בדיקת השנה ומינימום של 100 קטעים בהשוואה המותנית הראשית. 155 הקטעים שנצפו עמדו בדרישה. לא קבענו אחוז נדרש, לא שינינו את הכלל כדי להעדיף תוצאה ולא איגמנו את החומר המועשר סביב חסימות עם הקבוצה האקראית.

המחקר המקורי כבר השתמש בהערכות אישיות, ומחקר מאוחר יותר איגד כל שדה התקפה לפי רוב. התרומה המצומצמת שלנו היא ההשוואה התיאורית של מי סיפק את שתי האפשרויות בתוך מערך הערכות קבוע. זה אינו תיקון לשיטות של אותם מחקרים. ההורדה מספקת תוצאות מצרפיות, שיטות והוראות לשחזור באמצעות קובצי המקור הציבוריים שזמינים בנפרד.[6][7]

מבהירים את המקרה למי שימשיך לבדוק

השאלה השימושית בהעברת בדיקת תגובה ברשת חברתית היא מי רשם כל תצפית ומה הוא תיאר. בהשוואת הארכיון הנבחרת הזאת, ב־57 מתוך 155 הקטעים עם שתי התוויות לא היה אף בודק שבחר בצמד. הקשר הזה היה אובד בסיכום שמכיל רק את שמות שתי התוויות.

שמרו על הקשר בין התצפיות של האדם, ההקשר הרלוונטי וההחלטה הסופית. כך עסק או יוצרי תוכן יכולים להסביר מה כולל המקרה ואיך נובעת ממנו הפעולה שנבחרה, בלי להעמיס על שם הקטגוריה את תפקיד הבדיקה כולה.

אין צורך בהרשמה. החבילה כוללת תוצאות מצרפיות אנונימיות, שיטות, הוראות שחזור ודף עבודה לשימוש חוזר. אין בה טקסט דיון מקורי, מזהי גרסאות, מזהי בודקים או נתונים דמוגרפיים. קובצי המקור הציבוריים המקוריים זמינים בנפרד דרך הפרסום המקושר.

מקורות והערות

  1. מקור: Wikipedia Talk Labels: Personal Attacks, גרסה 6 ב־Figshare, DOI 10.6084/m9.figshare.4054689.v6, שפורסמה בפברואר 2017 ברישיון CC0. השתמשנו בקבצים attack_annotated_comments.tsv (קובץ 7554634) ו־attack_annotations.tsv (קובץ 7554637), עם בדיקות MD5 של מפרסם הנתונים ובדיקות SHA-256 שחושבו באופן עצמאי. Influence IQ השלים את הבחירה, החישובים והפרשנות ב־25 באוקטובר 2026 (UTC). המחקר לא אסף תגובות חדשות, לא יצר תיוגים חדשים ולא מדד פלטפורמה חברתית חיה.
  2. מפרסם הנתונים מגדיר quoting_attack כתפיסת הבודק לגבי ציטוט או דיווח על התקפה מתגובה אחרת, ו־recipient_attack כהתקפה המופנית לנמען. הממשק אפשר כמה בחירות. התקפה כללית היא תשובת מקור נפרדת, ולא פעולת OR ששוחזרה מתתי־סוגים בניתוח הזה. הטקסט שפורסם מחבר תוספות מאותה עריכה; הוא אינו תקציר עריכה, ואינו בהכרח פוסט שלם 1 או שיחה מלאה. מרחבי השמות של דפי השיחה, קבוצות הדגימה וחלוקות המודל train/dev/test שומרים על משמעותם המתועדת.
  3. בקבצים המלאים היו 115,864 קטעים ייחודיים, 1,365,217 צמדי גרסה/בודק ייחודיים של הערכות ו־4,053 עובדים. בדיקת המבנה לא מצאה צמדים כפולים, רשומות ללא התאמה בצירוף, שורות פגומות או ערכי דגל חסרים או לא תקינים. נדרשו בדיוק 10 הערכות נפרדות ושלמות בכל 5 דגלי המקור, בשני מרחבי השיחה המתועדים ובכל חלוקות המודל, עם ספירה 1 במשקל שווה לכל קטע. בקבוצה האקראית הראשית נשמרו 13,824 מתוך 37,492 קטעים. בקבוצה המועשרת סביב חסימות, שנבחרה בנפרד, נשמרו 42,383 מתוך 78,372. הופעת אותו עובד בקטעים שונים הייתה תקינה; לא בוצעו מיזוג של טקסטים זהים, מחיקה על סמך חוסר עקביות בין דגלים או קידוד מחדש של התקפה כללית.
  4. נסמן ב־Q כל בחירת ציטוט או דיווח, וב־R כל בחירת התקפה המופנית לנמען עבור קטע מתאים. נוכחות שתי התוויות דורשת לפחות בחירת Q 1 ובחירת R 1 במקום כלשהו בין 10 ההערכות. נוכחות אצל אותו בודק מחייבת בנוסף Q ו־R בתשובת גרסה/עובד 1; במצב של בודקים שונים בלבד אין תשובה כזאת. המכנה המותנה הראשי הוא 98 + 57 = 155; השברים המדויקים 98/155 ו־57/155 מוצגים כ־63.2% ו־36.8%. האחוזים משתמשים בחישוב רציונלי מדויק ובעיגול חצי כלפי מעלה לספרה 1 אחרי הנקודה. לפני חישוב הצמדים דרשנו לפחות 100 קטעים עם שתי התוויות בהשוואה המותנית הראשית, בלי סף לאחוז תוצאה רצוי. לא הוצגו רווח סמך לאוכלוסייה, מבחן מובהקות, טענת אי־תלות או אומדן דיוק.
  5. בדיקת הרגישות שהוגדרה מראש למדגם המועשר סביב חסימות השתמשה באותו כלל של 10 הערכות בדיוק ונשארה נפרדת מהמדגם האקראי הראשי. 5 הספירות שלה היו 20,911 קטעים ללא אף אחת משתי התוויות, 959 קטעים עם ציטוט או דיווח ללא התקפה לנמען, 18,056 קטעים עם התקפה לנמען ללא ציטוט או דיווח, 1,354 קטעים עם שתי התוויות אצל אותו בודק ו־1,103 קטעים עם שתיהן רק אצל בודקים שונים; הסך הוא 42,383 והמכנה המותנה 2,457. הוצאת 2016 מהאקראי הראשי השאירה 13,809 קטעים, עם 5 ספירות של 12,012 / 406 / 1,236 / 98 / 57 באותו סדר. 155 הקטעים המותנים שלה וחלוקת הצמדים 98/57 לא השתנו. אלה בדיקות תיאוריות, ולא שחזורים עצמאיים של אוכלוסייה או ראיה לכך שקבוצות הדגימה בנות השוואה.
  6. המאמר Ex Machina: Personal Attacks Seen at Scale של Wulczyn, Thain ו־Dixon מ־2017 ביסס את עבודת מיקור ההמונים והמידול המקורית. המאמר של Cécillon ועמיתיו מ־2020 ב־WAC שמר מטריצה של עובדים מול שדות ואיגד את שדות ההתקפה בנפרד לפי רוב. אלה שיטות קיימות, ולא שגיאות שהמחקר הזה הוכיח. ההשוואה שלנו משתמשת בנוכחות תווית אצל בודק כלשהו מתוך 10 ובצמד באותה תשובה, ולא בביצועי תוויות רוב. ההשוואה של Influence IQ סופרת אם שתי האפשרויות הגיעו מאותו בודק או רק מבודקים שונים בתוך כל קטע שנבחר.
  7. סקירת המקור מתארת את 2001–2015 והמאמר המקורי את 2004–2015; קובצי גרסה 6 המקובעת כוללים ערכי שנה 2001–2016. הסכמה של מפרסם הנתונים לשדה המציין אם המשתמש היה מחובר מציינת 0/1, בעוד שבקובץ שפורסם מופיעים False/True; מחרוזות הדגל הבינרי הן 0.0/1.0. שימרנו את ההבדלים בין התיעוד לנצפה בלי לייחס להם גורם. המפענח מקבל את הערכים המילוליים המדויקים שפורסמו, בלי עיגול או המרה כפויה של ערכי תוויות. החבילה מתעדת גרסאות מקור, כללי בחירה ושלבים לשחזור הניתוח מהקבצים הציבוריים.
  8. 2 צוותי הבדיקה מונים 10 אנשים כל אחד. הצוותים, תשובות בודק A/B ואפשרויות המסירה הם דוגמאות הוראה בדויות. אין בהם טקסט דיון מקורי או מזהים ממערך הנתונים. בשני הצוותים המומצאים יש בחירת ציטוט או דיווח 1 ובחירת התקפה לנמען 1, אבל רק בראשון יש צמד של אותו אדם. דף העבודה והאיורים המושגיים הם הסברים מעשיים, ולא תהליכים שנצפו במקור, מדיניות לניהול תגובות שנבחנה או הבטחה להחלטות טובות יותר.

כל מהדורות השפה מתורגמות ישירות מהמקור באנגלית. כולן מתארות את אותו מערך נתונים היסטורי מ־Wikipedia באנגלית ואת אותן הערכות שנבחרו. התרגום אינו יוצר ממצאים על שוק מקומי. Influence IQ אחראי לניתוח, לפרשנות ולתרגומים.

מתכננים את האנשים וההנחיות סביב העברת הטיפול