İki moderasyon etiketi farklı kişilerden gelebilir

Bir yorum incelemesini devrederken iki etiket görünebilir, ama bunları kimin seçtiği görünmeyebilir. Geçmiş Wikipedia değerlendirmeleri, bu eksik ayrıntının vakayı sonradan inceleyen kişi için neden önemli olduğunu gösteriyor.

Geçmiş Wikipedia Detox kişisel saldırı veri kümesinden seçilmiş değerlendirmelerin özgün Influence IQ analizi. Analiz 25 Ekim 2026’da (UTC) tamamlandı.

Özet

Seçilen 13.824 geçmiş Wikipedia tartışma kesitinin 155’inde, 10 ayrı değerlendirme içinde hem alıntı/aktarma hem de muhataba yönelik saldırı etiketi vardı. Bu 155 kesitin 98’inde en az bir kişi iki etiketi de seçmişti. Kalan 57’sinde, yani %36,8’inde, etiketler yalnız farklı kişilerden geliyordu. Yüzde, 13.824 kesitin tamamını değil, bu 155 kesiti anlatıyor.[1][4]

Sosyal medya yorumlarını yöneten işletmeler ve içerik üreticileri için pratik ders, incelemenin devriyle ilgili: her kişinin gözlemlerini kendi değerlendirmesine bağlı tutun. İki etiketin birlikte görünmesi, bir kişinin ikisini de seçtiğini kanıtlamaz. Çalışma, geçmiş tartışma kesitlerine ilişkin öznel değerlendirmeleri anlatıyor; moderasyon hatalarını veya yorumu kaldırma kuralını değil. Aşağıdaki kopyalanabilir form, bu ayrımı kullanılabilir bir inceleme kaydına dönüştürüyor.

Bir içerik üreticisinin, zor bir yoruma bakmasını çalışma arkadaşından istediğini düşünün. Devredilen kayıtta iki etiket var: biri bir saldırıyı alıntılıyor veya aktarıyor; biri de muhataba saldırı yöneltiyor. Arkadaşının ne yapılacağına karar vermeden önce bir ayrıntıya daha ihtiyacı var: iki gözlemi de aynı kişi mi yaptı?

Özet bu gerçek ayrımı kaybedebilir. Bir kişi iki seçeneği de seçmiş olabilir; iki kişi aynı metnin farklı yönlerine odaklanmış da olabilir. Yalnız etiket listesi, sonraki inceleyen kişiye hangi örüntünün oluştuğunu söylemez. Her kişinin hangi sözleri anlattığı da belirsiz kalabilir.

Bu soruyu, yerleşik bir araştırma veri kümesindeki bireysel değerlendirmeleri kullanarak inceledik. Özgün materyal Wikipedia tartışma sayfalarından geliyordu. Buradaki işlevi, etiketlerle onları seçen kişiler arasındaki ilişkiyi görünür kılmak; ardından işletme veya üreticinin kendi inceleme devrinde hangi bilgiyi koruyacağını düşünmesine yardım etmek.

Her gözlemi onu yapan kişiye bağlı tutun

İki ayrı inceleme notu kartı, daha büyük tek bir tartışma metni kartına bağlanıyor. Daire ve kare, her notun kaynağını koruyor.
Kavramsal çizim. Ayrı kişilerin inceleme notları aynı tartışma kesitine bağlanıyor. Eşleşen şekiller, her gözlemin nereden geldiğini korumaya yardım ediyor.

Önce her etiketin gerçekte neyi anlattığına bakın

İlk seçenek, metnin başka bir yorumdaki kişisel saldırıyı alıntılayıp alıntılamadığını veya aktarıp aktarmadığını soruyordu. İkincisi muhataba yöneltilmiş kişisel saldırıyla ilgiliydi. İnceleyenler birden çok seçenek seçebiliyordu. Bunlar sunulan metne ilişkin değerlendirmelerdi; metni gizleme kararı veya bir kuralın ihlal edildiğinin kanıtı değildi.[2]

10 kişiden en az biri seçtiğinde etiketi var saydık. Bu, herhangi bir kişinin seçimini esas alan karşılaştırmaydı. Çoğunluk aramadık, etiketleri uzlaşma diye nitelemedik ve doğru olup olmadıklarını test etmedik.

Seçili 13.824 kesitin 12.025’inde bu iki etiketten hiçbiri yoktu. 406’sında muhataba yönelik saldırı etiketi olmadan alıntı/aktarma, 1.238’inde ise alıntı/aktarma olmadan muhataba yönelik saldırı etiketi vardı. Geriye, değerlendirmelerinin bir yerinde iki etiketi de taşıyan 155 kesit kaldı.

Bu açıklamalar yalnız bu iki seçenekle ilgili. Muhataba yönelik saldırı etiketi olmayan bir kesitte başka tür saldırı etiketi bulunabilir. Alıntı/aktarma etiketi de metnin zararsız olduğunu onaylamaz. Adları kesin tutmak, yararlı bir kategorinin fark ettirmeden daha geniş bir sonuca dönüşmesini önler.

Seçili 13.824 kesit nasıl etiketlendi?

10 kişiden en az biri seçtiğinde etiket var sayıldı. Bu beş kategori iki belirli seçenekle ilgili; “hiçbiri”, kesitte hiçbir saldırı türü etiketi bulunmadığı anlamına gelmiyor.

Alıntı/aktarma ve muhataba yönelik saldırı etiketlerinin varlığına ve aynı kişinin ikisini de seçip seçmediğine göre sınıflandırılan seçili 13.824 geçmiş kesitin birbirini dışlayan beş sayımı
Alıntı/aktarma ve muhataba yönelik saldırı etiketleriKesitler
Bu iki etiketten hiçbiri12.025
Muhataba yönelik saldırı olmadan alıntı/aktarma406
Alıntı/aktarma olmadan muhataba yönelik saldırı1.238
İki etiket de var; en az bir kişi ikisini de seçti98
İki etiket de var; yalnız farklı kişiler seçti57
Kaynak: Wikipedia Talk Labels: Personal Attacks veri kümesinin 6. sürümündeki tam 10 değerlendirmeli rastgele örneklemden seçilen kesitlerin Influence IQ analizi. Beş sayının toplamı 13.824. Son iki kategori 155 kesitlik koşullu kümeyi oluşturuyor.[1][3][4]

57 kesitte iki etiket de vardı, ama ikisini de seçen kişi yoktu

155 kesitte her etiketin arkasındaki bireysel yanıtı kontrol ettik. 98’inde en az bir kişi aynı kesit için iki seçeneği de seçmişti. 57’sinde alıntı/aktarma ve muhataba yönelik saldırı seçimleri yalnız farklı kişilerden geliyordu. O 57 kesitteki hiçbir bireysel yanıt, iki seçeneği birlikte içermiyordu.

En az bir kişinin iki etiketi de seçtiği kesitlerin payı %63,2; etiketleri yalnız farklı kişilerden gelenlerin payı %36,8’di. İki grup da aynı dar tanımlı 155 kesitlik kümeye aitti. Daha geniş 13.824 kesitlik çerçeve önemini koruyor; çünkü koşullu karşılaştırmanın nereden başladığını gösteriyor.[4]

Bu ayrım, özetten çıkarabileceğiniz iddiayı değiştiriyor. İki etiketin göründüğünü bilmek, inceleme yanıtları içinde bir yerde her birinin seçildiğini söylemeyi destekler. Tek başına, bir kişinin metni iki biçimde de tanımladığını söylemeyi desteklemez.

Aynı kişinin iki seçimi de yapması, sözlerin anlamını da kesinleştirmiyor. Bir kaynak kesiti, bir Wikipedia revizyonunda yapılan eklemeleri, birden çok gönderi dâhil, birleştirebilir. Tek kişinin iki seçeneği seçmesi, alıntılanan bölümün kendisinin muhataba yönelik saldırı olduğunu göstermez. Değerlendirmelerin nedenlerini açıklamak için tek tek kesitleri incelemedik.[2][6]

155 kesitin 57’sinde aynı kişinin çift seçimi yoktu

Bu karşılaştırma yalnız 10 değerlendirmesinin bir yerinde iki etiketi de taşıyan seçili 155 kesiti içeriyor. Herhangi bir kişinin seçimlerini kullanıyor; çoğunluk uzlaşmasını veya doğrulanmış moderasyon sonuçlarını değil.

İki etiketli seçili 155 kesitte, aynı kişinin iki seçimi yaptığı ve yalnız farklı kişilerin seçim yaptığı durumların sayıları ve koşullu yüzdeleri
İki etiketi kim verdi?Kesitler155 kesit içindeki pay
En az bir kişi ikisini de seçti98%63,2
Etiketler yalnız farklı kişilerden geldi57%36,8
98 kesitte aynı kişi iki etiketi de seçti: 98/155, yani %63,2. 57’sinde iki etiket yalnız farklı kişilerde göründü: 57/155, yani %36,8. Payda, seçili 13.824 geçmiş kesitlik ana çerçeve içindeki 155 kesit.[4]

Sonraki kişiye etiketin arkasındaki gözlemi aktarın

İşletmede inceleme, yorumları izleyen kişiden hesaptan sorumlu kişiye devredilebilir. Üreticide ise asistandan üreticiye geçebilir. Sonraki kişinin yanıt vermeye, daha fazla bağlam aramaya veya hesabın mevcut kurallarını uygulamaya karar vermeden önce neyin fark edildiğini anlaması gerekir.

Her kişinin seçimlerini bir arada tutun. Bir kişi iki seçeneği de seçtiyse bu ikiliyi onun değerlendirmesi olarak saklayın. Farklı kişiler farklı seçenekleri seçtiyse ayrı yanıtları koruyun. Bir vaka, kimsenin yapmadığı ortak bir değerlendirmeye dönüştürülmeden birden çok okumayı barındırabilir.

Ardından ilgili bölüm hakkında kısa bir açıklama ekleyin. Kendi iş akışınızda neyin alıntı gibi göründüğünü, kime seslenildiğini ve çevresindeki hangi yanıtın konuşmayı anlamaya yardım ettiğini belirtin. Eldeki bağlam soruyu yanıtlamıyorsa belirsizliği görünür bırakın. Bunlar pratik öneriler; veri kümesi kararlar üzerindeki etkilerini test etmedi.

Kısa bir not yeterli olabilir. Amaç, sonraki kişinin tüm incelemeyi yeniden kurmadan ilk kişinin düşüncesini izleyebilmesi. Vakaları vardiyalar arasında veya markayla üretici arasında devreden ekip için bu, kategoriyle birlikte özgün gözlemi de aktarmak demek.

Etiket toplamları aynı olan kurgusal bir örnek

Her birinde 10 kişinin hayalî bir kesiti değerlendirdiği iki uydurma inceleme grubu düşünün. Gruplar hesabı örnekliyor; veri kümesindeki gerçek kişiler, alıntılar veya vakalar değil. İki özette de bir alıntı/aktarma seçimi ve bir muhataba yönelik saldırı seçimi görünüyor.[8]

İlk grupta İnceleyen A iki seçeneği de seçiyor. Diğer 9 kişi bu iki seçeneğin hiçbirini seçmiyor. Yanıtında ikiliyi taşıyan bir kişi var. Devir kaydı, son eylemi ayrı bir karara bırakarak bu kişinin birleşik değerlendirmesini doğru biçimde koruyabilir.

İkinci grupta İnceleyen A alıntı/aktarmayı, İnceleyen B muhataba yönelik saldırıyı seçiyor. Kalan 8 kişi bu iki seçeneğin hiçbirini seçmiyor. Alan toplamları hâlâ birer, ama iki etiketi birden seçen kişi yok. Buna tek kişinin birleşik değerlendirmesi demek, bireysel yanıtlarda olmayan bir ilişki ekler.

Örnek, eşleşen her kişiyi toplamak yerine neden kesitleri saydığımızı da açıklıyor. İlk grupta iki kişinin her biri iki etiketi de seçseydi kesit, aynı kişinin iki etiketi de seçtiği gruba yine bir kez girerdi. Sınıflandırma, kaç kişinin ikiliyi verdiğini değil, böyle bir ikilinin bulunup bulunmadığını soruyor.

İkinci grup için kısa bir kurgusal devir notu şöyle olabilir: “Karar henüz verilmedi. İnceleyen A alıntı/aktarma belirtti; İnceleyen B muhataba yönelik ifadeler belirtti. İki notu da kesitle ve önceki yanıtıyla birlikte saklayın. Hesap sahibi, eylemi seçmeden önce herkesin hangi bölümü kastettiğini kontrol edecek.” Not, iki kişinin yanıtını tek kişinin sonucu diye yeniden yazmadan açık soruyu aktarıyor.

Gerçek bir devirde ikinci gruptaki iki ayrı notu koruyun. Sonraki kişi bunları metinle birlikte okuyabilir, herkesin ne kastettiğini sorabilir ve hesabın kurallarına göre karar verebilir. Çalışma, iki kişiden herhangi birinin haklı olup olmadığını veya o kurgusal vakada hangi eylemin uygulanacağını belirlemiyor.

Aynı etiket toplamları farklı inceleme örüntülerinden gelebilir

İki satırda aynı birleşik etiket özeti var. Üst satırda bir kişinin kartı iki simgeyi de taşıyor; alt satırda simgeler iki kişinin kartına dağılmış.
  1. Bir kişi ikisini de seçiyor

    İlk uydurma grupta bir kişi iki etiketi de seçiyor; 9 kişi ise bu iki seçeneğin hiçbirini seçmiyor.

  2. İki kişi birer etiket seçiyor

    İkinci grupta bir kişi alıntı/aktarma, başka biri muhataba yönelik saldırıyı seçiyor. Diğer 8 kişi bu iki seçeneğin hiçbirini seçmiyor.

Kurgusal grupların çizimi. Kartlar iki etiketi veren kişilere odaklanıyor; her grupta bu seçeneklerin hiçbirini seçmeyen kişiler de var. Bu, çalışmadaki 155 kesitin ölçülmüş dağılımı değil.

Kurallara göre verilecek kararı metnin tanımından ayrı tutun

Yorumda ne göründüğünü anlatmakla onun hakkında ne yapılacağına karar vermek farklı amaçlara hizmet ediyor. İnceleyen kişi alıntılanmış sözleri fark edebilir; hesap sahibinin ise çevresindeki konuşmayı ve geçerli kuralları düşünmesi gerekebilir. Sonradan okuyan kişi karara nasıl varıldığını görebilsin diye bu adımları ayrı saklayın.

İçerik üreticisiyle çalışan işletme olarak, zor bir konuşma ortaya çıkmadan kararı kimin vereceğinde anlaşın. Ürün şikâyetini anlayan kişi, hesabın moderasyon yaklaşımını değiştirmeye yetkili kişi olmayabilir. Açık bir devir kaydı, her vakanın birkaç kişi tarafından incelenmesi gerektiğini varsaymadan iki rolü de adlandırabilir.

Tek başına çalışan üretici için aynı ayrım tek bir notta yer alabilir: neyi fark ettiğiniz, hangi bağlamı kontrol ettiğiniz ve neye karar verdiğiniz. Bir kişi, amaçları açık tutarak birkaç adımı üstlenebilir. Veri kümesi, personel veya ek inceleme katmanı eklemenin sonuçları iyileştirdiğini göstermiyor.

İlişkilerini anlayana kadar ayrı gözlemleri ayrı tutun. Farklı seçimler çelişkili anlatımlardan çok farklı odakları yansıtabilir. Alıntı/aktarma seçimi otomatik muafiyet değil; muhataba yönelik saldırı seçimi de ölçülmüş bir silme önerisi değil. Yararlı sonraki adım, arşiv yüzdelerimizden çıkarılan eylem değil, gerçek konuşmanın ve hesabın kurallarının desteklediği adım.

Kopyalayabileceğiniz yorum inceleme formu

Bu alanları mevcut inceleme belgenize veya devir kaydınıza kopyalayın. Yalnız ekibin ihtiyaç duyduğu bilgiyi, konuşmaya uygun erişimle kullanın. Form burada kayıt olmadan kullanılabilir; çalışmada gözlenmiş bir süreç değil, pratik bir rehber.[8]

Vaka: [Bağlantı veya kurum içi referans.] Hesap/kanal: [Konuşmanın geçtiği yer.] Kontrol zamanı: [Tarih ve saat.] Sonraki kişi aynı materyali bulabilsin diye referansı sabit tutun.

Amaç: [Hangi soru için karar gerekiyor?] Sorumlu: [Kararı kim verecek?] Sonraki kişi: [Varsa inceleme kime devredilmeli?]

Sunulan metin: [İncelenen bölüm; onaylı çalışma alanınızda saklanır.] Çevresindeki bağlam: [İlgili önceki veya sonraki yanıtlar.] Eksik bağlam: [Kontrol edilemeyenler.]

İnceleyen kişi: [Adı veya kişiye ait kurum içi referans.] Değerlendirme zamanı: [Tarih ve saat.] Birkaç kişi aynı etiketleri kullansa bile herkesin kaydını ayrı tutun.

Alıntı/aktarma gözlemi: [Evet, hayır veya belirsiz.] Dayanak: [Hangi bölüm başka bir kişinin saldırısını alıntılıyor veya aktarıyor gibi görünüyor?] Bu alanı zararsızlık kararı olarak kullanmayın.

Muhataba yönelik saldırı gözlemi: [Evet, hayır veya belirsiz.] Dayanak: [Hangi bölüm muhataba yönelmiş gibi görünüyor, neden?] Bu yanıtı alıntı/aktarma gözleminden bağımsız tutun.

Diğer ilgili gözlemler: [Hesabın kurallarına göre dikkate alınması gereken başka konular.] Çalışmadaki iki etiketten birinin yokluğunu, konuşmanın eksiksiz anlatımı saymayın.

İncelemeler arasındaki ilişki: [Bir kişi ikisini de seçti, farklı kişiler farklı seçenekleri seçti veya belirsiz.] Kişiler farklı değerlendirdiyse vakayı özetlemeden önce bireysel notlarını koruyun.

Kural referansı: [Geçerli kural veya rehber.] Karar: [Gerçekte seçilen eylem veya açık kalan soru.] Gerekçe: [Gözlem ve bağlam bu kararı nasıl destekliyor?]

Takip: [Varsa bundan sonra kim ne yapacak?] Devir zamanı: [İnceleme o kişiye ne zaman geçecek?] Sonuç: [Kontrol edildiyse karardan sonra ne oldu?] Planlanan eylemi tamamlanmış diye işaretlemeyin.

Yeniden inceleme koşulu: [Tekrar bakmak gerekiyorsa belirli bir olay veya eksik bağlam bilgisi.] Form, her vakanın tekrar tekrar incelenmesini istemiyor; duruma uygun bir gerekçe kullanın.

Yıl kontrolünde aynı 155 kesit kaldı

Etiket eşleşmelerini hesaplamadan önce iki destekleyici kontrol belirledik. İlkinde 2016 tarihli kesitleri çıkardık; çünkü yayımlanan dosyalardaki yıl aralığı, kaynak özetinde ve özgün makalede anlatılan dönemlerin ötesine uzanıyordu. Böylece rastgele örneklemde koşulları karşılayan 13.809 kesit kaldı. Aynı 155 kesitte iki etiket de vardı; 98/57 ayrımı da aynıydı.[5]

Diğer kontrol, veri kümesinde engelleme olaylarının çevresinden ayrıca örneklenmiş materyali kullandı. Aynı tam 10 değerlendirme kuralıyla 42.383 kesit içeriyordu. Bir yerde iki etiketi de taşıyan 2.457 kesitin 1.354’ünde en az bir kişi ikisini de seçmişti; 1.103’ünde etiketleri yalnız farklı kişiler vermişti. Oranlar sırasıyla %55,1 ve %44,9’du.

Engelleme olaylarıyla zenginleştirilmiş grubun örnekleme amacı farklı olduğu için onu ayrı tuttuk. Yüzdeleri ana sonucun yerini almıyor ve markaların güncel yorumları hakkında kanıt oluşturmuyor. Yıl kontrolü kaydedilmiş tarih aralığını ele alıyor; iki kontrol de bunları seçilmiş geçmiş kesitlere ilişkin öznel değerlendirmeler olarak yorumlama gereğini ortadan kaldırmıyor.

Önceden seçilen iki kontrol nasıl karşılaştırıldı?

Her satır, kesit başına tam 10 eksiksiz değerlendirme kullanıyor. Engelleme olaylarıyla zenginleştirilmiş örneklemin seçilme amacı ayrı. 2016’nın çıkarılması, yayımlanan yıl aralığıyla kaynak açıklamaları arasındaki farkı ele alıyor.

Ana çerçeve ve iki duyarlılık çerçevesi; koşullu paydalar, aynı kişinin çift seçim sayıları, yalnız farklı kişilerin seçim sayıları ve koşullu yüzdeleri
Önceden seçilmiş karşılaştırmaKoşulları karşılayan kesitlerDeğerlendirmelerinde bir yerde iki etiketi de taşıyan kesitlerAynı kişinin iki etiketi de seçtiği kesitlerYalnız farklı kişilerin seçtiği kesitlerİki etiketli kesitlerde, etiketleri yalnız farklı kişilerden gelenlerin payı
Rastgele örneklem, tam 10 değerlendirme13.8241559857%36,8
Ayrı tutulan, engelleme olaylarıyla zenginleştirilmiş örneklem42.3832.4571.3541.103%44,9
2016 hariç rastgele örneklem13.8091559857%36,8
Ana ve yıl dışlama karşılaştırmalarında koşullu 155 kesit 98/57 ayrılıyor; yalnız farklı kişilerden gelen etiketlerin payı %36,8. Ayrı engelleme olaylarıyla zenginleştirilmiş karşılaştırmada 2.457 kesit 1.354/1.103 ayrılıyor; pay %44,9. Örneklemler birleştirilmedi; evren veya nedensellik karşılaştırması tahmin edilmedi.[5]

Etiketleri bireysel değerlendirmelere nasıl bağladık?

Wikipedia Detox projesinin kamuya açık Wikipedia Talk Labels: Personal Attacks veri kümesinin 6. sürümünü kullandık. Yayımlanan dosyalar, geçmiş tartışma sayfası revizyonlarından türetilmiş metinleri ve her kesit için kitle kaynaklı çalışmaya katılan kişilerin birden çok değerlendirmesini içeriyor. Analiz bireysel yanıtları kullandı; yeni değerlendirme üretmedi veya bir moderasyon sistemini sınamadı.[1][2]

Ana karşılaştırmamız yayımın rastgele örneklem grubundan başladı; tam 10 farklı ve eksiksiz değerlendirmesi olan kesitleri tuttu. Sayıyı 10’da sabitlemek her kesite, bir kişinin iki seçeneği de seçmesi için aynı sayıda fırsat verdi. Bu kural, yayımlanan 37.492 rastgele örneklem kesitinin 13.824’ünü de seçmiş oldu; dolayısıyla sonuç grubun tamamını anlatmıyor.[3]

Seçilen her kesit sayıya bir kez katkı verdi. Önce iki etiketten herhangi birinin bir yerde bulunup bulunmadığına, sonra ikisinin aynı kesit için tek kişinin yanıtında görünüp görünmediğine baktık. Beş kategori birbirini dışlıyor ve toplamları 13.824 ediyor. 155 kesitlik payda, tüm değerlendirmelerden veya kaynak kesitlerin tamamından değil, iki etiketi de taşıyan iki kategoriden geliyor.[4]

Eşleşmelere bakmadan önce örnekleme gruplarını, kapsama kuralını, yıl kontrolünü ve ana koşullu karşılaştırmada en az 100 kesit gereğini sabitledik. Gözlenen 155 bu şartı karşıladı. Zorunlu bir yüzde belirlemedik, kuralı sonucu kayıracak biçimde değiştirmedik ve engelleme olaylarıyla zenginleştirilmiş materyali rastgele grupla birleştirmedik.

Özgün araştırma zaten bireysel değerlendirmeleri kullanıyordu; sonraki çalışma her saldırı alanını çoğunluk kuralıyla ayrı ayrı birleştirdi. Bizim daha dar katkımız, sabit bir değerlendirme kümesinde iki seçeneği kimin verdiğini betimsel olarak karşılaştırmak. Bu, o çalışmaların yöntemlerini düzeltme iddiası değil. İndirilen dosyalar, ayrıca erişilebilen kamuya açık kaynak dosyalarla kullanılacak toplu sonuçları, yöntemleri ve yeniden üretim yönergelerini sunuyor.[6][7]

Sonraki incelemenin izlenmesini kolaylaştırın

Sosyal medya moderasyonu incelemesi devredilirken yararlı soru, her gözlemi kimin yaptığı ve neyi anlattığı. Bu seçili arşiv karşılaştırmasında, iki etiketli 155 kesitin 57’sinde ikisini birden seçen kişi yoktu. Yalnız iki etiket adını taşıyan özet, bu ilişkiyi kaybederdi.

Kişinin gözlemlerini, ilgili bağlamı ve son kararı bağlantılı tutun. Böylece işletme veya içerik üreticisi, kategori etiketine bütün incelemenin işini yüklemeden vakada ne olduğunu ve seçilen eylemin neden buna dayandığını açıklayabilir.

Kayıt gerekmez. Paket, anonim toplu sonuçları, yöntemleri, yeniden üretim yönergelerini ve tekrar kullanılabilir formu içeriyor. Özgün tartışma metni, revizyon kimlikleri, değerlendirme yapan kişilerin kimlikleri veya demografik bilgiler bulunmuyor. Özgün kamuya açık kaynak dosyalarına bağlantı verilen yayım üzerinden ayrıca erişilebilir.

Kaynaklar ve notlar

  1. Kaynak: Wikipedia Talk Labels: Personal Attacks, Figshare 6. sürüm, DOI 10.6084/m9.figshare.4054689.v6; Şubat 2017’de CC0 kapsamında yayımlandı. Üreticinin MD5 ve bağımsız hesaplanan SHA-256 kontrolleriyle attack_annotated_comments.tsv (dosya 7554634) ve attack_annotations.tsv (dosya 7554637) kullanıldı. Influence IQ seçimi, hesaplamaları ve yorumu 25 Ekim 2026’da (UTC) tamamladı. Çalışma yeni yorum toplamadı, yeni işaretleme üretmedi veya canlı bir sosyal platformu ölçmedi.
  2. Veriyi üretenler quoting_attack alanını, değerlendirme yapan kişinin başka yorumdaki saldırıyı alıntılama/aktarma algısı; recipient_attack alanını ise muhataba yöneltilen saldırı olarak tanımlıyor. Arayüz birden çok seçime izin veriyordu. Genel saldırı, kaynaktaki ayrı bir yanıt; bu analizde alt türlerden OR ile yeniden kurulmuş bir değer değil. Yayımlanan metin bir revizyonda yapılan eklemeleri birleştiriyor; değişiklik özeti, mutlaka tek tam gönderi veya eksiksiz konuşma değil. Tartışma ad alanları, örnekleme grupları ve modelin eğitim/geliştirme/test ayrımları belgelenmiş anlamlarını koruyor.
  3. Tam dosyalarda 115.864 benzersiz kesit, 1.365.217 benzersiz revizyon/kişi değerlendirme çifti ve değerlendirme yapan 4.053 kişi vardı. Yapısal kontrolde yinelenen çift, eşleşmeyen birleştirme kaydı, bozuk satır veya eksik/geçersiz bayrak değeri bulunmadı. Seçilebilirlik, kaynağın 5 bayrağının tamamında tam 10 farklı ve eksiksiz değerlendirme gerektiriyordu; belgelenmiş iki tartışma ad alanı ve tüm model grupları dâhildi, her kesit eşit ağırlıkla bir kez sayıldı. Ana rastgele grupta 37.492 kesitin 13.824’ü, ayrı seçilen engelleme olaylarıyla zenginleştirilmiş grupta 78.372’nin 42.383’ü kaldı. Aynı kişinin farklı kesitlerde bulunması geçerliydi; aynı metinleri birleştirme, bayraklar arası tutarlılık gerekçesiyle silme veya genel saldırıyı yeniden kodlama uygulanmadı.
  4. Koşulları karşılayan kesitte herhangi bir alıntı/aktarma seçimini Q, muhataba yönelik saldırı seçimini R göstersin. İki etiketin de varlığı, 10 değerlendirme içinde bir yerde en az bir Q ve bir R gerektirir. Aynı kişide bulunmaları için ayrıca tek revizyon/kişi yanıtında Q ve R olmalı; yalnız farklı kişilerde bulunma durumunda böyle bir yanıt yoktur. Ana koşullu payda 98 + 57 = 155; tam 98/155 ve 57/155 kesirleri %63,2 ve %36,8 olarak gösterilir. Yüzdeler tam rasyonel aritmetikle, yarım değerleri yukarı yuvarlayarak 1 ondalık basamağa hesaplanır. Eşleşmeleri hesaplamadan önce ana koşullu karşılaştırmada iki etiketli en az 100 kesit aradık; olumlu bir yüzde eşiği koymadık. Evren güven aralığı, anlamlılık testi, bağımsızlık iddiası veya doğruluk tahmini yapılmadı.
  5. Önceden belirtilen engelleme olaylarıyla zenginleştirilmiş duyarlılık kontrolü aynı tam 10 değerlendirme kuralını kullandı ve rastgele ana gruptan ayrı tutuldu. Beş sayı şöyleydi: iki etiketten hiçbiri 20.911; muhataba yönelik saldırı olmadan alıntı/aktarma 959; alıntı/aktarma olmadan muhataba yönelik saldırı 18.056; aynı kişinin ikisini de seçtiği 1.354; yalnız farklı kişilerin iki etiketi verdiği 1.103. Toplam 42.383, koşullu payda 2.457’ydi. Rastgele ana gruptan 2016’yı çıkarmak 13.809 kesit bıraktı; aynı sıradaki beş sayı 12.012 / 406 / 1.236 / 98 / 57 oldu. Koşullu 155 kesit ve 98/57 ayrımı değişmedi. Bunlar betimsel kontroller; evren düzeyinde bağımsız tekrar çalışmaları veya örnekleme gruplarının karşılaştırılabilir olduğunun kanıtı değil.
  6. Wulczyn, Thain ve Dixon’ın 2017 tarihli Ex Machina: Personal Attacks Seen at Scale çalışması, temel kitle kaynaklı değerlendirme ve modelleme çalışmasını ortaya koydu. Cécillon ve çalışma arkadaşlarının 2020 WAC makalesi, kişi-alan matrisini korudu ve saldırı alanlarını ayrı ayrı çoğunluk kuralıyla birleştirdi. Bunlar mevcut yöntemler; bu çalışmanın saptadığı hatalar değil. Karşılaştırmamız, çoğunluk kuralıyla belirlenen etiketlerin başarımını değil, 10 kişiden herhangi birinin etiket seçmesini ve aynı yanıtta iki seçimin bulunmasını kullanıyor. Influence IQ karşılaştırması, her seçili kesitte iki seçeneği aynı kişinin mi yoksa yalnız farklı kişilerin mi verdiğini sayıyor.
  7. Kaynak özeti 2001–2015’i, özgün makale 2004–2015’i anlatıyor; sabitlenmiş 6. sürüm dosyalarında ise 2001–2016 yıl değerleri var. Üreticinin oturum açmış olma durumu şeması 0/1 derken yayımlanan dosya False/True kullanıyor; ikili bayrak dizeleri 0.0/1.0. Belgelenmiş/gözlenmiş bu farkları neden atamadan koruduk. Ayrıştırıcı, etiket değerlerini yuvarlamadan veya zorla dönüştürmeden yayımlanan tam değerleri kabul ediyor. Paket kaynak sürümlerini, seçim kurallarını ve kamuya açık dosyalardan analizi yeniden üretme adımlarını belgeliyor.
  8. 10 kişilik iki inceleme grubu, İnceleyen A/B yanıtları ve devir seçimleri kurgusal öğretim örnekleri. Veri kümesindeki özgün tartışma metnini veya kimlikleri içermiyorlar. İki uydurma grupta da bir alıntı/aktarma ve bir muhataba yönelik saldırı seçimi var; ama yalnız ilkinde aynı kişinin iki seçimi bulunuyor. Form ve kavramsal çizimler pratik açıklamalar; gözlenmiş kaynak iş akışları, test edilmiş moderasyon kuralları veya daha iyi karar garantileri değil.

Tüm dil sürümleri doğrudan İngilizce kaynaktan çevriliyor. Her sürüm, İngilizce Wikipedia’nın aynı geçmiş veri kümesini ve seçili değerlendirmelerini anlatıyor. Çeviri yerel pazar bulguları oluşturmuyor. Analiz, yorum ve çevirilerden Influence IQ sorumlu.

İnceleme devri için kişileri ve rehberi planlayın