الاختبار متعدد المتغيرات: ما الذي يخبرك به اختبار المحتوى الإبداعي

قد يساعد تغيير العنوان والصورة معا على اختيار نسخة إبداعية نهائية. لكن التعلم عن كل عنصر يتطلب مقارنة مختلفة. وتبين تصاميم Upworthy التاريخية ما يمكن أن يظل متاحا حتى مع غياب بعض التوليفات.

تحليل Influence IQ للمجموعة الاستكشافية الفرعية من Upworthy Research Archive، التي تغطي تجارب على الموقع من أوائل 2013 إلى أبريل 2015. تضم المقارنة الرئيسية 188 اختبارا مؤهلا تغير فيها نص العنوان ومعرف الصورة معا. هذا جرد لتصاميم الاختبارات، وليس تحليلا للنقرات أو أداء الحملات.

الملخص

يمكن لتصميم متعدد المتغيرات غير مكتمل أن يحتفظ بمقارنات مستقلة للعناوين أو الصور. بين 188 اختبارا مؤهلا من Upworthy تغير فيها نص العنوان ومعرف الصورة معا، تضمن 31 جميع التوليفات. ومن الاختبارات غير المكتملة الأخرى البالغ عددها 157، تضمن 150 مقارنة واحدة على الأقل تثبت إما العنوان أو الصورة، وتضمن 75 النوعين معا. تصف الأعداد التوليفات الموجودة، ولا تبين ما إذا أنتجت الاختبارات نتائج أداء موثوقة أو مفيدة. [1]

تستخدم الدراسة مجموعة استكشافية فرعية تاريخية من تجارب على الموقع من أوائل 2013 إلى أبريل 2015، وتثبت النص المقتطف، وتستبعد من نطاقها الرئيسي فترة موثقة يحتمل أنها شهدت مشكلات في تخصيص المشاركين للنسخ. ويعطي إدراجها الدرس العام نفسه: يحتفظ 180 من 199 تصميما غير مكتمل بمقارنة واحدة كهذه على الأقل. وللمنشآت وصناع المحتوى، فالخيار العملي هو مطابقة التوليفات مع السؤال: اختيار نسخة إبداعية كاملة، أو مقارنة عنصر واحد، أو فحص كيفية عمل عنصرين (2) معا.

لدى فريقك نسختان (2) جاهزتان لحملة. تجمع إحداهما صورة منتج مع عنوان مباشر؛ وتستخدم الأخرى صورة مختلفة وعنوانا أقرب إلى المحادثة. إذا تفوقت إحداهما، فماذا تكون قد تعلمت؟

قد تساعد مقارنة منفذة جيدا على الاختيار بين النسختين النهائيتين، لكنها لا تبين وحدها أي تغيير صنع الفرق. يغير الاختبار متعدد المتغيرات أكثر من عنصر عبر مجموعة توليفات. والسؤال المفيد للبداية هو القرار الذي تريد أن تساعدك هذه التوليفات على اتخاذه.

لا يجيب عدد النسخ وحده عن السؤال. فإقران 4 عناوين بصورة واحدة يتيح للفريق مقارنة العناوين في ذلك السياق. ويعطي عنوانان (2) مع صورتين (2) أيضا 4 نسخ كاملة عند إدراج كل اقتران، لكنهما يتيحان مقارنات مختلفة. يوضح تدوين الاقترانات هذا التمييز قبل بدء الاختبار.

تضم النسخة الإبداعية النهائية عدة خيارات

رسم تصوري لبطاقات حملة جُمعت من وحدات منفصلة للنص والصورة.
رسم تصوري بلا كلمات. تمثل البطاقات مكونات إبداعية، وليست نسخ Upworthy فعلية أو نتائج مقيسة أو واجهة منتج.

كثيرا ما احتفظت التصاميم غير المكتملة بمقارنة مفيدة

فحصنا توليفات العناوين والصور داخل اختبارات Upworthy المنفردة على الموقع. ومن أصل 3,212 اختبارا استوفت قواعد النطاق الرئيسي، غير 188 العنصرين معا. وغيرت غالبية الاختبارات المتبقية أحدهما فقط. أبقينا كل اختبار منفصلا وحسبناه مرة واحدة، بصرف النظر عن عدد من ربما شاهدوه. [2]

تضمن 31 فقط من أصل 188 جميع التوليفات بين عناوينها ومعرفات صورها المرصودة. وكانت الاختبارات الأخرى البالغ عددها 157 شبكات غير مكتملة. وقد يبدو ذلك مقيدا إلى أن نسأل عن المقارنات الباقية داخلها. فمن بين هذه التصاميم البالغ عددها 157، تضمن 75 مقارنة للعناوين بالصورة نفسها ومقارنة للصور بالعنوان نفسه. وتضمن 30 النوع الأول وحده، و45 النوع الثاني وحده. ولم يتضمن 7 أيا منهما.

إجمالا، احتفظ 150 من أصل 157 تصميما غير مكتمل، أي 95.5%، بطريقة واحدة على الأقل لمقارنة عنصر مع تثبيت الآخر. لا يثبت ذلك أن لأي مقارنة زيارات كافية أو تخصيصا سليما أو نتيجة ذات معنى. لكنه يبين لماذا تعد عبارة «لم تُختبر كل التوليفات» سببا أوسع من اللازم لرفض تصميم اختبار.

يجمع الجدول التصاميم المكتملة وغير المكتملة. وعبر الاختبارات البالغ عددها 188 كلها، احتوى 106 على نوعي المقارنة، و30 على مقارنات العناوين وحدها، و45 على مقارنات الصور وحدها، و7 على لا شيء منهما. تعني «كلاهما» وجود مقارنة واحدة على الأقل من كل نوع، ولا تعني إمكان مقارنة كل عنوان أو صورة على أسس متساوية.

تشرح ورقة الأرشيف الأصلية بالفعل أن المحررين كانوا يختارون كثيرا نسخا كاملة دون اختبار كل توليفة ممكنة. وإسهامنا هو جرد المقارنات التي أبقتها هذه الخيارات متاحة. لا نستطيع إعادة بناء هدف كل محرر أو الحكم على مدى تحقيق التصميم له. [1]

احتفظت معظم التصاميم التي تغير العنصرين بمقارنة لمكون

188 اختبارا تاريخيا مؤهلا من Upworthy يتغير فيه نص العنوان ومعرف الصورة، مع تثبيت النص المقتطف والقيد الزمني المحدد. لكل اختبار وزن متساو.

اقرأ قيم الشكل
المقارنات الموجودة في التصميمالاختباراتنسبة من الاختبارات البالغ عددها 188
مقارنات العناوين والصور10656.4‎%‎
مقارنة العنوان فقط3016.0‎%‎
مقارنة الصورة فقط4523.9‎%‎
لا توجد مقارنة مستقلة لأي من العنصرين73.7‎%‎
تقسم الفئات الأربع (4) الاختبارات البالغ عددها 188 إلى مجموعات غير متداخلة. تعني «كلاهما» مقارنة عناوين واحدة على الأقل بالصورة نفسها ومقارنة صور واحدة على الأقل بالعنوان نفسه، لا كل المقارنات الممكنة. تصف الأعداد فرص التصميم، لا الآثار أو القوة الإحصائية أو نتائج الحملات.

3 تصاميم تجيب عن أسئلة مختلفة

تخيل استوديو خزف يروج لورشة في نهاية الأسبوع. لديه عنوانان (2): A، «اصنع أول وعاء خزفي لك»، وB، «اقض السبت على دولاب الخزف». تعرض الصورة 1 وعاء منجزا، والصورة 2 الدولاب. هذه خيارات توضيحية، وليست أمثلة من Upworthy أو نتائج حملة مقيسة. أبق العرض وبقية النص المعروض ثابتين أثناء النظر في 3 تصاميم محتملة.

أولا، تضم الشبكة الكاملة A مع الصورة 1، وA مع الصورة 2، وB مع الصورة 1، وB مع الصورة 2. يستطيع الفريق مقارنة العنوانين مع تثبيت الصورة 1، ثم إجراء مقارنة العنوانين نفسها مع الصورة 2. ويستطيع أيضا مقارنة الصورتين تحت كل عنوان. توفر 4 خلايا هذه الفرص، ولا تثبت مقدار الأدلة الذي سيُجمع في كل خلية.

ثانيا، تضم الشبكة الجزئية A مع الصورة 1، وB مع الصورة 1، وB مع الصورة 2. وتغيب A مع الصورة 2. يستطيع الفريق مقارنة A وB مع تثبيت الصورة 1، ثم مقارنة الصورتين بصورة منفصلة مع تثبيت العنوان B. ولا تمحو الخلية المفقودة هاتين المقارنتين (2).

لكن الشبكة الجزئية تترك سؤالا آخر دون إجابة بمقارنة مباشرة من 4 خلايا: هل سيبدو فرق A مقابل B نفسه مع الصورة 2؟ لا توجد نتيجة A مع الصورة 2 لاستخدامها. كما لا يستطيع الفريق تحديد أفضل النسخ الأربع (4) الممكنة بمجرد الاختيار بين النسخ الثلاث (3) التي رصدها. فقد تسلك النسخة غير المختبرة سلوكا مختلفا.

ثالثا، لا يضم التصميم القطري إلا A مع الصورة 1 وB مع الصورة 2. ولا يبقى أي عنصر ثابتا بين النسختين (2). وقد يدعم اختبار صالح الاختيار بين هاتين النسختين النهائيتين (2)، لكنه لا يحدد بصورة مستقلة إسهام العنوان أو الصورة من تلك المقارنة وحدها.

لا يوجد فائز عام بين هذه التصاميم. إذا كان الاستوديو يحتاج إلى الاختيار بين فكرتين معتمدتين (2) لإطلاق محدد، فقد تناسب مقارنة النسختين مهمته. وإذا أراد إعادة استخدام عنوان عبر صور، فهو يحتاج إلى أدلة ذات صلة بذلك الاختيار الأوسع. وتستحق التوليفات الإضافية مكانها حين تجيب عن سؤال لدى الفريق فعلا. [3]

3 تصاميم توضيحية تضم توليفات مختلفة

مثال خيالي لاستوديو خزف بعنوانين (2)، A وB، وصورتين (2)، 1 و2. هذه الخلايا رسوم لتصاميم الاختبارات، وليست مشاهدات من الأرشيف.

اقرأ قيم الشكل
توليفة العنوان والصورةشبكة كاملةشبكة جزئيةتصميم قطري
العنوان A + الصورة 1111
العنوان A + الصورة 2100
العنوان B + الصورة 1110
العنوان B + الصورة 2111
1 يعني مشمولا، و0 يعني غير مشمول. يضم التصميم الكامل الخلايا الأربع (4) كلها. ويحذف الجزئي A مع الصورة 2. ويقارن القطري نسختين (2) تختلفان في العنصرين معا. ولا تُسند قيم أداء.

وجود مقارنة في كل اتجاه لا يعني اختبار 2×2 كاملا

يجسد الأرشيف هذا التمييز. فمن التصاميم البالغ عددها 106 التي تضمنت نوعي المقارنة، خلا 74 حتى من مستطيل كامل واحد لعنوانين (2) وصورتين (2). لذا يمكن لتصميم أن يوفر مقارنة عناوين في موضع ومقارنة صور في موضع آخر، دون توفير الخلايا الأربع (4) اللازمة لمقارنة مباشرة بين فروقهما.

لنعد إلى الشبكة الجزئية للاستوديو. تطرح مقارنة A وB مع الصورة 1 سؤالا، وتطرح مقارنة الصورة 1 والصورة 2 تحت B سؤالا آخر. ولا تخبرنا أي منهما هل يتغير فرق العنوان نفسه عند تغير الصورة. يتعلق هذا السؤال الثالث بتفاعل: هل تعتمد العلاقة بين عنصر والاستجابة على العنصر الآخر؟

في مجموعة التصاميم البالغ عددها 188، احتوى 32 على مستطيل كامل واحد على الأقل. ويشمل ذلك الشبكات الكاملة البالغ عددها 31 كلها وشبكة غير مكتملة أكبر واحدة. يوفر المستطيل موضعا لتكوين مقارنة مباشرة للتفاعل. ولا يثبت وجود تفاعل، كما أنه ليس الأساس الوحيد الممكن لدراسة التفاعلات تحت تصاميم أخرى أو افتراضات نمذجة أخرى.

لفريق الحملة، ينتمي التمييز إلى الموجز قبل أن ينتمي إلى نموذج إحصائي. فطلب «قارن هذين العنوانين بهذه الصورة» أضيق من «اعثر على عنوان يعمل عبر صورنا». ولا ينبغي أن تتحول نتيجة تجيب عن السؤال الأول ضمنا إلى إجابة عن الثاني.

يعطي النطاق الزمني الأوسع درس التخطيط نفسه

يستبعد الجرد الرئيسي الاختبارات التي يتقاطع نطاق تواريخ إنشائها مع الفترة من 25 يونيو 2013 إلى 10 يناير 2014. حدد باحثو الأرشيف مشكلات محتملة في تخصيص المشاركين للنسخ خلالها. تهم هذه المخاوف أبحاث السبب والنتيجة، لكنها لا تجعل سجلات التوليفات غير صالحة لجرد بنيوي. لذا أعدنا المقارنة مع إدراج الفترة أيضا. [4]

يضم النطاق الأوسع 239 اختبارا يتغير فيه العنصران. يشمل 40 جميع التوليفات، بينما 199 غير مكتملة. ومن هذه التصاميم غير المكتملة، يحتفظ 180، أي 90.5%، بمقارنة واحدة على الأقل تثبت عنصرا، ويحتفظ 93، أي 46.7%، بالنوعين معا. والنسبتان المقابلتان في النطاق الرئيسي 95.5% و47.8%. تتغير النسب الدقيقة، لكن التصاميم غير المكتملة تظل تحتفظ بمقارنة محددة في كثير من الحالات.

فحصنا أيضا خيارا لمعالجة النص. يقارن التحليل الرئيسي نصوص العناوين والمقتطفات حرفيا. وتنتج إزالة المسافات من الأطراف ودمج المسافات المتكررة 189 اختبارا يتغير فيه العنصران، منها 31 شبكة كاملة، و108 تتضمن نوعي المقارنة، و32 تتضمن مستطيلا كاملا. يغير الفحص التصاميم المؤهلة، لذا تُعرض أعداده بمقامها الخاص. [5]

وسيط التغطية 50% في النطاقات الثلاثة (3) كلها. التغطية هي عدد توليفات العنوان والصورة المرصودة مقسوما على العدد الممكن باستخدام عناوين الاختبار ومعرفات صوره المرصودة. والوسيط وصف، لا درجة للجودة. ربما كانت توليفة مفقودة غير ذات صلة أو غير مناسبة أو خارج المقارنة التي قصدها المحرر؛ ولا يحسم الأرشيف سبب استبعادها.

تغيير النطاق يبقي التمييز بين التغطية والمقارنات

تحصي الأعمدة كلها الاختبارات، ويستخدم كل صف مقامه الخاص للاختبارات التي يتغير فيها العنصران. يبقي فحص معالجة النص القيد الزمني الرئيسي؛ ويبقي فحص كل الفترات معالجة النص الحرفية.

اقرأ قيم الشكل
نطاق التحليلاختبارات يتغير فيها العنصرانشبكات كاملةنوعا المقارنة معاشبكة 2×2 كاملة واحدة على الأقل
النطاق الرئيسي: نص حرفي وقيد زمني1883110632
نص موحد المسافات مع قيد زمني1893110832
نص حرفي مع إدراج كل الفترات2394013342
تتداخل هذه الأعمدة ولا يجوز جمعها. تضم كل شبكة كاملة نوعي المقارنة وشبكة 2×2 كاملة، لكن العكس لا يلزم. جرد كل الفترات بنيوي فقط؛ ولا يمثل إدراج فترة مخاطر التخصيص الموثقة إذنا بتحليل سببي.

أعد موجز الاختبار التالي حول القرار

لاستوديو الخزف، ابدأ بتحديد ما سيحدث بعد الاختبار. هل سيختار الفريق ترويجا نهائيا واحدا للورشة، أم يحتفظ بصورة ويعدل عنوانها، أم ينقل عنوانا إلى عدة تصاميم مستقبلية؟ يتطلب كل قرار مجموعة مختلفة من المقارنات. ولا تكون شبكة أكبر تلقائيا استخداما أفضل لجهد الفريق.

إذا تعلق القرار بنسخ كاملة، فاذكرها دون الوعد بتفسير كل مكون. وإذا تعلق بعنوان، فحدد الصورة التي ستبقى ثابتة. وإذا احتاج الفريق إلى فحص تغير فرق العنوان عبر صورتين (2)، فأدرج التوليفات الأربع (4) المعنية أو استخدم تصميما بديلا له ما يبرره. وأبق ذلك منفصلا عن تحديد مقياس الاستجابة والتخصيص وفترة الرصد.

تحقق من منطقية التوليفات المقترحة قبل إضافتها. قد يناسب عنوان خاص بعرض صورة منتج واحدة فقط. وإنشاء اقتران غير مناسب لمجرد ملء الشبكة سيغير المهمة. ويمكن للفريق بدلا من ذلك تضييق السؤال أو تطوير نسخ يمكن إقرانها منطقيا. تفيد الشبكة الكاملة حين تخدم مقارناتها القرار، لا لأن الجدول الممتلئ يبدو أشمل.

استخدم الحقول التالية كموجز تخطيط قصير. النص بين الأقواس لحملتك أنت، وليس نتيجة من الدراسة.

القرار بعد الاختبار: [اختيار نسخة كاملة؛ مقارنة عنصر مسمى في سياق محدد؛ فحص توليفة محددة من العناصر].

العناصر والنسخ: [نصوص العناوين الدقيقة؛ ملفات الصور أو معرفاتها الثابتة؛ أي محتوى آخر متغير].

النسخ المشمولة: [أزواج العنوان والصورة التي ستُعرض فعليا].

المقارنات اللازمة: [الأزواج التي تثبت عنصرا؛ الخلايا الأربع (4) التي تدعم سؤال التفاعل، إن كان ذا صلة].

خطة الأدلة: [مقياس الاستجابة؛ الجمهور وكيفية تخصيصه للنسخ؛ شروط التعرض؛ الرصد المخطط وقاعدة المراجعة].

حدود الاستنتاج: [ما قد يدعمه التصميم؛ التوليفات أو السياقات غير المختبرة التي تبقى خارج القرار].

مثلا، يستطيع استوديو يستخدم التصميم الجزئي من 3 خلايا كتابة: «سنقارن العناوين مع الصورة 1، ونقارن الصور مع العنوان B. ولا نختبر العنوان A مع الصورة 2». تبقي الجملة سؤالين مفيدين (2) والمقارنة الغائبة ظاهرين دون الحكم بعدم كفاية التصميم.

يستطيع صانع محتوى يعد عملا لعميل استخدام التمييز نفسه عند مناقشة صورة مصغرة وعنوان معدلين. والسؤال هو النسخة أو العنصر الذي يريد العميل اختياره. لكن أعدادنا تأتي من موقع ناشر، ولا تثبت كيف تخصص منصة اجتماعية حالية النسخ الإبداعية أو تقيسها.

أبق السؤال بجانب التوليفات

3 صوان مصورة تعرض أزواجا إبداعية نهائية مختلفة، ومقارنة عناوين بالصورة نفسها، وشبكة توليفات من 4 بطاقات.
  1. اختر نسخة إبداعية نهائية

    قارن النسخ المرشحة للقرار.

  2. قارن عنصرا واحدا

    أبق العنصر الآخر ثابتا في المقارنة التي تحتاج إليها.

  3. افحص الاقتران

    أدرج التوليفات اللازمة للسؤال عما إذا كان فرق العنوان يتغير عبر الصور.

رسم تصوري لثلاثة خيارات تخطيط (3). لا تحمل البطاقات نتائج أداء؛ وتُذكر توليفات المثال التطبيقي الدقيقة في الجدول المهيأ لإتاحة الوصول.

كيف أُعد جرد تصاميم الاختبارات

المصدر هو الملف الاستكشافي المنشور للعامة من Upworthy Research Archive، الذي وصفه J. Nathan Matias وKevin Munger وMarianne Aubin Le Quere وCharles Ebersole. يضم 22,666 صفا لنسخ كاملة، مجمعة في 4,873 اختبارا من الأرشيف التاريخي 2013–2015. استخدمنا العنوان ومعرف الصورة والمقتطف ومعرف الاختبار والطابع الزمني للإنشاء وفهرس الصف في الأرشيف. ولم نستخدم النقرات أو مرات الظهور أو اختيارات المحررين. [1] [6]

سبق فحص جدوى بنيوي خطة المراجعة النهائية وأسهم في سؤالها. لذا فالمراجعة إعادة تحليل استكشافية، وليست دراسة تأكيدية مسجلة مسبقا. تبقي القواعد المحددة الاختبارات ذات الحقول البنيوية الصالحة للاستخدام، وتطبق القيد الزمني الرئيسي، وتشترط تطابق النص المقتطف بين نسخها. ويعد قيد المقتطف تحفظيا لأن الورقة ووثائق الأرشيف تختلفان بشأن ظهور ذلك الحقل للجمهور. [6]

يبين جدول الاختيار استبعادات متتابعة، ثم تفصيلا للاختبارات المؤهلة. تفتقر 5 اختبارات إلى عنوان أو معرف صورة؛ ثم يخالف 1,050 قاعدة النطاق الزمني، وتختلف المقتطفات في 606. تشمل الاختبارات المحتفظ بها البالغ عددها 3,212 عدد 1,624 يتغير فيه العنوان وحده، و1,078 يتغير فيه معرف الصورة وحده، و188 يتغير فيه العنصران، و322 بتوليفة مرصودة واحدة. وقد تظل الفئة الأخيرة تضم عدة صفوف من المصدر.

داخل الاختبار، تُحسب أزواج العنوان والصورة المتطابقة المتكررة مرة واحدة كخلايا تصميم. وتضم 5 من الاختبارات التي يتغير فيها العنصران البالغ عددها 188 خلايا متكررة. تشمل الشبكة الكاملة كل اقتران بين نصوص العناوين ومعرفات الصور المرصودة في الاختبار. ولا تعني النصوص المختلفة بالضرورة أفكارا مختلفة، ولا معرفات الصور المختلفة صورا مختلفة بصريا؛ فملفات الصور غير متاحة.

تحصي النتائج التصاميم بأوزان متساوية، لا الأشخاص أو مرات الظهور أو المنشآت. ولا تثبت ممارسات التسويق الحالية أو الأداء أو القوة الإحصائية. وتوفر التنزيلات النتائج المجمعة وطريقة إعادة الإنتاج، بما فيها فحصا النطاق، لتمكين القراء من فحص الفرق بين توليفة مرصودة واستنتاج مستمد منها. [7]

تبدأ المقارنة الرئيسية بعدد 188 من أصل 3,212 اختبارا مؤهلا

الاختيار من الاختبارات البالغ عددها 4,873 في الملف الاستكشافي العام. تطبق الاستبعادات بالترتيب المعروض. وتقسم فئات التصميم النهائية الأربع (4) الاختبارات المؤهلة البالغ عددها 3,212 إلى مجموعات غير متداخلة.

عرض مراحل الاختيار وجميع الفئات المؤهلة
اقرأ قيم الشكل
مرحلة الاختيار أو فئة التصميم المؤهلةالاختبارات
الاختبارات الاستكشافية الأولية4,873
مستبعد: عنوان أو معرف صورة مفقود5
مستبعد: فترة تواريخ الإنشاء المحددة1,050
مستبعد لاحقا: نص مقتطف متغير606
مؤهل بعد الاستبعادات3,212
مؤهل: العنوان متغير والصورة ثابتة1,624
مؤهل: الصورة متغيرة والعنوان ثابت1,078
مؤهل: العنوان والصورة متغيران188
مؤهل: توليفة مرصودة واحدة322
اقرأ ذلك كتتابع ثم تفصيل: 4,873 ناقص 5 ناقص 1,050 ناقص 606 يساوي 3,212. ويبلغ مجموع الاختبارات التي يتغير فيها العنوان وحده وعددها 1,624، والصورة وحدها وعددها 1,078، والعنصران وعددها 188، والتوليفة الواحدة وعددها 322، عدد 3,212. لا تجمع الصفوف كلها. ولم تفشل اختبارات في فحوص الحد الأدنى لنسخ الاختبار أو تحليل التواريخ.

يشمل CSV عدد 41 قيمة من الأشكال الأربعة (4)، مع تمييز خلايا التصميم التوضيحية عن الأعداد والنسب المرصودة. ويضم ZIP نتائج مجمعة وسجلات اختبار بنيوية وشفرة تحليل. وتشمل الحزمة تعليمات مترجمة لإعادة الإنتاج؛ ونزل الأرشيف العام الأصلي منفصلا. لا تشمل الملفات نتائج النقرات أو مرات الظهور.

المصادر والملاحظات

  1. Matias, J. Nathan؛ Munger, Kevin؛ Aubin Le Quere, Marianne؛ وEbersole, Charles (2021)، «Upworthy Research Archive، سلسلة زمنية من 32,487 تجربة في الإعلام الأمريكي»، Scientific Data 8، 195. DOI: 10.1038/s41597-021-00934-7. يستخدم تحليل Influence IQ المجموعة الاستكشافية الفرعية ووصف المصدر المصحح. وتشرح الورقة الأصلية نوعيا أن المحررين كثيرا ما لم يختبروا جميع توليفات العناوين والصور.
  2. مقام الاختبارات التي يتغير فيها العنصران في النطاق الرئيسي: 188 اختبارا. الشبكات الكاملة: 31؛ وغير المكتملة: 157. تضم المجموعة غير المكتملة 75 بنوعي المقارنة، و30 بمقارنات العناوين وحدها، و45 بمقارنات الصور وحدها، و7 دون أي منهما. لذلك يحتفظ 150/157 = 95.5% بنوع واحد على الأقل. تشير «المقارنة» إلى فرصة بنيوية، لا أثر مقدر أو تجربة ثبتت صلاحيتها.
  3. تصاميم الاستوديو الثلاثة (3) توضيحية. يضم التصميم الكامل بعاملين (2) ومستويين (2) التوليفات الأربع (4) كلها. ويحذف المثال الجزئي A مع الصورة 2؛ ولا يبقي المثال القطري إلا A مع الصورة 1 وB مع الصورة 2. لا يثبت تصميم من 4 خلايا وحده جودة التخصيص أو كفاية حجم العينة أو تفاعلا ذا معنى. ويشرح دليل NIST التصاميم العاملية الكاملة وتوليفاتها.
  4. يحدد تصحيح الأرشيف في يونيو 2024 مشكلات محتملة في التوزيع العشوائي من 25 يونيو 2013 إلى 10 يناير 2014، وينصح بعدم استخدام تلك الفترة للأبحاث السببية. ويحفظ صراحة استخدامات بحثية أخرى. ويستبعد تحليلنا الرئيسي كل اختبار يتقاطع نطاق تواريخ إنشائه مع الفترة؛ ولا تثبت الطوابع الزمنية تواريخ التعرض، كما أن منطقتها الزمنية غير معروفة. ويبقي الفحص البنيوي لكل الفترات هذه السجلات.
  5. يزيل فحص الحساسية للمسافات الفراغات في بداية نصوص العناوين والمقتطفات ونهايتها، ويدمج الفراغات الداخلية المتكررة، مع حفظ حالة الأحرف والترقيم. تصبح 8 اختبارات مؤهلة؛ ويتغير التصنيف البنيوي لاختبار مؤهل واحد مشترك. وتُعاد حسابات المقامات بدلا من تثبيتها عند 188. يضم النطاق الرئيسي ونطاق المسافات ونطاق كل الفترات 188 و189 و239 اختبارا يتغير فيه العنصران، على الترتيب.
  6. ملف CSV الاستكشافي المثبت هو upworthy-archive-exploratory-packages-03.12.2020.csv، الإصدار 1 من ملف OSF، وحجمه 14,260,949 بايت. وبصمة SHA-256 له هي 8368313b060f4015a0c6fb34e6d788163cee29554144aba9390b14922eb9d8ce. لا يحتوي الملف على علامة المشكلات المحدثة، لذا يُشتق القيد الزمني بصورة منفصلة. تصف الورقة النص المقتطف بأنه معروض؛ بينما تسرده وثائق الأرشيف ضمن الحقول التي لا يُعتقد أنها عُرضت. ويتجنب تثبيت المقتطف إسناد الفروق إلى ذلك الحقل المختلف عليه.
  7. تنشر Cornell University أرشيف Upworthy Research Archive والشفرة والوثائق المرتبطة به بموجب Creative Commons Attribution 4.0 International. تقدم Influence IQ هذا التحليل البنيوي المشتق؛ ولا يُفهم منه تأييد Upworthy أو مؤلفي الأرشيف. تشمل حزمة التحليل مخرجات مجمعة وسجلات بنيوية للاختبارات وشفرة وتعليمات مترجمة لإعادة الإنتاج. احصل على البيانات العامة الأصلية من الأرشيف بصورة منفصلة.

النسخة الإنجليزية من المقال هي نسخة المصدر. تصف جميع النسخ اللغوية المجموعة الاستكشافية التاريخية نفسها من Upworthy والتصاميم التوضيحية نفسها. ولا تحول الترجمة النتائج إلى معيار لسوق محلي أو منصة حالية.

اربط سؤال الاختبار بخطة الحملة