मल्टीवेरिएट टेस्टिंग: आपका क्रिएटिव टेस्ट क्या बता सकता है
हेडलाइन और चित्र साथ बदलने से तैयार क्रिएटिव चुनने में मदद मिल सकती है. हर तत्व के बारे में जानने के लिए अलग तुलना चाहिए. Upworthy के ऐतिहासिक डिज़ाइन दिखाते हैं कि कुछ संयोजन न होने पर भी कितनी तुलनाएँ संभव रह सकती हैं.
Influence IQ ने Upworthy Research Archive के खोजपरक उपसमूह का विश्लेषण किया. इसमें 2013 की शुरुआत से अप्रैल 2015 तक के वेबसाइट प्रयोग हैं. मुख्य तुलना में 188 पात्र टेस्ट हैं जिनमें हेडलाइन का पाठ और चित्र पहचानकर्ता, दोनों बदले. यह डिज़ाइन की सूची है, क्लिक या अभियान प्रदर्शन का विश्लेषण नहीं.
सार
अधूरा मल्टीवेरिएट डिज़ाइन हेडलाइन या चित्र की अलग तुलनाएँ फिर भी बचा सकता है. हेडलाइन पाठ और चित्र पहचानकर्ता, दोनों बदलने वाले 188 पात्र Upworthy टेस्ट में 31 में हर संयोजन था. बाकी 157 में से 150 में कम-से-कम 1 तुलना थी जिसमें हेडलाइन या चित्र स्थिर था; 75 में दोनों तरह की तुलनाएँ थीं. ये संख्याएँ मौजूद संयोजन बताती हैं, यह नहीं कि टेस्ट ने भरोसेमंद या उपयोगी प्रदर्शन परिणाम दिए. [1]
अध्ययन 2013 की शुरुआत से अप्रैल 2015 तक के वेबसाइट प्रयोगों का ऐतिहासिक खोजपरक उपसमूह लेता है, अंश-पाठ स्थिर रखता है और समूह-आवंटन में संभावित समस्याओं की दर्ज अवधि को मुख्य दायरे से बाहर करता है. उस अवधि को जोड़ने पर भी व्यापक सीख वही है: 199 अधूरे डिज़ाइन में से 180 में ऐसी कम-से-कम 1 तुलना रहती है. व्यवसायों और क्रिएटर के लिए व्यावहारिक चुनाव है कि संयोजन सवाल से मेल खाएँ: पूरा क्रिएटिव चुनना, 1 तत्व की तुलना करना या देखना कि 2 तत्व साथ कैसे काम करते हैं.
आपकी टीम के पास अभियान के 2 संस्करण तैयार हैं. पहले में उत्पाद का चित्र और सीधी हेडलाइन है; दूसरे में अलग चित्र है और हेडलाइन का अंदाज़ ज़्यादा बातचीत जैसा है. किसी 1 का प्रदर्शन बेहतर हो, तो आपने क्या सीखा होगा?
अच्छी तरह चलाई गई तुलना उन तैयार संस्करणों में चुनाव करने में मदद कर सकती है. अपने-आप वह यह नहीं बताती कि किस बदलाव ने अंतर पैदा किया. मल्टीवेरिएट टेस्टिंग संयोजनों के समूह में 1 से ज़्यादा तत्व बदलती है. उपयोगी शुरुआती सवाल है कि आप उन संयोजनों से क्या तय करना चाहते हैं.
केवल संस्करणों की संख्या जवाब नहीं देती. 1 चित्र के साथ 4 हेडलाइन संस्करण उस स्थिति में हेडलाइन की तुलना देते हैं. सभी जोड़ियाँ हों, तो 2 हेडलाइन और 2 चित्र भी 4 पैकेज देते हैं, लेकिन उनसे अलग तुलनाएँ मिलती हैं. जोड़ियाँ लिखने से टेस्ट शुरू होने से पहले अंतर दिख जाता है.
तैयार क्रिएटिव में कई चुनाव जुड़े होते हैं

अधूरे डिज़ाइन में अक्सर उपयोगी तुलना बची रही
हमने हर Upworthy वेबसाइट टेस्ट के भीतर हेडलाइन और चित्र के संयोजन देखे. मुख्य दायरे के नियम पूरे करने वाले 3,212 टेस्ट में से 188 ने दोनों तत्व बदले. बाकी अधिकतर ने इनमें से केवल 1 बदला. हर टेस्ट अलग रखा और कितने भी लोगों ने देखा हो, उसे 1 बार गिना. [2]
188 में से केवल 31 में देखी गई हेडलाइन और चित्र पहचानकर्ताओं का हर संयोजन था. बाकी 157 अधूरे ग्रिड थे. यह सीमा लगती है, जब तक आप न पूछें कि उनमें कौन-सी तुलनाएँ बचीं. उन 157 डिज़ाइन में से 75 में समान चित्र के साथ हेडलाइन और समान हेडलाइन के साथ चित्र, दोनों की तुलना थी. 30 में केवल पहली और 45 में केवल दूसरी तरह की तुलना थी. 7 में दोनों में से कोई नहीं थी.
मिलाकर 157 अधूरे डिज़ाइन में से 150, यानी 95.5%, ने दूसरे तत्व को स्थिर रखकर किसी तत्व की तुलना का कम-से-कम 1 तरीका रखा. इससे पर्याप्त ट्रैफ़िक, सही समूह-आवंटन या अर्थपूर्ण परिणाम साबित नहीं होता. इससे यह ज़रूर दिखता है कि “हर संयोजन नहीं जाँचा गया” किसी डिज़ाइन को ख़ारिज करने की बहुत व्यापक वजह है.
तालिका पूरे और अधूरे डिज़ाइन साथ रखती है. सभी 188 में 106 में दोनों तरह की तुलना, 30 में केवल हेडलाइन, 45 में केवल चित्र और 7 में दोनों में से कोई तुलना नहीं थी. “दोनों” का मतलब हर तरह की कम-से-कम 1 तुलना है. इसका मतलब यह नहीं कि हर हेडलाइन या चित्र समान शर्तों पर तुलना योग्य है.
मूल आर्काइव शोधपत्र पहले ही बताता है कि संपादक हर संभव संयोजन जाँचे बिना अक्सर पैकेज चुनते थे. हमारा योगदान उन चुनावों के बाद उपलब्ध बची तुलनाओं की यह सूची है. हम हर संपादक का उद्देश्य दोबारा नहीं जान सकते और न तय कर सकते हैं कि डिज़ाइन ने उसे पूरा किया या नहीं. [1]
दोनों तत्व बदलने वाले अधिकतर डिज़ाइन में किसी घटक की तुलना बची रही
हेडलाइन पाठ और चित्र पहचानकर्ता बदलने वाले 188 पात्र ऐतिहासिक Upworthy टेस्ट; अंश-पाठ स्थिर और तय तारीख-सीमा लागू है. हर टेस्ट का वज़न समान है.
| डिज़ाइन में मौजूद तुलनाएँ | टेस्ट | 188 टेस्ट में हिस्सा |
|---|---|---|
| हेडलाइन और चित्र की तुलनाएँ | 106 | 56.4% |
| केवल हेडलाइन की तुलना | 30 | 16.0% |
| केवल चित्र की तुलना | 45 | 23.9% |
| किसी भी घटक की तुलना नहीं | 7 | 3.7% |
3 डिज़ाइन अलग सवालों के जवाब देते हैं
कल्पना करें कि मिट्टी के बर्तनों का स्टूडियो सप्ताहांत की कार्यशाला का प्रचार कर रहा है. उसके पास 2 हेडलाइन हैं: A, “अपना पहला सिरेमिक कटोरा बनाएँ,” और B, “शनिवार कुम्हार के चाक पर बिताएँ.” चित्र 1 में तैयार कटोरा और चित्र 2 में चाक है. ये समझाने के लिए चुने गए विकल्प हैं, Upworthy उदाहरण या मापे गए अभियान परिणाम नहीं. 3 संभावित डिज़ाइन देखते समय ऑफ़र और बाकी दिखाया गया पाठ समान रखें.
पहले पूरे ग्रिड में A के साथ चित्र 1, A के साथ चित्र 2, B के साथ चित्र 1 और B के साथ चित्र 2 हैं. टीम चित्र 1 स्थिर रखकर हेडलाइन की तुलना कर सकती है, फिर चित्र 2 के साथ वही तुलना. हर हेडलाइन को स्थिर रखकर चित्रों की तुलना भी कर सकती है. 4 खाने ये अवसर देते हैं; वे नहीं बताते कि हर खाने में कितना प्रमाण जुटेगा.
दूसरे, आंशिक ग्रिड में A के साथ चित्र 1, B के साथ चित्र 1 और B के साथ चित्र 2 हैं. A के साथ चित्र 2 नहीं है. टीम चित्र 1 स्थिर रखकर A और B की तुलना कर सकती है. अलग से हेडलाइन B स्थिर रखकर चित्रों की तुलना कर सकती है. गायब खाना इन 2 तुलनाओं को मिटाता नहीं है.
लेकिन आंशिक ग्रिड सीधे 4-खाने वाली तुलना से एक और सवाल का जवाब नहीं देता: क्या चित्र 2 के साथ A बनाम B का अंतर वही रहेगा? A के साथ चित्र 2 वाले संयोजन का कोई परिणाम उपलब्ध नहीं है. देखे गए 3 पैकेज में चुनाव करके सभी 4 संभावित पैकेज में सर्वश्रेष्ठ भी नहीं पहचाना जा सकता. बिना जाँचा पैकेज अलग व्यवहार कर सकता है.
तीसरे, विकर्ण डिज़ाइन में केवल A के साथ चित्र 1 और B के साथ चित्र 2 हैं. 2 पैकेज के बीच कोई तत्व स्थिर नहीं रहता. वैध टेस्ट फिर भी उन 2 तैयार संस्करणों में चुनाव का आधार दे सकता है. अकेले उस तुलना से हेडलाइन या चित्र का योगदान अलग नहीं पहचाना जा सकता.
इनमें से कोई डिज़ाइन हर स्थिति में सबसे अच्छा नहीं है. स्टूडियो को किसी ख़ास लॉन्च के लिए 2 मंज़ूर विचारों में चुनाव करना हो, तो पैकेज की तुलना काम आ सकती है. हेडलाइन को अलग चित्रों के साथ दोबारा इस्तेमाल करना हो, तो उस व्यापक चुनाव के लिए उपयुक्त प्रमाण चाहिए. अतिरिक्त संयोजन तभी अपनी जगह बनाते हैं जब टीम के असली सवाल का जवाब दें. [3]
3 उदाहरण वाले डिज़ाइन में अलग संयोजन हैं
काल्पनिक बर्तन-स्टूडियो उदाहरण: 2 हेडलाइन A और B तथा 2 चित्र, 1 और 2. ये खाने डिज़ाइन समझाते हैं, आर्काइव के अवलोकन नहीं हैं.
| हेडलाइन और चित्र का संयोजन | पूरा ग्रिड | आंशिक ग्रिड | विकर्ण डिज़ाइन |
|---|---|---|---|
| हेडलाइन A + चित्र 1 | 1 | 1 | 1 |
| हेडलाइन A + चित्र 2 | 1 | 0 | 0 |
| हेडलाइन B + चित्र 1 | 1 | 1 | 0 |
| हेडलाइन B + चित्र 2 | 1 | 1 | 1 |
दोनों तरह की तुलना होना पूरे 2×2 टेस्ट का प्रमाण नहीं है
आर्काइव यह अंतर साफ़ दिखाता है. दोनों तरह की तुलना वाले 106 डिज़ाइन में से 74 में 2 हेडलाइन और 2 चित्र का 1 भी पूरा आयत नहीं था. इसलिए किसी डिज़ाइन में कहीं हेडलाइन और कहीं अलग जगह चित्र की तुलना हो सकती है, फिर भी उनके अंतरों की सीधी तुलना के लिए ज़रूरी 4 खाने न हों.
स्टूडियो का आंशिक ग्रिड फिर लें. चित्र 1 के साथ A और B की तुलना एक सवाल पूछती है. B के तहत चित्र 1 और चित्र 2 की तुलना दूसरा पूछती है. कोई नहीं बताती कि चित्र बदलने पर हेडलाइन का अंतर ख़ुद बदलता है या नहीं. तीसरा सवाल इंटरैक्शन का है: किसी तत्व का प्रतिक्रिया से संबंध क्या दूसरे तत्व पर निर्भर करता है.
188 डिज़ाइन के समूह में 32 में कम-से-कम 1 पूरा आयत था. इनमें सभी 31 पूरे ग्रिड और 1 बड़ा अधूरा ग्रिड शामिल हैं. ऐसा आयत इंटरैक्शन की सीधी तुलना की गुंजाइश देता है. इससे इंटरैक्शन का होना साबित नहीं होता और न यह दूसरे डिज़ाइन या मॉडल की मान्यताओं के तहत इंटरैक्शन जाँचने का अकेला आधार है.
अभियान टीम के लिए यह अंतर सांख्यिकीय मॉडल से पहले ब्रीफ़ में होना चाहिए. “इस चित्र के साथ इन 2 हेडलाइन की तुलना करें” का अनुरोध “हमारे चित्रों पर काम करने वाली हेडलाइन खोजें” से सीमित है. पहले सवाल का परिणाम चुपचाप दूसरे का जवाब नहीं बनना चाहिए.
व्यापक तारीख-अवधि भी योजना की वही सीख देती है
मुख्य सूची उन टेस्ट को बाहर रखती है जिनकी निर्माण-तारीखों की अवधि 25 जून 2013 से 10 जनवरी 2014 तक के अंतराल को छूती है. आर्काइव शोधकर्ताओं ने उस अवधि में समूह-आवंटन की संभावित समस्याएँ पहचानीं. कारण-परिणाम के शोध में ये चिंताएँ मायने रखती हैं; संरचनात्मक सूची के लिए संयोजन रिकॉर्ड अनुपयोगी नहीं हो जाते. इसलिए हमने उस अवधि को शामिल करके भी तुलना दोहराई. [4]
व्यापक दायरे में दोनों तत्व बदलने वाले 239 टेस्ट हैं. 40 में हर संयोजन है और 199 अधूरे हैं. उन अधूरे डिज़ाइन में 180, यानी 90.5%, में 1 तत्व स्थिर रखने वाली कम-से-कम 1 तुलना रहती है; 93, यानी 46.7%, में दोनों तरह की तुलना है. मुख्य दायरे के संबंधित आँकड़े 95.5% और 47.8% हैं. सटीक हिस्से बदलते हैं, लेकिन अधूरे डिज़ाइन में अक्सर एक ख़ास तुलना बची रहती है.
हमने पाठ संभालने का चुनाव भी जाँचा. मुख्य विश्लेषण हेडलाइन और अंश-पाठ की स्ट्रिंग का सटीक मिलान करता है. पाठ के शुरू और अंत की खाली जगह हटाकर और दोहराई खाली जगह को एक करने पर दोनों तत्व बदलने वाले 189 टेस्ट मिलते हैं; 31 पूरे ग्रिड, 108 दोनों तरह की तुलना वाले और 32 पूरे आयत वाले हैं. इससे पात्र डिज़ाइन बदलते हैं, इसलिए संख्याएँ उस दायरे के अपने हर के साथ दिखाई गई हैं. [5]
सभी 3 दायरों में माध्यिका कवरेज 50% है. कवरेज निकालने के लिए देखे गए हेडलाइन-चित्र संयोजनों की संख्या को उसी टेस्ट की देखी गई हेडलाइन और चित्र पहचानकर्ताओं से संभव संयोजनों की संख्या से भाग देते हैं. माध्यिका एक विवरण है, गुणवत्ता-अंक नहीं. गायब संयोजन अप्रासंगिक, अनुपयुक्त या संपादक की इच्छित तुलना से बाहर हो सकता था; आर्काइव उसकी अनुपस्थिति की वजह तय नहीं करता.
दायरा बदलने पर भी कवरेज और तुलनाओं का अंतर रहता है
सभी कॉलम टेस्ट गिनते हैं; हर पंक्ति अपने दायरे के दोनों तत्व बदलने वाले टेस्ट को गणना का आधार बनाती है. पाठ-संभाल जाँच मुख्य तारीख-सीमा रखती है; सभी-अवधि जाँच सटीक पाठ-संभाल रखती है.
| विश्लेषण का दायरा | दोनों तत्व बदलने वाले टेस्ट | पूरे ग्रिड | दोनों तुलना-प्रकार | कम-से-कम 1 पूरा 2×2 |
|---|---|---|---|---|
| मुख्य दायरा: सटीक पाठ, तारीख-सीमा | 188 | 31 | 106 | 32 |
| खाली जगह एकरूप करने के बाद का पाठ, तारीख-सीमा | 189 | 31 | 108 | 32 |
| सटीक पाठ, सभी अवधियाँ शामिल | 239 | 40 | 133 | 42 |
अगला टेस्ट ब्रीफ़ निर्णय के अनुसार लिखें
बर्तनों के स्टूडियो के लिए पहले तय करें कि टेस्ट के बाद क्या होगा. टीम कार्यशाला के प्रचार का 1 तैयार संस्करण चुनेगी, 1 चित्र रखकर उसकी हेडलाइन बदलेगी या हेडलाइन आगे कई डिज़ाइन में ले जाएगी? हर निर्णय को अलग तुलनाएँ चाहिए. बड़ा ग्रिड अपने-आप टीम की मेहनत का बेहतर इस्तेमाल नहीं है.
निर्णय तैयार पैकेज का हो, तो हर घटक की व्याख्या का वादा किए बिना वे पैकेज लिखें. निर्णय हेडलाइन का हो, तो स्थिर रहने वाला चित्र बताएँ. टीम को देखना हो कि 2 चित्रों में हेडलाइन का अंतर बदलता है या नहीं, तो संबंधित 4 संयोजन शामिल करें या उचित कारण वाला वैकल्पिक डिज़ाइन लें. इसे प्रतिक्रिया का माप, आवंटन और देखने की अवधि तय करने से अलग रखें.
जोड़ने से पहले देखें कि प्रस्तावित संयोजन उचित हैं या नहीं. ऑफ़र-विशेष की हेडलाइन केवल 1 उत्पाद चित्र के साथ उचित हो सकती है. ग्रिड भरने के लिए अनुपयुक्त जोड़ी बनाना काम का उद्देश्य बदल देगा. टीम सवाल सीमित कर सकती है या ऐसे संस्करण बना सकती है जिन्हें उचित रूप से साथ रखा जा सके. पूरा ग्रिड तब उपयोगी है जब उसकी तुलनाएँ निर्णय के काम आएँ, केवल भरी तालिका को अधिक गहन दिखाने के लिए नहीं.
नीचे के फ़ील्ड से योजना का छोटा ब्रीफ़ बनाएँ. कोष्ठक वाला पाठ आपके अभियान के लिए है, इस अध्ययन का निष्कर्ष नहीं.
टेस्ट के बाद का निर्णय: [तैयार पैकेज चुनें; तय परिस्थिति में नामित तत्व की तुलना करें; तत्वों का निश्चित संयोजन जाँचें].
तत्व और संस्करण: [सटीक हेडलाइन पाठ; चित्र फ़ाइलें या स्थिर पहचानकर्ता; अन्य बदलती सामग्री].
शामिल पैकेज: [वे हेडलाइन-चित्र जोड़ियाँ जो वास्तव में दिखाई जाएँगी].
ज़रूरी तुलनाएँ: [कौन-सी जोड़ियाँ किसी तत्व को स्थिर रखती हैं; संबंधित होने पर इंटरैक्शन के सवाल का आधार कौन-से 4 खाने हैं].
प्रमाण की योजना: [प्रतिक्रिया का माप; दर्शक और समूह-आवंटन; दिखाए जाने की शर्तें; नियोजित अवलोकन और समीक्षा नियम].
निष्कर्ष की सीमा: [डिज़ाइन किस बात का आधार दे सकता है; कौन-से बिना जाँचे संयोजन या परिस्थितियाँ निर्णय से बाहर हैं].
मसलन, 3-खाने वाला आंशिक डिज़ाइन लेने वाला स्टूडियो लिख सकता है: “हम चित्र 1 के साथ हेडलाइन की तुलना करेंगे और हेडलाइन B के साथ चित्रों की तुलना करेंगे. हम हेडलाइन A को चित्र 2 के साथ नहीं जाँच रहे हैं.” यह वाक्य 2 उपयोगी सवाल और गायब तुलना दिखाता है, बिना डिज़ाइन को अपर्याप्त घोषित किए.
क्लाइंट के लिए काम तैयार कर रहा क्रिएटर बदले थंबनेल और शीर्षक पर चर्चा में यही अंतर ले सकता है. सवाल है कि क्लाइंट किस संस्करण या तत्व को चुनना चाहता है. हमारी संख्याएँ प्रकाशक की वेबसाइट से हैं; वे यह नहीं बतातीं कि वर्तमान सोशल प्लेटफ़ॉर्म क्रिएटिव संस्करण कैसे बाँटता या मापता है.
सवाल को संयोजनों के साथ रखें

तैयार क्रिएटिव चुनें
निर्णय के लिए संभावित पैकेज की तुलना करें.
1 तत्व की तुलना करें
ज़रूरी तुलना में दूसरे तत्व को स्थिर रखें.
जोड़ी जाँचें
वे संयोजन रखें जिनसे पूछा जा सके कि चित्र बदलने पर हेडलाइन का अंतर बदलता है या नहीं.
डिज़ाइन की सूची कैसे बनी
स्रोत Upworthy Research Archive की सार्वजनिक खोजपरक फ़ाइल है, जिसका विवरण J. Nathan Matias, Kevin Munger, Marianne Aubin Le Quere और Charles Ebersole ने दिया है. ऐतिहासिक 2013–2015 आर्काइव में इसकी 22,666 पैकेज-पंक्तियाँ 4,873 टेस्ट में समूहित हैं. हमने हेडलाइन, चित्र पहचानकर्ता, अंश-पाठ, टेस्ट पहचानकर्ता, बनाए जाने की तारीख-समय और आर्काइव पंक्ति-इंडेक्स लिए. क्लिक, इंप्रेशन और संपादकीय चुनाव नहीं लिए. [1] [6]
अंतिम डिज़ाइन-जाँच योजना से पहले संरचनात्मक व्यवहार्यता जाँच हुई थी और उसी ने सवाल को आकार दिया. इसलिए यह जाँच खोजपरक पुनर्विश्लेषण है, पहले से पंजीकृत पुष्टिकरण अध्ययन नहीं. तय नियम इस्तेमाल योग्य संरचनात्मक फ़ील्ड वाले टेस्ट रखते हैं, मुख्य तारीख-सीमा लगाते हैं और उनके सभी पैकेज में एक जैसा अंश-पाठ माँगते हैं. अंश-पाठ की शर्त सावधानी वाली है, क्योंकि शोधपत्र और आर्काइव दस्तावेज़ इस पर सहमत नहीं कि यह फ़ील्ड दिखाई गई थी या नहीं. [6]
चयन तालिका पहले क्रमिक बहिष्करण दिखाती है, फिर पात्र टेस्ट का विभाजन. 5 टेस्ट में हेडलाइन या चित्र पहचानकर्ता नहीं है; फिर 1,050 तारीख-दायरे का नियम पूरा नहीं करते और 606 के अंश-पाठ बदलते हैं. बचे 3,212 टेस्ट में 1,624 केवल हेडलाइन, 1,078 केवल चित्र पहचानकर्ता, 188 दोनों बदलते हैं और 322 में 1 देखा गया संयोजन है. अंतिम श्रेणी में फिर भी स्रोत की कई पंक्तियाँ हो सकती हैं.
टेस्ट के भीतर एक जैसी हेडलाइन-चित्र जोड़ी दोहरने पर डिज़ाइन के खाने में 1 बार गिनी जाती है. दोनों बदलने वाले 188 टेस्ट में से 5 में खाने दोहरते हैं. पूरा ग्रिड उस टेस्ट में देखी गई हेडलाइन स्ट्रिंग और चित्र पहचानकर्ताओं की हर जोड़ी रखता है. अलग स्ट्रिंग का मतलब अलग विचार होना ज़रूरी नहीं और अलग चित्र पहचानकर्ता का मतलब दिखने में अलग तस्वीरें होना ज़रूरी नहीं; चित्र फ़ाइलें उपलब्ध नहीं हैं.
परिणाम डिज़ाइन को समान वज़न से गिनते हैं, लोगों, इंप्रेशन या व्यवसायों को नहीं. वे आज की मार्केटिंग प्रथा, प्रदर्शन या सांख्यिकीय शक्ति साबित नहीं करते. डाउनलोड में समेकित परिणाम और दोनों दायरा-जाँचों सहित गणना दोहराने की विधि है, ताकि पाठक देखे गए संयोजन और उससे निकले निष्कर्ष का अंतर देख सकें. [7]
मुख्य तुलना 3,212 पात्र टेस्ट में से 188 से शुरू होती है
सार्वजनिक खोजपरक फ़ाइल के 4,873 टेस्ट में चयन. बहिष्करण दिखाए गए क्रम में होते हैं. अंतिम 4 डिज़ाइन श्रेणियाँ 3,212 पात्र टेस्ट को बाँटती हैं.
चयन चरण और सभी पात्र श्रेणियाँ देखें
| चयन चरण या पात्र डिज़ाइन श्रेणी | टेस्ट |
|---|---|
| शुरुआती खोजपरक टेस्ट | 4,873 |
| बाहर: हेडलाइन या चित्र पहचानकर्ता नहीं | 5 |
| बाहर: तय निर्माण-तारीख अंतराल | 1,050 |
| इसके बाद बाहर: बदलता अंश-पाठ | 606 |
| बहिष्करण के बाद पात्र | 3,212 |
| पात्र: हेडलाइन बदलती है, चित्र स्थिर | 1,624 |
| पात्र: चित्र बदलता है, हेडलाइन स्थिर | 1,078 |
| पात्र: हेडलाइन और चित्र दोनों बदलते हैं | 188 |
| पात्र: 1 देखा गया संयोजन | 322 |
- चित्रों के मान और दायरे के लेबल डाउनलोड करें (CSV)
- परिणाम, संरचनात्मक टेस्ट रिकॉर्ड और विश्लेषण कोड डाउनलोड करें (ZIP)
CSV में 4 चित्रों से लिए गए 41 मान हैं. समझाने के लिए दिए गए डिज़ाइन के खानों को देखी गई गिनतियों और हिस्सेदारियों से अलग लेबल किया गया है. ZIP में समेकित परिणाम, संरचनात्मक टेस्ट रिकॉर्ड और विश्लेषण कोड हैं. अनुवादित पुनर्गणना निर्देश शामिल हैं; मूल सार्वजनिक आर्काइव अलग से डाउनलोड करें. क्लिक या इंप्रेशन के नतीजे शामिल नहीं हैं.
स्रोत और टिप्पणियाँ
- Matias, J. Nathan; Munger, Kevin; Aubin Le Quere, Marianne; और Ebersole, Charles (2021), The Upworthy Research Archive, a time series of 32,487 experiments in U.S. media (अमेरिकी मीडिया के प्रयोगों की समय-श्रृंखला), Scientific Data 8, 195. DOI: 10.1038/s41597-021-00934-7. Influence IQ का विश्लेषण खोजपरक उपसमूह और सुधारा गया स्रोत-विवरण लेता है. मूल शोधपत्र गुणात्मक रूप से बताता है कि संपादक अक्सर हर हेडलाइन-चित्र संयोजन नहीं जाँचते थे.
- मुख्य दायरे में दोनों तत्व बदलने वाले 188 टेस्ट गणना का आधार हैं. पूरे ग्रिड: 31; अधूरे: 157. अधूरे समूह में 75 दोनों तुलना-प्रकार वाले, 30 केवल हेडलाइन, 45 केवल चित्र और 7 दोनों में से कोई तुलना न रखने वाले हैं. इसलिए 150/157 = 95.5% में कम-से-कम 1 प्रकार रहता है. “तुलना” संरचनात्मक अवसर बताती है, अनुमानित प्रभाव या सत्यापित वैध प्रयोग नहीं.
- स्टूडियो के 3 डिज़ाइन उदाहरण हैं. पूरा 2-कारक, 2-स्तर डिज़ाइन सभी 4 संयोजन रखता है. आंशिक उदाहरण A के साथ चित्र 2 छोड़ता है; विकर्ण उदाहरण केवल A के साथ चित्र 1 और B के साथ चित्र 2 रखता है. अकेला 4-खाने का डिज़ाइन आवंटन की गुणवत्ता, पर्याप्त नमूना या अर्थपूर्ण इंटरैक्शन साबित नहीं करता. NIST की पुस्तिका पूर्ण फ़ैक्टोरियल डिज़ाइन और उनके संयोजन समझाती है.
- आर्काइव का जून 2024 सुधार 25 जून 2013 से 10 जनवरी 2014 तक संभावित यादृच्छिक आवंटन समस्याएँ बताता है और उस अवधि से कारणात्मक शोध न करने की सलाह देता है. दूसरे शोध उपयोग वह स्पष्ट रूप से बनाए रखता है. मुख्य विश्लेषण ऐसा हर टेस्ट हटा देता है जिसकी निर्माण-तारीखों की अवधि उस अंतराल के किसी भी हिस्से को छूती है; समय-मुद्रा दिखाए जाने की तारीख साबित नहीं करती और उसका समय-क्षेत्र अज्ञात है. सभी-अवधि की संरचनात्मक जाँच वे रिकॉर्ड रखती है.
- खाली जगह के असर की जाँच हेडलाइन और अंश-पाठ के शुरू-अंत की खाली जगह हटाती और भीतर की दोहराई खाली जगह एक करती है; अक्षरों का बड़ा-छोटा रूप और विरामचिह्न बने रहते हैं. 8 और टेस्ट पात्र होते हैं; दोनों समूहों में पात्र 1 साझा टेस्ट का संरचनात्मक वर्गीकरण बदलता है. गणना के आधार फिर निकाले जाते हैं, 188 पर स्थिर नहीं रखे जाते. मुख्य, खाली-जगह और सभी-अवधि दायरों में दोनों बदलने वाले टेस्ट क्रमशः 188, 189 और 239 हैं.
- पिन की गई खोजपरक CSV upworthy-archive-exploratory-packages-03.12.2020.csv है; OSF फ़ाइल संस्करण 1, आकार 1,42,60,949 बाइट. उसका SHA-256 है 8368313b060f4015a0c6fb34e6d788163cee29554144aba9390b14922eb9d8ce. फ़ाइल में समस्या का अपडेट किया फ़्लैग नहीं है, इसलिए तारीख-सीमा अलग निकाली जाती है. शोधपत्र अंश-पाठ को दिखाया गया बताता है; आर्काइव दस्तावेज़ उसे उन फ़ील्ड में रखते हैं जिनके बारे में माना जाता है कि वे नहीं दिखाए गए. अंश-पाठ स्थिर रखने से इस विवादित फ़ील्ड के बदलाव को तुलना के अंतर से जोड़ने से बचते हैं.
- Cornell University, Upworthy Research Archive, उससे जुड़े कोड और दस्तावेज़ों को Creative Commons Attribution 4.0 International के तहत प्रकाशित करती है. Influence IQ यह व्युत्पन्न संरचनात्मक विश्लेषण देता है; इससे Upworthy या आर्काइव के लेखकों के समर्थन का संकेत नहीं मिलता. विश्लेषण पैकेज में समेकित आउटपुट, संरचनात्मक टेस्ट रिकॉर्ड, कोड और अनुवादित पुनर्गणना निर्देश हैं. मूल सार्वजनिक डेटा आर्काइव से अलग लें.
इस लेख का अंग्रेज़ी संस्करण स्रोत संस्करण है. हर भाषा संस्करण उसी ऐतिहासिक Upworthy खोजपरक उपसमूह और उन्हीं उदाहरण वाले डिज़ाइन का वर्णन करता है. अनुवाद निष्कर्षों को स्थानीय बाज़ार या वर्तमान प्लेटफ़ॉर्म का मानक नहीं बनाता.