Кликабельность и конверсия: сравнивайте по одним и тем же записям
Повторный анализ 55 357 исторических краудфандинговых записей показывает, что меняется, если сопоставить признаки клика и инвестиции, а не читать их итоги отдельно.
Собственный повторный анализ открытого набора данных рассылок bettervest, опубликованного Hornuf и Siemroth в 2023 году.
Аннотация
Кликабельность и коэффициент конверсии описывают разные действия. Чтобы понять их связь, нужно проверить, в каких записях есть оба. Мы повторно проанализировали 55 357 записей «получатель–рассылка» из немецкого краудфандингового эксперимента, опубликованного в 2023 году. Из 611 записей с признаком инвестиции 327 также имели признак клика по рассылке: 53,52 %. Остальные 284, или 46,48 %, его не имели.
Результат показывает компаниям и авторам, зачем изучать пересечение записей, лежащих в основе отчёта о кампании. Он не показывает сбой отслеживания или то, что письмо вызвало инвестицию. Опубликованные записи не устанавливают порядок событий или общее окно измерения. Мы показываем полное сравнение 4 сочетаний, все 10 рассылок и шаблон, который поможет компании определить собственные измерения и связь между записями, прежде чем интерпретировать воронку.
Представим автора, который разбирает запуск практикума. Один отчёт показывает клики по рассылке, другой — регистрации. Оба итога реальны, но их соседство не говорит автору, сколько регистраций относится к тем, кто кликнул.
Недостающий расчёт — пересечение. Оно может быть небольшим или значительным, и 2 основных итоговых числа его не определяют. Открытые краудфандинговые данные позволяют показать расчёт на реальных записях, отделив практический вопрос от утверждений, которые данные не подтверждают.
2 итога нужно связать

Чем кликабельность отличается от коэффициента конверсии?
Кликабельность соотносит клики с указанным числом случаев, когда можно было кликнуть. Коэффициент конверсии показывает, как часто наступал определённый результат относительно указанной базы. В зависимости от отчёта базой могут быть показы рекламы, доставленные сообщения, посещения, люди, которые кликнули, или другая подходящая группа. Полезное сравнение начинается с названия действия и его знаменателя.
Например, «регистрации среди тех, кто кликнул» и «регистрации среди всех, кому отправили сообщение» — разные вопросы. Отчёт может использовать любое определение, но подпись должна говорить читателю, какое именно. Число кликов также отличается от числа уникальных людей, которые кликнули: повторные события могут менять итог.
В этом исследовании общая база — запись «получатель–рассылка» в опубликованном наборе данных. Мы считаем, есть ли в записи признак клика и признак инвестиции. У нас нет знаменателя доставленных сообщений или последовательности с временными метками, поэтому мы называем показатели зарегистрированными долями и долями пересечения.
Это различие полезно компании, которая решает, менять ли сообщение, предложение или измерение. 2 отдельных итога не позволяют определить, где остановился конкретный человек. Связывание подходящих записей — один шаг к ответу; установление порядка и времени событий — другой.
Что измерял краудфандинговый набор данных?
Исследователи Lars Hornuf и Christoph Siemroth работали с bettervest, немецкой платформой долгового краудфандинга. Их эксперимент сравнивал разные способы описания 10 инвестиционных проектов в рассылках. Опубликованный набор содержит 55 357 записей «получатель–рассылка» и 7 864 кода получателей. Один получатель может быть представлен в записях вплоть до 10 рассылок.[1][2]
Авторы фиксировали, кликнул ли получатель по уникальной ссылке проекта в рассылке и вложил ли он положительную сумму в проект. Каждый результат хранится как признак «да» или «нет». Признак инвестиции — не количество сделок, не сумма покупки и не показатель завершённых продаж интернет-магазина.
Исходная статья исследует влияние способов описания в рассылке. Наш повторный анализ задаёт другой вопрос: насколько 2 зарегистрированных результата пересекаются для одного получателя и одной рассылки? Мы объединяем все 3 исходные экспериментальные группы и сохраняем всю опубликованную выборку. Влияние способов описания мы заново не оцениваем.
Это исторические записи конкретной краудфандинговой платформы, опубликованные в 2023 году. Изученные материалы не устанавливают общее окно наблюдения или порядок кликов и инвестиций. Поэтому исследование даёт пример измерения, а не современный ориентир коэффициента конверсии email-маркетинга.
Как часто клик и инвестиция встречались вместе?
Зарегистрированные клик и инвестиция встречаются вместе в 327 из 55 357 записей. Ещё 1 499 записей имеют клик без признака инвестиции, 284 — инвестицию без признака клика, а 53 247 не имеют ни одного из признаков. Таблица сохраняет видимыми все 4 возможности.
Во всём файле 1 826 записей имеют признак клика, или 3,30 %. Всего 611 имеют признак инвестиции, или 1,10 %. Это 2 маргинальные доли. Они показывают распространённость каждого признака, но не частоту их совместного присутствия в одних записях.
Полное пересечение кликов и инвестиций
Все 55 357 записей «получатель–рассылка» из исторического выпуска bettervest, опубликованного в 2023 году.
| Зарегистрированное сочетание | Записи | Доля всех записей |
|---|---|---|
| Клик и инвестиция | 327 | 0,59 % |
| Только клик | 1 499 | 2,71 % |
| Только инвестиция | 284 | 0,51 % |
| Ни одного из признаков | 53 247 | 96,19 % |
Среди 611 записей с признаком инвестиции 327 также имеют признак клика. Это 53,52 %; у остальных 46,48 % клик не зарегистрирован. Если развернуть вопрос, знаменатель меняется: среди 1 826 записей с признаком клика 327 также имеют признак инвестиции, или 17,91 %.
Оба процента верны, потому что отвечают на разные вопросы. Первый начинается с записей об инвестиции и спрашивает о кликах. Второй начинается с записей о кликах и спрашивает об инвестициях. Ни один нельзя представлять как вероятность того, что клик привёл к последующей инвестиции.
Ответ меняется с исходной группой
Исторические записи источника: 611 с признаком инвестиции и 1 826 с признаком клика.
| Вопрос | Записи, соответствующие условию | Записи в базе | Доля указанной базы |
|---|---|---|---|
| Признак клика в записях с инвестицией | 327 | 611 | 53,52 % |
| Нет признака клика в записях с инвестицией | 284 | 611 | 46,48 % |
| Признак инвестиции в записях с кликом | 327 | 1 826 | 17,91 % |
Запись только с инвестицией не объясняет свою историю. Она не говорит, что человек обошёл рассылку, что система отслеживания пропустила событие или что инвестицию вызвал другой канал. Для таких объяснений нужны сведения о сборе, времени и другой активности, которых в этом выпуске нет.
Для владельца кампании непосредственный вывод ограничен конкретной задачей: показывать число записей с обоими признаками рядом с отдельными итогами. Если бизнес-вопрос касается людей, совершивших оба действия, пересечение — часть ответа. Отношение 2 несопоставленных итогов его не заменяет.
Одинаково ли пересечение во всех рассылках?
Пересечение различается между 10 исходными рассылками. Среди записей с признаком инвестиции доля тех, где также есть признак клика, лежит в диапазоне 29,55–78,43 %. Мы показываем каждую рассылку, чтобы ни одна граница диапазона не подменяла всё исследование.
Номера рассылок ниже — коды источника, а не хронологическая последовательность или рейтинг. Минимальная база записей с инвестициями — 31 запись, максимальная — 118. Цитируя большой процент при малой базе, нужно сохранять рядом размер этой базы.
Оба направления пересечения и их базы
Все 10 исторических рассылок; полные исходные количества приведены в следующей таблице.
| Рассылка источника | Клик среди записей с инвестицией | Записи с инвестицией | Инвестиция среди записей с кликом | Записи с кликом |
|---|---|---|---|---|
| Рассылка 1 | 78,43 % | 51 | 12,08 % | 331 |
| Рассылка 2 | 44,44 % | 36 | 12,21 % | 131 |
| Рассылка 3 | 35,29 % | 34 | 6,70 % | 179 |
| Рассылка 4 | 29,55 % | 44 | 8,90 % | 146 |
| Рассылка 5 | 41,27 % | 63 | 15,95 % | 163 |
| Рассылка 6 | 62,75 % | 51 | 23,36 % | 137 |
| Рассылка 7 | 61,29 % | 31 | 14,07 % | 135 |
| Рассылка 8 | 60,87 % | 69 | 31,58 % | 133 |
| Рассылка 9 | 50,00 % | 118 | 31,38 % | 188 |
| Рассылка 10 | 59,65 % | 114 | 24,03 % | 283 |
Полные количества ниже позволяют проверить сравнение. Для любой рассылки сложите «Оба признака» и «Только инвестиция», чтобы получить базу инвестиций. Сложите «Оба признака» и «Только клик», чтобы получить базу кликов. Все 4 ячейки в сумме дают итог рассылки.
Все 4 результата в каждой рассылке
Все 10 исходных рассылок в порядке их кодов.
| Рассылка источника | Оба признака | Только клик | Только инвестиция | Ни одного из признаков | Все записи |
|---|---|---|---|---|---|
| Рассылка 1 | 40 | 291 | 11 | 5 238 | 5 580 |
| Рассылка 2 | 16 | 115 | 20 | 5 515 | 5 666 |
| Рассылка 3 | 12 | 167 | 22 | 5 325 | 5 526 |
| Рассылка 4 | 13 | 133 | 31 | 5 432 | 5 609 |
| Рассылка 5 | 26 | 137 | 37 | 5 377 | 5 577 |
| Рассылка 6 | 32 | 105 | 19 | 5 196 | 5 352 |
| Рассылка 7 | 19 | 116 | 12 | 5 101 | 5 248 |
| Рассылка 8 | 42 | 91 | 27 | 5 182 | 5 342 |
| Рассылка 9 | 59 | 129 | 59 | 5 182 | 5 429 |
| Рассылка 10 | 68 | 215 | 46 | 5 699 | 6 028 |
Эти различия не выявляют лучший креатив рассылки. Проекты различаются, одни получатели могут встречаться повторно, а новый анализ объединяет исходные экспериментальные группы. Для отдельных рассылок нет тестов значимости или утверждений, что конкретный проект вызвал более сильное пересечение.
Компании с несколькими кампаниями стоит сохранять детализацию по кампаниям рядом с общим отчётом. Если вы решаете, как изменить одну кампанию, начните с её строки и количеств. Сохраняйте общую таблицу для отчёта по нескольким кампаниям. Не выбирайте выгодную кампанию после знакомства с результатом.
Что меняется при равном весе каждого получателя?
Основное сравнение придаёт каждой записи «получатель–рассылка» одинаковый вес. Поэтому получатель, представленный в 10 рассылках, даёт 10 записей, а представленный однократно — 1. Это подходит для описания опубликованных записей, но не является единственным возможным обобщением.
В заранее заданном дополнительном сравнении каждому коду получателя присваивается суммарный вес 1. При участии в 10 рассылках вклад одной записи — 1/10; при однократном участии — 1. Поэтому каждый код получателя имеет одинаковый суммарный вес. Это не делает выборку репрезентативной для страны или рынка.
При таком взвешивании 51,69 % веса записей с признаком инвестиции также приходится на записи с признаком клика, против 53,52 % в основном анализе. Обратная доля — 19,12 % против 17,91 %. Мы сохраняем оба обобщения: дополнительное описывает другой объект, а не служит исправлением, выбранным ради более удобного результата.
2 схемы весов для одного полного файла
Основная: равный вес каждой записи «получатель–рассылка». Дополнительная: равный суммарный вес каждого кода получателя.
| Схема весов | Клик среди записей с инвестицией | Нет признака клика среди записей с инвестицией | Инвестиция среди записей с кликом | Доля с признаком клика | Доля с признаком инвестиции |
|---|---|---|---|---|---|
| Равный вес записей (основная) | 53,52 % | 46,48 % | 17,91 % | 3,30 % | 1,10 % |
| Равный суммарный вес получателей (дополнительная) | 51,69 % | 48,31 % | 19,12 % | 4,02 % | 1,49 % |
Полная дополнительная таблица с равным весом получателей
Каждый из 7 864 кодов получателей вносит суммарный вес 1 по всем своим исходным записям.
| Зарегистрированное сочетание | Взвешенная сумма | Доля суммарного веса получателей |
|---|---|---|
| Клик и инвестиция | 60,4079 | 0,77 % |
| Только клик | 255,5067 | 3,25 % |
| Только инвестиция | 56,4627 | 0,72 % |
| Ни одного из признаков | 7 491,6226 | 95,26 % |
Взвешенные суммы ячеек содержат дроби, потому что складывают вклады вроде 1/2 или 1/10. Их сумма — 7 864, число кодов получателей. Их нельзя описывать как дробное число людей или количество уникальных инвесторов, совершивших каждое действие.[3]
Шаблон сравнения кликов и результатов в своём отчёте
Прежде чем трактовать кампанию как воронку, составьте краткий план измерений. Шаблон ниже доступен без регистрации и предназначен для планирования собственной отчётности. Он не предполагает, что исторический набор использовал те же определения или что изменение измерения улучшит продажи.
Решение: «Мы хотим принять [решение о сообщении, предложении или отчётности] для [кампании]». Выберите решение, прежде чем подбирать удобный показатель.
Единица и база: «1 строка представляет [пару „получатель–кампания“, посещение или другую единицу, подтверждённую данными]. Наша база, отвечающая критериям отбора, — [определение]. Повторные события и повторные получатели учитываются по [правилу]». Отделяйте количество событий от количества идентификаторов.
Действия: «Клик означает [конкретное зарегистрированное событие]. Результат означает [регистрацию, подходящее обращение, завершённую покупку или другое определённое действие]». Решите, как учитывать отмены, возвраты, тестовые события и дубликаты.
Связь и время: «Мы связываем записи по [разрешённому идентификатору]. Клики наблюдаются в течение [окна], результаты — в течение [окна]. Порядок можно установить по [доступным временным меткам]». Если связи или метки нет, сообщите об этом, а не заполняйте пробел предполагаемым путём клиента.
Отчёт: «Мы покажем все сочетания: только клик, только результат, оба действия, ни одного действия. Также укажем базу записей, которые входят в анализ. Условные проценты будут называть свой знаменатель». Сохраняйте недоступные или несопоставленные записи как отдельный вопрос отчётности, а не молча относите их к категории «ни одного из этих действий».
Применение: «Отчёт описывает [наблюдаемую связь]. Чтобы утверждать [что кампания вызвала больше результатов], нам нужен [подходящий дизайн сравнения]». Таблица пересечения сама по себе не даёт такого причинного сравнения.
Сохраняйте видимыми все 4 сочетания

Определите общую запись
Назовите подходящую единицу, действия, правило сопоставления и окна.
Сохраняйте все сочетания
Покажите оба действия, каждое отдельно и ни одного; несопоставленные записи обозначьте отдельно.
Назовите знаменатель
Скажите, рассчитан ли процент от всех записей, от записей с кликом или от записей с результатом.
Разобранный пример: автор отчитывается о регистрациях на практикум
Рассмотрим вымышленного автора с 1 000 подходящих записей «получатель–кампания». Допустим, заданные окна и разрешённое сопоставление дали 80 записей с кликом, 30 с регистрацией и 18 с обоими действиями. Это вымышленные учебные значения, а не ещё один результат краудфандинговых данных.
Полная таблица содержит 18 записей с обоими действиями, 62 только с кликом, 12 только с регистрацией и 908 — ни с одним из действий. Доля кликов — 80 из 1 000, или 8 %. Доля регистраций — 30 из 1 000, или 3 %.
Среди записей с признаком клика 18 из 80 также имеют регистрацию: 22,5 %. Среди записей с признаком регистрации 18 из 30 также имеют клик: 60 %. Автор может показать все 4 числа, не подразумевая, что они измеряют одно и то же.
12 записей только с регистрацией заслуживают нейтрального описания, пока у автора нет сведений об их путях. Даже если временные метки устанавливают, что клик предшествовал регистрации, один порядок не доказывает, что её вызвала рассылка. Автор может использовать таблицу, чтобы уточнить следующий вопрос, не принимая её за оценку прироста выручки.
Полезный заполненный план мог бы звучать так: «Мы описываем зарегистрированное пересечение регистраций для этой кампании и этих окон. Мы сохраним все 4 категории, покажем обе условные базы и отдельно сообщим о записях, которые не можем сопоставить». Это полезнее для действий, чем подпись «коэффициент конверсии» с непонятным знаменателем.
Как Influence IQ рассчитал пересечение?
Мы использовали полный итоговый набор данных Stata из открытого выпуска авторов версии 1. До расчёта совместных результатов проверили идентичность файла, 7 необходимых числовых полей, все 55 357 уникальных пар «получатель–рассылка», 7 864 кода получателей и 10 кодов рассылок. Оба признака должны были присутствовать и быть закодированы строго как 0 или 100.[2]
Мы проверили количества в 3 экспериментальных группах и воспроизвели округлённые отдельные проценты кликов и инвестиций из статьи. Записи не удаляли, пропуски не заполняли и дубликаты не устраняли. Затем подсчитали все 4 сочетания в целом и внутри каждой рассылки и рассчитали те же величины с заранее заданным равным весом получателей.
2 независимо написанные реализации дали одинаковые количества и точные дроби. Пакет для скачивания содержит исходный код расчётов, методику и все сводные таблицы. Необработанные записи и идентификаторы получателей исключены. Получите исходный файл отдельно у авторов и сохраняйте указание их авторства.
Мы не добавляем выборочные доверительные интервалы к этому полному подсчёту опубликованного файла. Количества точны для этих записей, но не устанавливают точность для более широкой совокупности. Общие получатели и проекты были бы важны для обобщения, которого исследование не предпринимает.
Практический вклад — полное зарегистрированное пересечение и понятный способ задать следующий вопрос измерения. Он дополняет исходный эксперимент авторов, а не заменяет его. Для решений о кампании определите результат, базу, правило сопоставления и окно времени, прежде чем трактовать заявленный коэффициент конверсии.
Язык CSV совпадает с языком страницы. Пакет содержит исходный код, переведённые методические материалы и сводные результаты. Необработанные записи и идентификаторы получателей исключены; данные нужно получить отдельно из открытого выпуска авторов.
Источники и примечания
- Hornuf, Lars, и Christoph Siemroth (2023), A field experiment on attracting crowdfunders, Economics Letters 222, 110928. Разделы 2–3 определяют 10 рассылок, единицу наблюдения и признаки результатов; таблицы 1–2 дают опубликованные контрольные показатели группы и маргинальных долей. Исходное исследование проверяет влияние способов описания. Новый анализ Influence IQ описывает совместные зарегистрированные результаты.
- Hornuf и Siemroth, выпуск данных версии 1 от 17 апреля 2023 года, DOI 10.17632/9prftpkdfc.1, CC BY 4.0. Анализ использует SubscriberNumber, NewsletterNumber, treatmentcontrol, treatmenteco, treatmentreturn, ClickPercent и InvestmentPercent. Идентифицирующие подписи значений и другие поля не используются. Изученные источники не устанавливают согласованные окна наблюдения, порядок событий или правила отмен.
- Для получателя, встречающегося в k исходных рассылках, каждая запись получает вес 1/k в дополнительном анализе. Основной анализ присваивает каждой записи вес 1. Оба используют всю опубликованную выборку. Коды получателей позволяют группировать записи, но сами по себе не подтверждают уникальных физических лиц. Дроби рассчитываются точно до округления для показа. Все 10 кодов рассылок сохраняют исходный порядок без приписывания хронологии.
Исходная версия статьи подготовлена на английском. Все языковые версии описывают одни и те же исторические немецкие краудфандинговые записи, а не отдельные ориентиры для стран или отраслей.