클릭률과 전환율: 같은 기록을 비교하세요

과거 크라우드펀딩 기록 55,357개를 재분석해 클릭·투자 플래그의 합계를 따로 읽는 대신 서로 연결하면 무엇이 달라지는지 보여 줍니다.

Hornuf와 Siemroth가 2023년에 공개한 bettervest 뉴스레터 데이터셋을 독자적으로 재분석했습니다.

초록

클릭률과 결과 비율은 다른 행동을 설명합니다. 관계를 이해하려면 어느 기록에 둘 다 있는지 확인해야 합니다. 2023년에 발표된 독일 크라우드펀딩 실험의 수신자–뉴스레터 기록 55,357개를 재분석했습니다. 프로젝트 투자 플래그가 있는 기록 611개 중 327개에는 뉴스레터 클릭 플래그도 있었습니다. 53.52%입니다. 나머지 284개, 즉 46.48%에는 없었습니다.

기업과 크리에이터가 캠페인 보고서의 합계 뒤에 있는 겹침을 살펴볼 구체적인 이유를 줍니다. 추적 실패나 이메일이 투자의 원인이었다는 사실을 보여 주지는 않습니다. 공개 기록으로는 사건 순서나 공통 측정 구간을 확정할 수 없습니다. 퍼널을 해석하기 전에 자체 연결 측정을 정의하도록 4가지 조합의 전체 비교, 뉴스레터 10개 전체, 양식을 제시합니다.

워크숍 출시를 검토하는 크리에이터를 생각해 보세요. 한 보고서는 뉴스레터 클릭, 다른 보고서는 등록을 보여 줍니다. 합계는 둘 다 실제 값이지만 나란히 놓는다고 클릭한 사람의 등록이 몇 개인지 알 수는 없습니다.

빠진 계산은 겹침입니다. 작을 수도 클 수도 있으며 대표 합계 2개만으로는 결정되지 않습니다. 공개 크라우드펀딩 데이터셋의 실제 기록으로 계산을 보여 주면서, 실무 질문과 데이터가 뒷받침하지 못하는 주장은 구분합니다.

합계 2개에는 연결이 필요합니다

포인터가 있는 봉투와 체크된 결과 토큰이 겹치는 색 영역 2개에 놓여 있습니다. 짝은 겹침 안에, 중립 도형은 영역 2개의 바깥에 있습니다.
기록 행동의 겹침을 표현한 개념도입니다. 물체와 수량은 예시이며 측정 개수는 데이터 표에 있습니다.

클릭률과 전환율은 어떻게 다른가요?

클릭률은 명시한 클릭 기회 대비 클릭을 보고합니다. 전환율은 명시한 기준 집단 대비 정의된 결과를 보고합니다. 보고서에 따라 기준은 광고 노출, 도착 메시지, 방문, 클릭한 사람, 다른 적격 집단일 수 있습니다. 유용한 비교는 행동과 분모를 모두 밝히는 데서 시작합니다.

예를 들어 ‘클릭한 사람 중 등록’과 ‘메시지가 발송된 모든 사람 중 등록’은 다른 질문입니다. 어느 정의든 쓸 수 있지만 라벨로 무엇을 뜻하는지 알려야 합니다. 클릭과 클릭한 고유한 사람도 다르며 반복 이벤트가 합계를 바꿀 수 있습니다.

이 연구의 공통 기준은 공개 데이터셋의 수신자–뉴스레터 기록입니다. 그 기록에 클릭 플래그와 투자 플래그가 각각 있는지 셉니다. 도착 메시지 분모나 시각이 기록된 순서가 없으므로 기록된 비율과 겹침 비율이라고 부릅니다.

기업이 메시지, 제안, 측정 중 무엇을 바꿀지 결정할 때 유용한 구분입니다. 별도 합계 2개로는 개인이 어디서 멈췄는지 식별할 수 없습니다. 적격 기록 연결은 답을 얻는 한 단계이며, 사건 순서와 시점 확인은 또 다른 단계입니다.

크라우드펀딩 데이터셋은 무엇을 측정했나요?

연구자 Lars Hornuf와 Christoph Siemroth는 독일 대출형 크라우드펀딩 플랫폼 bettervest와 협력했습니다. 실험은 뉴스레터에서 투자 프로젝트 10개를 설명하는 서로 다른 방식을 비교했습니다. 공개 데이터셋에는 수신자–뉴스레터 기록 55,357개와 수신자 코드 7,864개가 있습니다. 한 수신자는 최대 뉴스레터 10개에 나타날 수 있습니다.[1][2]

저자들은 수신자가 뉴스레터의 고유 프로젝트 링크를 클릭했는지, 해당 프로젝트에 양수 금액을 투자했는지 기록했습니다. 결과는 각각 예·아니요 플래그로 저장됩니다. 투자 플래그는 거래 건수, 구매 금액, 완료된 전자상거래 판매 지표가 아닙니다.

원논문은 뉴스레터의 프레이밍 효과를 살펴봅니다. 재분석의 질문은 다릅니다. 같은 수신자·뉴스레터의 기록 결과 2개가 얼마나 겹칠까요? 원래 처치 집단 3개를 모두 합치고 공개 표본 전체를 유지합니다. 프레이밍 효과를 다시 추정하지 않습니다.

특정 크라우드펀딩 플랫폼의 과거 기록으로 2023년에 공개됐습니다. 검토한 자료에서 공통 관찰 구간이나 클릭·투자 순서는 확인되지 않았습니다. 따라서 현재 이메일 마케팅 전환율의 기준치가 아니라 측정 예시를 제공합니다.

클릭과 투자는 얼마나 자주 함께 나타났나요?

기록 55,357개 중 327개에 클릭과 투자가 함께 기록되어 있습니다. 다른 1,499개는 클릭만, 284개는 투자만, 53,247개는 플래그 2개 모두 없습니다. 표는 가능성 4가지를 모두 보여 줍니다.

전체 파일에서 클릭 플래그가 있는 기록은 1,826개로 3.30%, 투자 플래그가 있는 기록은 611개로 1.10%입니다. 이것이 주변 비율 2개입니다. 각 플래그가 얼마나 흔한지는 알려 주지만 같은 기록에 얼마나 자주 속하는지는 알려 주지 않습니다.

클릭·투자 겹침 전체

2023년에 공개한 과거 bettervest 자료의 수신자–뉴스레터 기록 55,357개 전체입니다.

클릭·투자 겹침 전체
기록된 조합기록 수전체 기록 중 비율
클릭·투자3270.59%
클릭만1,4992.71%
투자만2840.51%
플래그 2개 모두 없음53,24796.19%
기록마다 같은 가중치입니다. 플래그는 기록된 행동을 뜻하며 순서나 원인이 아닙니다. 범주는 전체를 포괄하며 서로 겹치지 않습니다.

투자 플래그 기록 611개 중 327개에는 클릭 플래그도 있습니다. 53.52%이며 나머지 46.48%에는 기록된 클릭이 없습니다. 질문을 뒤집으면 분모가 달라집니다. 클릭 플래그 기록 1,826개 중 327개에는 투자 플래그도 있어 17.91%입니다.

다른 질문에 답하므로 비율 2개는 모두 맞습니다. 첫 번째는 투자 기록에서 시작해 클릭을 묻고, 두 번째는 클릭 기록에서 시작해 투자를 묻습니다. 어느 쪽도 클릭이 나중 투자로 이어질 확률로 제시해서는 안 됩니다.

출발 집단에 따라 답이 달라집니다

과거 원자료 기록: 투자 플래그 611개, 클릭 플래그 1,826개.

출발 집단에 따라 답이 달라집니다
질문대응 기록 수기준 기록 수명시한 기준 중 비율
클릭이 있는 투자 기록32761153.52%
클릭이 없는 투자 기록28461146.48%
투자가 있는 클릭 기록3271,82617.91%
비율마다 기준을 명시합니다. 기록된 겹침이며 이후 행동 확률이나 기여 전환이 아닙니다. 처음 2개 행은 같은 기록 611개를 나눕니다.

투자만 있는 기록은 자체 이력을 설명하지 않습니다. 누군가 뉴스레터를 건너뛰었는지, 추적기가 이벤트를 놓쳤는지, 다른 채널이 투자의 원인이었는지 알 수 없습니다. 그런 설명에는 이 공개 자료에 없는 수집, 시점, 다른 활동에 대한 근거가 필요합니다.

캠페인 담당자에게 당장의 시사점은 더 좁고 실무적입니다. 대응한 기록 수를 별도 합계와 함께 유지하세요. 비즈니스 질문이 행동 2개를 모두 한 사람에 관한 것이라면 교집합도 답의 일부입니다. 연결되지 않은 합계 2개로 만든 비율이 대신할 수는 없습니다.

뉴스레터마다 겹침이 같을까요?

원자료 뉴스레터 10개에 걸쳐 겹침은 다릅니다. 투자 플래그 기록 중 클릭 플래그도 있는 비율은 29.55%–78.43%입니다. 어느 끝값도 전체 연구를 대신하지 않도록 뉴스레터를 모두 보여 줍니다.

아래 뉴스레터 번호는 원자료 코드이며 시간 순서나 순위가 아닙니다. 투자 기준 기록 수는 최소 31개, 최대 118개입니다. 작은 분모의 큰 비율을 인용할 때도 해당 분모를 함께 유지해야 합니다.

겹침의 양방향 비율과 분모

과거 뉴스레터 10개 전체이며 근거인 전체 개수는 다음 표에 있습니다.

겹침의 양방향 비율과 분모
원자료 뉴스레터투자 기록 중 클릭투자 기록 수클릭 기록 중 투자클릭 기록 수
뉴스레터 178.43%5112.08%331
뉴스레터 244.44%3612.21%131
뉴스레터 335.29%346.70%179
뉴스레터 429.55%448.90%146
뉴스레터 541.27%6315.95%163
뉴스레터 662.75%5123.36%137
뉴스레터 761.29%3114.07%135
뉴스레터 860.87%6931.58%133
뉴스레터 950.00%11831.38%188
뉴스레터 1059.65%11424.03%283
첫 비율은 플래그 2개가 있는 기록을 투자 기록으로 나누고, 두 번째는 플래그 2개가 있는 기록을 클릭 기록으로 나눕니다. 차이를 서술할 뿐 최고의 뉴스레터나 유의성을 주장하지 않습니다.

아래 전체 개수로 비교를 확인할 수 있습니다. 뉴스레터마다 ‘둘 다’와 ‘투자만’을 더하면 투자 분모, ‘둘 다’와 ‘클릭만’을 더하면 클릭 분모가 됩니다. 셀 4개를 모두 더하면 해당 뉴스레터의 전체 기록 수입니다.

뉴스레터별 결과 4가지 전체

원래 코드순으로 정렬한 원자료 뉴스레터 10개 전체입니다.

뉴스레터별 결과 4가지 전체
원자료 뉴스레터둘 다클릭만투자만둘 다 아님전체 기록
뉴스레터 140291115,2385,580
뉴스레터 216115205,5155,666
뉴스레터 312167225,3255,526
뉴스레터 413133315,4325,609
뉴스레터 526137375,3775,577
뉴스레터 632105195,1965,352
뉴스레터 719116125,1015,248
뉴스레터 84291275,1825,342
뉴스레터 959129595,1825,429
뉴스레터 1068215465,6996,028
코드는 시간 순서나 성과 순위가 아닙니다. 각 행의 결과 4개 개수 합계는 전체 기록 수이며, 수신자는 서로 다른 뉴스레터에 나타날 수 있습니다.

이 차이는 최고의 뉴스레터 소재를 식별하지 않습니다. 프로젝트가 다르고 같은 수신자가 반복될 수 있으며, 새 분석은 원래 처치 집단을 합칩니다. 뉴스레터별 유의성 검정이나 특정 프로젝트가 더 강한 겹침의 원인이라는 주장은 없습니다.

여러 캠페인을 운영한다면 통합 보고서와 함께 캠페인 세부 정보도 유지하세요. 캠페인 1개를 어떻게 바꿀지 결정할 때는 그 캠페인의 행과 개수에서 시작하세요. 캠페인 전체를 보고할 때는 통합 표를 유지하세요. 결과를 본 뒤 유리한 캠페인을 골라서는 안 됩니다.

수신자마다 같은 가중치를 주면 무엇이 달라지나요?

주요 비교는 수신자–뉴스레터 기록마다 같은 가중치를 줍니다. 뉴스레터 10개에 나타나는 수신자는 기록 10개를, 1번 나타나는 사람은 기록 1개를 제공합니다. 공개 기록 설명에 적절하지만 가능한 요약은 이것만이 아닙니다.

사전 지정 보조 비교에서는 수신자 코드마다 총가중치 1을 줍니다. 뉴스레터 10개에 나타나면 기록당 1/10, 1번 나타나면 1을 기여합니다. 코드별 총가중치가 같아집니다. 국가나 시장의 대표 표본이 되는 것은 아닙니다.

이 가중치에서는 투자 가중치의 51.69%에 클릭 플래그도 있으며 주요 분석은 53.52%입니다. 반대 방향 비율은 19.12%로 주요 분석의 17.91%와 비교됩니다. 요약 2개를 모두 유지합니다. 보조 결과는 설명 대상이 다른 것이며 선호하는 결과라서 선택한 보정이 아닙니다.

같은 전체 파일에 가중치를 주는 2가지 방법

주요 분석: 수신자–뉴스레터 기록별 동일 가중치. 보조 분석: 수신자 코드별 동일 총가중치.

같은 전체 파일에 가중치를 주는 2가지 방법
가중치 방식투자 중 클릭투자 중 클릭 없음클릭 중 투자기록된 클릭률기록된 투자율
기록별 동일 가중치(주요)53.52%46.48%17.91%3.30%1.10%
수신자별 동일 가중치(보조)51.69%48.31%19.12%4.02%1.49%
처음 3개 열은 명시한 결과 분모를, 마지막 2개는 전체 기록 또는 전체 수신자 가중치를 사용합니다. 보조 비율은 가중 합계로 계산한 값이며 개인별 수신자 비율의 평균이 아닙니다. 모집단 추론은 없습니다.

수신자별 동일 가중치의 전체 보조 표

수신자 코드 7,864개 각각이 원자료 기록 전체에 걸쳐 총가중치 1을 기여합니다.

수신자별 동일 가중치의 전체 보조 표
기록된 조합가중 합계전체 수신자 가중치 중 비율
클릭·투자60.40790.77%
클릭만255.50673.25%
투자만56.46270.72%
플래그 2개 모두 없음7,491.622695.26%
가중 합계는 1/k 기여의 합이며 각 행동을 한 고유한 사람 수가 아닙니다. 반올림 전 합계는 7,864입니다. 설명 대상이 다른 이 표는 모든 원자료 기록을 유지합니다.

가중 셀 합계에는 1/2, 1/10 같은 기여를 더하므로 분수가 포함됩니다. 합계는 수신자 코드 수인 7,864입니다. 사람의 일부나 각 행동을 한 고유 투자자의 수로 설명해서는 안 됩니다.[3]

자체 보고서에서 클릭과 결과를 비교하는 양식

캠페인을 퍼널로 해석하기 전에 짧은 측정 브리프를 쓰세요. 가입 없이 쓸 수 있는 아래 양식은 자체 보고 계획용입니다. 과거 데이터셋이 같은 정의를 썼다거나 측정을 바꾸면 판매가 개선된다고 가정하지 않습니다.

결정: ‘[캠페인]에서 [메시지, 제안 또는 보고 결정]을 정하고 싶습니다.’ 편리한 비율을 고르기 전에 결정을 선택하세요.

단위와 기준: ‘행 1개는 [수신자–캠페인, 방문 또는 근거가 있는 다른 단위]입니다. 적격 기준은 [정의]입니다. 반복 이벤트와 반복 수신자는 [규칙]으로 처리합니다.’ 이벤트 수와 식별자 수를 구분하세요.

행동: ‘클릭은 [구체적인 기록 이벤트]입니다. 결과는 [등록, 적격 문의, 완료 구매 또는 정의한 다른 행동]입니다.’ 취소, 환불, 시험 이벤트, 중복을 어떻게 처리할지 정하세요.

연결과 시점: ‘[허용된 식별자]로 기록을 연결합니다. 클릭은 [구간], 결과는 [구간]에 관찰합니다. [확보된 타임스탬프]로 순서를 확인할 수 있습니다.’ 연결이나 타임스탬프가 없으면 가정한 여정으로 빈틈을 채우지 말고 없다고 밝히세요.

보고: ‘클릭만, 결과만, 둘 다, 둘 다 아님과 적격 기준을 보여 주겠습니다. 조건부 비율에는 분모를 명시하겠습니다.’ 확인 불가·미연결 기록을 조용히 ‘둘 다 아님’으로 부르지 말고 별도 보고 문제로 드러내세요.

활용: ‘이 보고서는 [관찰된 관계]를 설명합니다. [캠페인이 더 많은 결과의 원인이었다]고 주장하려면 [적절한 비교 설계]가 필요합니다.’ 겹침 표 자체가 그 인과 비교를 제공하지는 않습니다.

조합 4개를 모두 드러내세요

같은 크기의 트레이 4개에 포인터 봉투와 체크된 결과 토큰 모두, 봉투만, 결과 토큰만, 빈 트레이가 표시됩니다. 별도의 작은 트레이에는 연결되지 않은 기록 카드 2개가 있습니다.
  1. 같은 기록을 정의하세요

    적격 단위, 행동, 연결 규칙, 구간을 명시하세요.

  2. 모든 조합을 유지하세요

    행동 둘 다, 각각만, 둘 다 아님을 보여 주고 미연결 기록은 따로 식별하세요.

  3. 분모를 명시하세요

    비율이 전체 기록, 클릭 기록, 결과 기록 중 어디서 시작하는지 밝히세요.

보고 계획을 위한 개념도입니다. 사건 순서나 연구 비율을 나타내지 않습니다. 실제 보고 체계에서 미연결 기록은 따로 처리해야 합니다.

적용 예시: 워크숍 등록을 보고하는 크리에이터

적격 수신자–캠페인 기록 1,000개가 있는 가상의 크리에이터를 생각해 보겠습니다. 정의한 구간과 허용된 연결 과정에서 클릭 기록 80개, 등록 기록 30개, 둘 다 있는 기록 18개가 나온다고 가정합니다. 설명용 가상 값이며 크라우드펀딩 데이터의 다른 결과가 아닙니다.

전체 표에는 둘 다 18개, 클릭만 62개, 등록만 12개, 둘 다 아님 908개가 있습니다. 클릭률은 80을 1,000으로 나눈 8%, 등록률은 30을 1,000으로 나눈 3%입니다.

클릭 플래그 기록 중 등록도 있는 경우는 80개 중 18개로 22.5%입니다. 등록 플래그 기록 중 클릭도 있는 경우는 30개 중 18개로 60%입니다. 크리에이터는 같은 것을 측정한다고 암시하지 않으면서 수치 4개를 모두 보고할 수 있습니다.

등록만 있는 기록 12개는 경로 근거가 확보될 때까지 중립적으로 설명해야 합니다. 타임스탬프로 클릭이 등록보다 앞섰다고 확인해도 순서만으로 뉴스레터가 원인이었다고 입증되지는 않습니다. 표를 매출 증가 추정치로 취급하지 않고 다음 질문을 구체화하는 데 쓸 수 있습니다.

유용하게 완성한 브리프는 이렇게 적습니다. ‘이 캠페인과 이 구간의 기록된 등록 겹침을 설명합니다. 범주 4개를 모두 유지하고 조건부 분모 2개를 제시하며 연결할 수 없는 기록은 따로 보고하겠습니다.’ 아무도 분모를 알 수 없는 전환율 라벨보다 행동으로 옮기기 쉽습니다.

Influence IQ는 겹침을 어떻게 계산했나요?

저자들의 버전 1 공개 자료에서 최종 Stata 데이터셋 전체를 사용했습니다. 결합 결과 계산 전에 파일 식별 정보, 필수 숫자 필드 7개, 고유 수신자–뉴스레터 쌍 55,357개 전체, 수신자 코드 7,864개, 뉴스레터 코드 10개를 확인했습니다. 플래그 2개는 모두 있어야 하며 정확히 0 또는 100이어야 했습니다.[2]

처치 집단 3개의 개수를 확인하고 논문의 반올림된 주변 클릭·투자 비율을 재현했습니다. 기록을 제거하거나 대체하거나 중복 제거하지 않았습니다. 그다음 전체와 뉴스레터별로 조합 4개를 모두 세고 고정된 수신자별 동일 가중치로 같은 값을 계산했습니다.

독립적으로 작성한 구현 2개는 같은 개수와 정확한 분수를 산출했습니다. 다운로드 패키지에는 독자적인 계산 코드, 방법, 집계 표 전체가 있습니다. 원시 기록과 수신자 식별자는 제외합니다. 원본 파일은 저자들에게 별도로 확보하고 출처 표시를 유지하세요.

공개 파일을 전수 집계한 결과에 표본추출 신뢰구간을 붙이지 않습니다. 해당 기록의 정확한 개수이지만 더 넓은 모집단에 대한 정밀성을 확정하지는 않습니다. 공유 수신자·프로젝트는 일반화에 중요하며 이 연구는 일반화를 시도하지 않습니다.

실무 기여는 기록된 겹침 전체와 다음 측정 질문을 명확히 하는 방법입니다. 저자들의 원실험을 보완하며 대체하지 않습니다. 캠페인 결정에서는 보고 전환율의 의미를 정하기 전에 결과, 기준 집단, 연결 규칙, 시간 구간을 정의하세요.

CSV는 이 페이지의 언어를 사용합니다. 패키지에는 독자적인 코드, 번역된 방법 문서, 집계 결과가 있습니다. 원시 기록과 수신자 식별자는 제외하며, 데이터는 저자들의 공개 자료에서 따로 확보해야 합니다.

출처 및 주석

  1. Hornuf, Lars와 Christoph Siemroth(2023), A field experiment on attracting crowdfunders, Economics Letters 222, 110928. 2–3절은 뉴스레터 10개, 관찰 단위, 결과 플래그를 정의하며 표 1–2는 공개 코호트·주변 비율 대조값을 제공합니다. 원연구는 프레이밍 효과를 검증합니다. Influence IQ의 새 분석은 기록 결과의 결합을 설명합니다.
  2. Hornuf와 Siemroth, 버전 1 데이터 공개, 2023년 4월 17일, DOI 10.17632/9prftpkdfc.1, CC BY 4.0. SubscriberNumber, NewsletterNumber, treatmentcontrol, treatmenteco, treatmentreturn, ClickPercent, InvestmentPercent를 사용합니다. 신원을 식별하는 값 라벨과 다른 필드는 사용하지 않습니다. 검토한 출처에서 대응하는 관찰 구간, 사건 순서, 취소 규칙은 확인되지 않았습니다.
  3. 원자료 뉴스레터 k개에 나타난 수신자는 보조 분석에서 기록마다 1/k 가중치를 받습니다. 주요 분석은 기록마다 가중치 1을 줍니다. 둘 다 공개 표본 전체를 사용합니다. 원자료 수신자 코드는 묶음에 쓰이지만 고유한 자연인을 독립적으로 인증하지는 않습니다. 표시 반올림 전에 정확한 분수를 계산합니다. 뉴스레터 코드 10개는 시간 순서를 부여하지 않고 원래 순서를 유지합니다.

영어 기사가 원문입니다. 모든 언어 버전은 같은 과거 독일 크라우드펀딩 기록을 설명하며 국가별·업계별 별도 기준치가 아닙니다.

관련 Influence IQ 연구