리텐션 보고서

사용자 리텐션은 모든 마케터에게 가장 중요한 측정기준 중 하나입니다. 참여도가 높은 사용자가 계속 돌아온다는 것은 비즈니스가 건강하다는 것을 의미합니다. Braze를 사용하면 Campaign 또는 Canvas의 Analytics 페이지에서 바로 사용자 리텐션을 측정할 수 있습니다.

리텐션 보고서 실행하기

리텐션 보고서 확인 위치

• campaign
• canvas

1단계: 날짜 범위 선택

Braze 대시보드에서 Campaign 또는 Canvas로 이동하여 보고서의 날짜 범위를 선택합니다. 적절한 날짜 범위를 선택하는 것은 리텐션 보고서에 영향을 미치는 방식 때문에 매우 중요합니다.

이 보고서에는 이 기간 동안 Campaign 또는 Canvas에 처음 진입한 모든 사용자가 포함되며, 해당 사용자 중 날짜 범위 내에 유지 이벤트를 수행한 사용자의 데이터가 보고서에 표시됩니다.

날짜 범위를 선택하려면 Campaign 또는 Canvas 분석 페이지로 이동하여 다양한 범위를 선택하거나 보고서의 커스텀 범위를 설정합니다.

2단계: 유지 이벤트 선택

• campaign
• canvas

3단계: 보고서 생성

유지 이벤트를 선택한 후 리포트 실행을 선택하여 쿼리를 시작합니다.

이 쿼리는 결과를 생성하기 위해 검색해야 하는 데이터의 양에 따라 실행하는 데 몇 분이 걸릴 수 있습니다. 시간이 너무 오래 걸리면 보고서 로드를 다시 시도하라는 알림이 표시됩니다. 보고서가 로드되기까지 최대 5분이 소요될 수 있습니다.

보고서가 생성된 후에는 동일한 유지 이벤트로 24시간 동안 다시 실행할 수 없습니다. 보고서가 마지막으로 생성된 시점의 타임스탬프와 하루 이상 경과한 경우 재생성할 수 있는 옵션이 항상 표시됩니다. 다만 유지 이벤트를 변경하고 보고서를 다시 실행하여 Campaign이 다양한 KPI에 미치는 영향을 확인할 수 있습니다.

보고서에는 Campaign 또는 Canvas가 메시지를 전송한 날짜만 표시됩니다. 일부 Campaigns 및 Canvases의 경우 한 번만 전송되었다면 보고서에 하루만 표시될 수 있습니다. 반복 또는 트리거 방식인 경우 테이블에 여러 날짜가 표시될 수 있습니다.

• campaign
• canvas

리포트 설명

리텐션 리포트는 롤링 리텐션과 범위 리텐션 공식을 모두 제공합니다. Campaign 또는 Canvas 리포트를 이러한 리텐션 유형 중 하나로 보려면 리텐션 유형에서 롤링 리텐션 또는 범위 리텐션을 선택하세요.

롤링 리텐션

롤링 리텐션은 리포트 상단에 나열된 날짜 중 해당 날짜 이후에 리텐션 이벤트를 수행한 사용자가 몇 명인지를 측정합니다. 예를 들어, 사용자가 3일에서 7일 사이에 세션을 시작한 경우, 해당 사용자는 “3일”, “1일”, “0일” 열에 유지된 것으로 집계됩니다. Campaign 또는 Canvas가 발송된 후 30일 이후에 유지된 것으로 집계된 사용자는 해당 행의 “30일” 열에 집계됩니다.

30일 이상의 기간 동안 이벤트를 여러 번 수행한 사용자는 여러 기간에 포함되어 집계됩니다. 예를 들어, 1일 후에 세션을 완료한 사용자는 >0 및 >1 열에서 증가합니다. 이후 3일 후에 이벤트를 다시 완료하면 이전 열(>0 및 >1)에서도 다시 증가하므로 유지율이 100%를 초과할 수 있습니다.

롤링 리텐션 리포트 읽는 방법

리텐션 리포트 차트에서 3일 열을 읽는 방법은 다음과 같습니다: Z일에 Campaign을 수신한 후 3일 이상 이벤트를 수행한 사용자가 Y% 또는 Y명(선택한 단위 기준)입니다.

또 다른 예로, 위 이미지의 표를 참고하면 3월 25일에 총 38명의 사용자가 리텐션 이벤트를 수행했습니다. 0일 유지율은 68.42%로, Campaign을 수신한 후 0일 이상(0일 또는 그 이후)에 리텐션 이벤트를 수행한 사용자가 68.42%라는 뜻입니다. 7일 유지율은 57.89%로, Campaign을 수신한 후 7일 이상(7일 또는 그 이후)에 이벤트를 수행한 사용자가 57.89%라는 뜻입니다.

이 정보는 첫 사용 후 30일 이상 제품을 사용한 사용자와 사용하지 않은 사용자의 비율을 파악하고자 할 때 유용합니다. 30일 열의 백분율 또는 숫자 값은 30일 이후에 복귀한 사용자의 비율을 나타냅니다.

범위 리텐션

범위 리텐션은 리포트 상단에 나열된 날짜 범위 내에 복귀한 사용자 수를 측정합니다. 예를 들어, 사용자가 3일에서 7일 사이에 세션을 시작하고 13일에 다시 세션을 시작한 경우, 해당 사용자는 “3-7일” 및 “7-14일” 범위 모두에서 유지된 것으로 집계됩니다.

범위 리텐션 리포트 읽는 방법

범위 리포트는 가장 직관적으로 읽을 수 있는 리포트 중 하나입니다. 코호트 내 전체 사용자 중 지정된 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 비율을 명확하게 보여줍니다. 예를 들어, 아래 이미지에서 전체 사용자 코호트를 참고하면, “0일(0-24시간)” 날짜 범위에서 코호트의 35.71%가 리텐션 이벤트를 수행했습니다. 사용자가 여러 날짜 범위에 걸쳐 리텐션 이벤트를 여러 번 수행한 경우, 각 범위에서 유지된 것으로 집계됩니다.

리텐션 리포트 구성 요소

• 사용자 열: 표시되는 값은 선택한 기간 내에 시작 작업을 수행한 고유 사용자 수이며, 당일 사용자 수는 계산 중이므로 제외됩니다.
• 코호트 Z 행: Campaign 또는 Canvas가 메시지를 발송한 날짜를 표시합니다.
• X일 열: 다양한 간격으로 0일에서 30일까지의 기간을 나타냅니다.
• 전체 사용자 행: 리포트 요약 행이라고도 하며, 전체 기간의 리텐션 데이터를 요약합니다. 사용자가 여러 코호트에서 Campaign 또는 Canvas를 수신한 경우, 해당 결과가 여기에 중복 집계됩니다.
• 백분율/숫자: Z일에 Campaign 또는 Canvas를 수신한 후 X일 이상 이벤트를 수행한 사용자의 백분율 또는 수를 표시합니다. 이 백분율은 가중 평균 백분율입니다. 불완전한 값은 별표(*)로 표시됩니다.
• 날짜 범위: Campaign 또는 Canvas 세부 정보 페이지에서 설정하며, 이 기간 동안 Campaign 또는 Canvas를 수신한 모든 사용자가 포함되고, 해당 사용자 중 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 데이터가 리포트에 표시됩니다.
• 단위: 차트 컨트롤에서 사용자 백분율과 사용자 수 사이를 전환할 수 있으며, Campaign 또는 Canvas의 영향을 판단할 때 특정 단위가 더 유의미할 수 있습니다.
• 색상 매핑: 리텐션 리포트에서 높은 백분율 또는 사용자 수에는 더 진한 파란색이 할당됩니다. 낮은 백분율 또는 사용자 수에는 더 연한 파란색이 할당됩니다. 이는 사용자가 데이터를 시각적으로 파악할 수 있도록 하기 위한 것입니다.
• 리텐션 리포트 그래프: 이 그래프는 선택한 날짜 범위에 대해 모든 코호트의 결과를 요약합니다.

배리언트별 성능

배리언트별로 리텐션 리포트를 조회하면 선택한 기간에 대해 각 배리언트 또는 메시지 변형과 대조군의 롤링 리텐션을 비교할 수 있습니다. 이 리포트는 성능 표시 기준을 배리언트별로 전환하여 조회할 수 있습니다.

배리언트별 성능 표시의 사용 사례:

• 결과가 효과가 없어 보이거나 통계적 유의성이 없는 배리언트나 실험이 있나요? 다시 한번 살펴보고 둘 중 하나가 장기적인 영향을 미쳤는지 확인해 보세요.
• 대조군의 리텐션 데이터를 분석하여 메시지를 발송하지 않았을 때의 리텐션이 어떤 모습인지 확인해 보세요.

• campaign
• canvas

배리언트별 리텐션 리포트 구성 요소

• 날짜 범위: Campaign 또는 Canvas 세부 정보 페이지에서 설정하며, 이 기간 동안 Campaign 또는 Canvas를 수신한 모든 사용자가 포함되고, 해당 사용자 중 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 데이터가 리포트에 표시됩니다. 매일 유지율, 대조군 대비 변동률, 신뢰도가 측정됩니다.
• 유지율: 배리언트별 유지율을 표시합니다. 유지율은 리텐션 이벤트를 수행한 사용자 수를 Campaign 또는 Canvas를 수신한 전체 사용자 수로 나눈 값입니다.
• 대조군 대비 변동률: 대조군 대비 각 배리언트의 변동률을 수치화합니다.
• 신뢰도:

신뢰도는 메시지의 특정 배리언트가 대조군보다 성능이 우수하다는 신뢰도의 백분율입니다.

Braze는 각 배리언트의 전환율을 대조군의 전환율과 Z 테스트라는 통계 절차를 사용하여 비교하고 신뢰도 백분율을 계산합니다.

• 단위: 차트 컨트롤에서 사용자 백분율과 사용자 수 사이를 전환할 수 있으며, Campaign 또는 Canvas의 영향을 판단할 때 특정 단위가 더 유의미할 수 있습니다.
• 배리언트 그래프: 이 그래프는 선택한 날짜 범위에 대해 배리언트별 결과를 요약합니다.

리텐션 보고서에서 확인해야 할 사항

리텐션 보고서는 생성하기는 간단하지만, 해석하고 실행에 옮기기는 어려울 수 있습니다. 다음 주제와 질문을 통해 리텐션 보고서를 더 효과적으로 활용할 수 있습니다.

• 반복 Campaign의 요일별 트렌드를 고려하세요 (예: 월요일 코호트가 토요일 코호트보다 더 좋은 성과를 보이나요?).
• 영향이 감소하기 시작하는 시점은 언제인가요? 이는 해당 시점에 사용자를 타겟팅하는 새로운 Campaign이나 Canvas가 유지율을 높이기 위한 추가 수단으로 필요하다는 신호일 수 있습니다.
• 메시지 피로도가 나타나고 있나요?
• X일 전에 Campaign이나 Canvas에 적용한 특정 최적화가 긍정적인 영향을 미쳤나요?