리텐션 보고서

사용자 리텐션은 모든 마케터에게 가장 중요한 측정기준 중 하나입니다. 참여도가 높은 사용자가 계속 돌아온다는 것은 비즈니스가 건강하다는 것을 의미합니다. Braze를 사용하면 Campaign 또는 Canvas의 분석 페이지에서 바로 사용자 리텐션을 측정할 수 있습니다.

리텐션 보고서 실행하기

1단계: 날짜 범위 선택

먼저 Braze 대시보드에서 Campaign 또는 Canvas로 이동한 다음 보고서의 날짜 범위를 선택합니다. 적절한 날짜 범위를 선택하는 것은 리텐션 보고서에 영향을 미치므로 매우 중요합니다.

이 보고서에는 해당 기간 동안 Campaign 또는 Canvas에 처음 진입한 모든 사용자가 포함되며, 그 사용자 중 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 데이터가 보고서에 표시됩니다.

날짜 범위를 선택하려면 Campaign 또는 Canvas 분석 페이지로 이동하여 다양한 범위를 선택하거나 보고서에 대한 커스텀 범위를 설정합니다.

2단계: 리텐션 이벤트 선택

• campaign
• canvas

3단계: 보고서 생성

리텐션 이벤트를 선택한 후 리포트 실행을 선택하여 쿼리를 시작합니다.

이 쿼리는 결과를 생성하기 위해 검색해야 하는 데이터 양에 따라 실행하는 데 몇 분이 걸릴 수 있습니다. 시간이 너무 오래 걸리면 보고서를 다시 로드하라는 알림이 표시됩니다. 보고서가 로드되기까지 최대 5분을 기다려야 할 수 있습니다.

보고서가 생성된 후에는 동일한 리텐션 이벤트로 24시간 동안 다시 실행할 수 없습니다. 보고서가 마지막으로 생성된 시간의 타임스탬프와 하루 이상 경과한 경우 재생성 옵션이 항상 표시됩니다. 그러나 리텐션 이벤트를 변경하고 보고서를 다시 실행하여 Campaign이 다른 KPI에 미치는 영향을 확인할 수 있습니다.

보고서에는 Campaign 또는 Canvas가 메시지를 발송한 날짜만 표시됩니다. 일부 Campaign 및 Canvases의 경우 한 번만 발송되었다면 보고서에 하루만 표시될 수 있습니다. 반복 또는 트리거 방식인 경우 테이블에 여러 날짜가 표시될 수 있습니다.

• campaign
• canvas

보고서 설명

리텐션 보고서는 롤링 리텐션과 범위 리텐션 공식을 모두 제공합니다. Campaign 또는 Canvas 보고서를 이러한 리텐션 유형 중 하나로 보려면 리텐션 유형에서 롤링 리텐션 또는 범위 리텐션을 선택합니다.

롤링 리텐션

롤링 리텐션은 보고서 상단에 나열된 날짜 중 해당 날짜 이후에 리텐션 이벤트를 수행한 사용자 수를 측정합니다. 따라서 사용자가 3일에서 7일 사이에 세션을 시작한 경우, 해당 사용자는 “3일”, “1일”, “0일” 열에서 유지된 것으로 집계됩니다. Campaign 또는 Canvas가 발송된 후 30일 이후에 유지된 것으로 집계된 사용자는 해당 행의 “30일” 열에 집계됩니다.

30일 이상의 기간 동안 이벤트를 여러 번 완료한 사용자는 여러 시간 프레임에 집계됩니다. 예를 들어, 1일 후에 세션을 완료한 사용자는 >0 및 >1 열에서 증가합니다. 그런 다음 3일 후에 이벤트를 완료하면 이전 열(>0 및 >1)에서도 다시 증가하므로 유지율이 100%를 초과할 수 있습니다.

롤링 리텐션 보고서 읽는 방법

3일 열에 대한 리텐션 보고서 차트를 읽는 방법은 다음과 같습니다: Y% 또는 Y명의 사용자(선택한 단위 기준)가 Z일에 Campaign을 수신한 후 3일 이상 후에 이벤트를 수행했습니다.

또 다른 예로, 위 이미지의 테이블을 참조하면 3월 25일에 총 38명의 사용자가 리텐션 이벤트를 수행했습니다. 0일 리텐션은 68.42%로, Campaign을 수신한 후 0일 이상(0일 또는 그 이후)에 68.42%의 사용자가 리텐션 이벤트를 수행했음을 의미합니다. 7일 리텐션은 57.89%로, Campaign을 수신한 후 7일 이상(7일 또는 그 이후)에 57.89%의 사용자가 이벤트를 수행했음을 의미합니다.

이 정보는 처음 사용 후 30일 이상 제품을 사용한 사용자와 사용하지 않은 사용자의 비율을 알고 싶을 때 유용합니다. 30일 열의 백분율 또는 숫자 값은 30일 이후에 돌아온 사용자의 비율을 알려줍니다.

범위 리텐션

범위 리텐션은 보고서 상단에 나열된 날짜 범위 내에 돌아온 사용자 수를 측정합니다. 따라서 사용자가 3일에서 7일 사이에 세션을 시작하고 13일에 다시 시작한 경우, “3-7일” 및 “7-14일” 범위 모두에서 유지된 것으로 집계됩니다.

범위 리텐션 보고서 읽는 방법

범위 보고서는 가장 직관적으로 읽을 수 있는 보고서 중 하나입니다. 코호트의 모든 사용자 중 주어진 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 비율을 명확하게 보여줍니다. 예를 들어, 다음 이미지에서 모든 사용자 코호트를 참조하면 “0일(0-24시간)” 날짜 범위에서 코호트의 35.71%가 리텐션 이벤트를 수행했습니다. 사용자가 여러 날짜 범위에서 여러 리텐션 이벤트를 수행한 경우 각 범위에서 유지된 것으로 집계됩니다.

리텐션 보고서 구성요소

• 사용자 열: 표시되는 값은 선택한 기간 내에 시작 동작을 수행한 고유 사용자 수입니다. 현재 날짜의 사용자 수는 계산 중이므로 제외됩니다.
• 코호트 Z 행: Campaign 또는 Canvas가 메시지를 발송한 날짜를 보여줍니다.
• X일 열: 다양한 간격으로 0일에서 30일까지의 기간입니다.
• 모든 사용자 행: 보고서 요약 행이라고도 하며, 전체 기간에 대한 리텐션 데이터를 요약합니다. 사용자가 여러 코호트에서 Campaign 또는 Canvas를 수신한 경우 결과가 여기에서 두 번 집계됩니다.
• 백분율/숫자: Campaign 또는 Canvas를 Z일에 수신한 후 X일 이상 후에 이벤트를 수행한 사용자의 백분율 또는 숫자를 보여줍니다. 이 백분율은 가중 평균 백분율입니다. 불완전한 값은 별표로 표시됩니다.
• 날짜 범위: Campaign 또는 Canvas 세부 정보 페이지에서 설정하며, 이 기간 동안 Campaign 또는 Canvas를 수신한 모든 사용자가 포함되고, 그 사용자 중 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 데이터가 보고서에 표시됩니다.
• 단위: 차트 오른쪽 상단에서 사용자 백분율과 사용자 수 사이의 단위를 조정할 수 있으며, 특정 단위가 Campaign 또는 Canvas의 영향을 판단할 때 더 의미 있을 수 있습니다.
• 색상 매핑: 리텐션 보고서에서 더 높은 백분율 또는 사용자 수에는 더 진한 파란색이 지정됩니다. 더 낮은 백분율 또는 사용자 수에는 더 연한 파란색이 지정됩니다. 이는 사용자가 이 데이터를 시각화하는 데 도움을 주기 위한 것입니다.
• 리텐션 보고서 그래프: 이 그래프는 선택한 날짜 범위에 대한 모든 코호트의 결과를 요약합니다.

배리언트별 성과

배리언트별 리텐션 보고서를 보면 선택한 기간에 대해 각 배리언트 또는 메시지 변형과 대조군의 롤링 리텐션을 비교할 수 있습니다. 이 보고서는 성과 표시 기준을 배리언트별로 전환하여 볼 수 있습니다.

배리언트별 성과를 보는 몇 가지 활용 사례:

• 일부 배리언트나 실험의 결과가 효과가 없거나 통계적 유의성이 없는 것처럼 보이나요? 다시 살펴보고 하나가 더 장기적인 영향을 미쳤는지 확인해 보세요.
• 대조군의 리텐션 데이터를 분석하여 메시지를 보내지 않았을 때 리텐션이 어떤 모습인지 확인해 보세요.

• campaign
• canvas

배리언트별 리텐션 보고서 구성요소

• 날짜 범위: Campaign 또는 Canvas 세부 정보 페이지에서 설정하며, 이 기간 동안 Campaign 또는 Canvas를 수신한 모든 사용자가 포함되고, 그 사용자 중 날짜 범위 내에 리텐션 이벤트를 수행한 사용자의 데이터가 보고서에 표시됩니다. 매일 유지율, 대조군 대비 백분율 변화, 신뢰도가 측정됩니다.
• 유지율: 배리언트별 유지율을 보여줍니다. 유지율은 리텐션 이벤트를 수행한 사용자 수를 Campaign 또는 Canvas를 수신한 총 사용자 수로 나눈 값과 같습니다.
• 대조군 대비 백분율 변화: 대조군 대비 배리언트별 백분율 변화를 수량화합니다.
• 신뢰도:

신뢰도는 메시지의 특정 배리언트가 대조군보다 성능이 우수하다는 신뢰도의 백분율입니다.

Braze는 Z 검정이라는 통계적 절차를 사용하여 각 배리언트의 전환율을 대조군의 전환율과 비교하여 신뢰도 백분율을 계산합니다.

• 단위: 차트 오른쪽 상단에서 사용자 백분율과 사용자 수 사이의 단위를 조정할 수 있으며, 특정 단위가 Campaign 또는 Canvas의 영향을 판단할 때 더 의미 있을 수 있습니다.
• 배리언트 그래프: 이 그래프는 선택한 날짜 범위에 대한 배리언트별 결과를 요약합니다.

리텐션 보고서에서 확인할 사항

리텐션 보고서는 생성하기는 간단하지만 해석하고 실행에 옮기기는 어렵습니다. 다음 주제와 질문은 리텐션 보고서를 더 잘 활용하는 데 도움이 될 수 있습니다.

• 반복 Campaign의 요일별 트렌드를 고려해 보세요(예: 월요일 코호트가 토요일 코호트보다 더 좋은 성과를 보이나요?).
• 영향이 감소하기 시작하는 시점은 어디인가요? 이는 해당 시점의 사용자를 타겟으로 하는 새로운 Campaign 또는 Canvas가 리텐션을 높이기 위한 추가 부스트로 필요하다는 신호일 수 있습니다.
• 메시지 피로도가 나타나고 있나요?
• X일 전에 Campaign 또는 Canvas에 대해 수행한 특정 최적화가 긍정적인 영향을 미쳤나요?