Skip to content

글로벌 컨트롤 그룹

글로벌 컨트롤 그룹을 사용하여 캠페인이나 캔버스를 수신해서는 안 되는 전체 사용자의 비율을 지정하면 시간에 따른 메시징 활동의 전반적인 영향을 분석할 수 있습니다.

메시징을 받은 사용자와 그렇지 않은 사용자의 행동을 비교함으로써 마케팅 캠페인과 캔버스가 세션과 커스텀 이벤트의 증가로 이어지는 방식을 더 잘 이해할 수 있습니다.

글로벌 컨트롤 그룹의 작동 방식

글로벌 컨트롤 그룹을 사용하면 전체 사용자 중 일정 비율을 대조군으로 설정할 수 있습니다. 저장되면 그룹의 사용자는 캠페인이나 캔버스를 받지 못합니다.

글로벌 컨트롤 그룹에 사용자를 무작위로 할당합니다.

Braze는 여러 범위의 무작위 버킷 번호를 무작위로 선택하고 선택한 버킷의 사용자를 포함합니다. 현재 다른 용도로 무작위 버킷 번호를 사용하고 있다면 주의해야 할 사항을 확인하세요.

글로벌 컨트롤 그룹이 생성되면 무작위 버킷 번호를 가진 모든 사용자가 이 그룹에 속하게 됩니다. 또한 이 시점 이후에 가입하는 신규 사용자(글로벌 컨트롤 그룹이 생성된 이후에 가입한 사용자)도 이러한 무작위 버킷 번호를 가지고 있으면 글로벌 컨트롤 그룹에 추가됩니다. 마찬가지로 많은 사용자가 삭제되면 삭제된 사용자 중 일부가 이 그룹에 속하게 되므로 글로벌 컨트롤 그룹의 크기가 줄어들 것으로 예상할 수 있습니다. 이렇게 하면 전체 사용 기반에 비해 그룹의 크기가 일정한 비율로 유지됩니다.

보고를 위해 사용자를 치료 그룹에 무작위로 할당합니다.

향상에 대한 보고를 강화하기 위해 Braze는 치료 그룹도 생성합니다. 대조군은 글로벌 컨트롤 그룹에 속하지 않은 무작위로 선택된 사용자 그룹으로, 글로벌 컨트롤 그룹과 동일한 무작위 버킷 번호 방식을 사용하여 생성됩니다.

치료 그룹은 글로벌 컨트롤 그룹과 규모가 비슷하지만 정확히 같은 규모는 아닐 수 있습니다. 보고를 위해 Braze는 대조군에 속한 사용자와 치료 샘플에 속한 사용자의 행동을 측정합니다. 각 작업 공간에는 최대 하나의 글로벌 컨트롤 그룹과 하나의 치료 샘플 그룹이 있습니다. 치료 대조군은 글로벌 컨트롤 보고를 구성하는 방법에 관계없이 동일한 사용자 그룹입니다.

기능 플래그에서 사용자 제외하기

글로벌 컨트롤 그룹에 속한 사용자에게는 기능 플래그를 인에이블먼트할 수 없습니다. 즉, 글로벌 컨트롤 그룹의 사용자도 기능 플래그 실험에 참여할 수 없습니다.

글로벌 컨트롤 그룹에서 사용자 제외하기

글로벌 컨트롤 그룹에서 특정 사용자를 제거할 수는 없지만, 특정 태그가 있는 캠페인과 캔버스가 글로벌 컨트롤 그룹을 사용하지 않도록 제외 설정을 추가할 수 있습니다. 글로벌 컨트롤 그룹을 비활성화했다가 다시 활성화하여 멤버십을 뒤섞을 수도 있습니다. 사용자 셔플의 이상적인 기간은 실행 중인 테스트 유형에 따라 다르지만, 한 달에 한 번 이상 셔플하지 않는 것이 좋습니다.

글로벌 컨트롤 그룹 만들기

1단계: 글로벌 컨트롤 그룹 설정으로 이동합니다.

대시보드에서 오디언스 > 글로벌 컨트롤 그룹으로 이동합니다 .

2단계: 모든 사용자의 비율을 이 대조군에 할당합니다.

대조군에 대한 백분율을 입력하고 저장을 선택합니다. 입력하면 Braze는 글로벌 컨트롤, 치료 및 치료 샘플에 포함될 사용자 수에 대한 예상치를 표시합니다. 워크스페이스에 사용자가 많을수록 이 추정치는 더 정확해진다는 점에 유의하세요.

글로벌 컨트롤 그룹의 사용자 수는 초기 설정 후 워크스페이스에 사용자가 더 추가되면 이 비율에 비례하여 유지되도록 자동으로 업데이트됩니다. 또한 글로벌 컨트롤 그룹이 설정된 이후에 가입한 사용자 중 무작위 버킷 번호를 가진 사용자도 글로벌 컨트롤 그룹에 추가됩니다. 많은 사용자가 추가되면 글로벌 컨트롤 그룹의 규모가 커져 전체 사용자 기반에 비해 일정한 비율을 유지하게 됩니다. 글로벌 컨트롤 그룹의 규모가 커져도 이전에 그룹에 속해 있던 사용자는 그룹을 비활성화하고 새 그룹을 만들어 변경하지 않는 한 그룹에 계속 남아 있게 됩니다.

비율 가이드라인은 테스트 모범 사례를 참조하세요.

글로벌 컨트롤 그룹 설정의 오디언스 설정이 “전체 사용자의 5%를 글로벌 컨트롤 그룹에 할당”으로 설정되어 있습니다.](/docs/ko/assets/img/control_group/control_group4.png?90243b6b67086ca284e91e939770ec4c)

3단계: 제외 설정 지정

태그를 사용하여 글로벌 컨트롤 그룹에 제외 설정을 추가하세요. 제외 설정에 포함된 태그를 사용하는 캠페인이나 캔버스는 글로벌 컨트롤 그룹을 사용하지 않습니다. 이러한 캠페인과 캔버스는 글로벌 컨트롤 그룹에 속한 사용자를 포함하여 타겟 오디언스의 모든 사용자에게 계속 전송됩니다.

글로벌 컨트롤 그룹에 대한 제외 설정을 추가하거나 편집할 수 있는 섹션입니다.](/docs/ko/assets/img/control_group/control_group5.png?809238fda67a4fb9c7f1d5d0135a1a73)

4단계: 대조군 저장하기

이 시점에서 Braze는 무작위로 선택된 사용자 그룹을 생성하여 전체 사용자 기반에서 선택한 비율로 구성합니다. 저장하면 제외 설정에 있는 태그가 포함된 캠페인이나 캔버스를 제외하고 현재 활성화된 모든 캠페인과 향후 캠페인 및 캔버스가 더 이상 이 그룹의 사용자에게 전송되지 않습니다.

글로벌 컨트롤 그룹 변경하기

글로벌 컨트롤 그룹을 비활성화하고 새로 만들어야만 변경할 수 있습니다. 예를 들어 오디언스의 10%인 글로벌 컨트롤 그룹을 설정했는데 그 크기를 5%로 줄이려면 현재 글로벌 컨트롤 그룹을 비활성화하고 새 글로벌 컨트롤 그룹을 다시 활성화해야 합니다.

글로벌 컨트롤 그룹 설정 탭에서 언제든지 글로벌 컨트롤 그룹을 비활성화할 수 있지만, 이렇게 하면 이 그룹의 사용자가 캠페인과 캔버스를 즉시 사용할 수 없게 됩니다.

대조군을 비활성화하기 전에 나중에 참조해야 할 경우를 대비하여 해당 그룹에 속한 사용자의 CSV를 내보내는 것이 좋습니다. 대조군을 비활성화하면 Braze에서 그룹을 복원하거나 이 그룹에 속한 사용자를 식별할 수 있는 방법이 없습니다.

대조군을 비활성화한 후 새 대조군을 저장할 수 있습니다. 백분율을 입력하고 저장하면 Braze에서 무작위로 선택된 새로운 사용자 그룹을 생성합니다. 이전과 동일한 비율을 입력해도 Braze는 대조군 및 치료군에 대한 새로운 사용자 그룹을 생성합니다.

글로벌 컨트롤 그룹을 비활성화하면 더 이상 신규 또는 활성 캠페인이나 캔버스에서 제외되지 않는다는 텍스트 경고와 함께 “글로벌 메시지 설정을 변경하고 있습니다”라는 제목의 대화 상자가 표시됩니다.](/docs/ko/assets/img/control_group/control_group2.png?88fc39d9deaa6f08f1148760180965ed){: style=”max-width:60%” }

대조군 구성원 내보내기

글로벌 컨트롤 그룹에 어떤 사용자가 있는지 확인하려면 그룹 멤버를 CSV 또는 API로 내보내면 됩니다.

CSV 내보내기를 실행하려면 글로벌 컨트롤 그룹 설정 탭으로 이동하여 내보내기를 클릭합니다. API로 내보내려면 /users/export/global_control_group 엔드포인트를 사용하세요.

사용자가 글로벌 컨트롤 그룹에 속해 있는지 여부 보기

개별 사용자 프로필의 참여 탭에서 기타 섹션으로 이동하여 글로벌 컨트롤 그룹 멤버십을 확인할 수 있습니다.

사용자가 무작위 버킷 번호 6356을 가지고 있으며 글로벌 컨트롤 그룹에 속하지 않음을 알리는 ‘기타’ 섹션.](/docs/ko/assets/img/control_group/control_group1.png?432a29b03e3e3480349626d7820d975e){: style=”max-width:50%;”}

보고

보고서 측정기준에 대한 자세한 내용은 글로벌 컨트롤 그룹 보고를 참조하세요.

문제 해결

글로벌 컨트롤 그룹을 설정하고 리포트를 볼 때 발생할 수 있는 오류는 다음과 같습니다:

주의해야 할 사항

중복되는 무작위 버킷 번호

글로벌 컨트롤 그룹은 무작위 버킷 번호를 사용하여 구성되므로 무작위 버킷 번호 세그먼트 필터를 사용하여 다른 테스트를 실행하는 경우 생성한 세그먼트와 글로벌 컨트롤 그룹 사용자 간에 중복될 수 있다는 점을 염두에 두세요.

중복 이메일 주소

외부 사용자 ID가 다른 두 사용자의 이메일 주소가 같고 그 중 한 사용자는 대조군에 속하고 다른 사용자는 대조군에 속하지 않는 경우에도 대조군이 아닌 사용자가 이메일을 받을 자격이 있을 때마다 해당 이메일 주소로 이메일이 전송됩니다. 이 경우 두 고객 프로필 모두 해당 이메일이 포함된 캠페인 또는 캔버스를 수신한 것으로 표시합니다.

글로벌 컨트롤 그룹 및 메시지별 대조군

글로벌 컨트롤 그룹과 캠페인별 또는 캔버스별 대조군을 모두 사용할 수 있습니다. 캠페인별 또는 캔버스별 대조군을 설정하면 특정 메시지의 영향력을 측정할 수 있습니다.

글로벌 컨트롤 그룹의 사용자는 태그 예외가 있는 메시지 외에는 수신이 보류되며, 캠페인 또는 캔버스에 컨트롤을 추가하는 경우 Braze는 글로벌 치료 그룹의 일부가 해당 특정 캠페인 또는 캔버스를 수신하지 못하도록 보류합니다. 즉, 글로벌 컨트롤 그룹의 멤버가 특정 캠페인이나 캔버스를 받을 자격이 없는 경우 해당 캠페인이나 캔버스의 대조군에도 포함되지 않습니다.

즉, 글로벌 컨트롤 그룹의 사용자는 캠페인 또는 캔버스 오디언스에서 필터링된 후 진입할 수 있습니다. 캠페인 또는 캔버스에 들어온 사용자 중 일정 비율을 제어 배리언트에 할당합니다.

개발자 콘솔의 글로벌 컨트롤 그룹 세그먼트

API 키 페이지의 추가 API 식별자 섹션에 여러 개의 글로벌 컨트롤 세그먼트가 표시될 수 있습니다. 이는 글로벌 컨트롤 그룹을 인에이블먼트하거나 비활성화할 때마다 새로운 글로벌 컨트롤 그룹이 형성되기 때문입니다. 이렇게 하면 ‘글로벌 컨트롤 그룹’이라는 레이블이 붙은 여러 세그먼트가 생성됩니다.

이 세그먼트 중 하나만 활성화되어 있으며 /users/export/global_control_group 엔드포인트를 사용하여 쿼리하거나 대시보드에서 내보낼 수 있습니다. 대시보드의 내보내기에는 이 글로벌 컨트롤 그룹을 구성하는 하위 세그먼트가 구체적으로 명시되어 있습니다.

테스트 모범 사례

최적의 대조군 규모

명심해야 할 두 가지 주요 규칙은**입니다:

  1. 대조군은 1000명 이상의 사용자로 구성해야 합니다.
  2. 대조군은 전체 오디언스의 10%를 넘지 않아야 합니다.

총 오디언스 수가 10,000명 미만인 경우 비율을 높여 1,000명 이상의 사용자 그룹을 만들어야 하며, 이 경우 비율을 15%보다 높게 늘리지 않아야 합니다. 전체 작업 공간의 크기가 작을수록 통계적으로 엄격한 테스트를 실행하기가 더 어려워진다는 점을 명심하세요.

  • 대조군 규모를 고려할 때 고려해야 할 몇 가지 장단점은 생성된 행동 분석을 신뢰할 수 있도록 대조군에 상당히 많은 수의 고객이 필요하다는 점입니다. 그러나 대조군의 규모가 클수록 캠페인을 받는 고객의 수가 줄어드는데, 이는 고객 참여와 전환을 유도하기 위해 캠페인을 사용하는 경우 단점이 될 수 있습니다.
  • 전체 오디언스 중 이상적인 비율은 전체 오디언스의 규모에 따라 달라집니다. 총 오디언스가 많을수록 비율은 더 낮아질 수 있습니다. 그러나 오디언스 수가 적은 경우 대조군의 비율이 더 커야 합니다.

실험 기간

이상적인 기간 선택

대조군 멤버십을 개편하기 전에 실험을 얼마나 오래 실행할지는 테스트 대상과 사용자의 기본 행동에 따라 달라집니다. 확실하지 않다면 분기(3개월)로 시작하는 것이 좋지만, 한 달보다 짧게 시작하지 않는 것이 좋습니다.

실험에 적절한 시간을 결정하려면 어떤 질문에 답하고 싶은지 고려하세요. 예를 들어, 세션에 차이가 있는지 확인하고 싶으신가요? 그렇다면 사용자가 얼마나 자주 유기적으로 세션을 진행하는지 생각해 보세요. 사용자가 매일 세션을 진행하는 브랜드는 사용자가 한 달에 몇 번만 세션을 진행하는 브랜드보다 더 짧은 실험을 진행할 수 있습니다.

또는 사용자가 커스텀 이벤트를 트리거하는 빈도가 낮을 가능성이 있는 경우 세션을 조사하는 실험보다 실험을 더 오래 실행해야 할 수도 있습니다.

실험을 조기에 종료하는 것을 제한하세요.

실험을 시작하기 전에 실험을 얼마나 오래 실행할지 결정한 다음, 미리 정해진 시점에 도달한 후에만 실험을 종료하고 최종 결과를 수집해야 합니다. 실험을 조기에 종료하거나 유망한 데이터를 발견할 때마다 실험을 종료하면 편향이 발생할 수 있습니다.

가치 있는 측정기준에 대해 생각해 보세요.

가장 관심 있는 측정기준에 대한 기준 동작을 고려하세요. 연간 단위로만 갱신되는 구독 플랜의 구매 요금에 관심이 있으신가요? 아니면 측정하고자 하는 이벤트에 대한 고객의 주간 습관이 있나요? 메시징으로 인해 사용자가 잠재적으로 행동을 변경하는 데 걸리는 시간을 생각해 보세요. 실험을 실행할 시간을 결정한 후에는 실험을 일찍 종료하거나 최종 결과를 기록하지 않으면 결과가 편향될 수 있으므로 주의하세요.
Github   GitHub 에서 이 페이지를 편집합니다.
New Stuff!