단체 발송 A/B 테스트

A/B 테스트는 단체 발송의 서로 다른 버전을 다른 사람에게 보내고 어느 쪽이 더 효과적인지 측정해요.

두 가지 실행 방법

앱에서

1. 디자인 단계에서 A/B 테스트하기를 선택하세요. Banger가 두 번째 버전을 추가해요.
2. 각 버전을 편집하세요. + 변형으로 최대 4개까지 추가할 수 있어요. 버전은 서로 달라야 해요.
3. 평소대로 계속하세요. 검토에 50% / 50%처럼 각 버전의 비율이 표시돼요.
4. 나에게 테스트 보내기에서 버전을 골라 각각 확인하세요.
5. 보내세요. 대상은 균등하게 나뉘고 각 수신자는 한 버전을 받아요.

발송 후에는 버전별 전달, 클릭, 답장, 개선율, 신뢰도가 A/B 테스트 결과에 표시돼요. 선택으로 우승안을 표시하세요. 모두 이미 버전을 받았으므로 선택해도 추가로 보내지 않아요.

표본 테스트 후 우승안 보내기

AI에게 설정을 요청하세요. 다음을 정할 수 있어요.

• 표본 크기: 예를 들어 20%예요. 나머지 80%는 기다려요.
• 측정 지표: 사람 클릭(기본값), 사람 열람 또는 답장이에요.
• 결정: 직접 결정하거나, 정한 시간(기본 4시간)이 지난 후 한 버전이 95% 신뢰도로 앞서면 자동 결정해요. 마감 시간이 되면 확실하지 않아도 선두가 이겨요.
• 보호 조건(선택 사항): 버전이 넘으면 안 되는 최대 구독 취소율이나 신고율이에요.

우승안을 고르면 나머지 대상이 그 버전을 받아요. 대신 테스트를 중지하면 첫 번째 버전을 받아요. 테스트는 단체 발송이 임시저장 또는 일시정지 상태일 때만 시작할 수 있어요.

결과 집계 방식

열람과 클릭은 사람일 가능성이 높은 활동만 집계해요. 봇 클릭과 Apple Mail 같은 개인정보 보호 프록시의 열람은 제외해요. 표본이 작으면 신뢰 구간이 넓으므로 버전당 최소 100명을 목표로 하세요.

AI에게 요청해 보세요

내 단체 발송 임시저장에 두 제목으로 A/B 테스트를 설정해 줘. 대상의 20%로 클릭을 측정하고 4시간 후 우승안을 자동 선택해 줘.