A/B 테스트 결과와 승리 그룹 확인하기

A/B 테스트 결과 화면으로 이동하세요

1. 왼쪽 메뉴에서 이메일 캠페인을 선택합니다.
2. A/B 테스트로 발송 완료된 캠페인 제목을 선택합니다.
3. 상단의 A/B 테스트 배지와 열기유도·클릭유도·발송시간 등 테스트 유형을 확인합니다.
4. 최종 발송된 이메일 미리보기와 캠페인 정보를 확인합니다.
5. 전체 결과에서 테스트 그룹과 나머지 발송을 합친 총 발송·성공·실패·열람·클릭을 확인합니다.

상단의 링크 복사 버튼은 현재 화면 표시만 있고 클립보드 복사 동작이 연결되어 있지 않습니다. 리포트 주소를 공유하려면 브라우저 주소창의 URL을 직접 복사하세요. 리포트는 캠페인을 볼 수 있는 로그인 권한이 있는 사용자만 열 수 있습니다.

테스트 진행 흐름을 먼저 읽으세요

진행 흐름은 전체 수신자 → 테스트 그룹 → 승리 그룹 → 나머지 발송 순서입니다. 샘플 캠페인은 전체 3,640명 가운데 728명(20%)을 A와 B에 364명씩 배정하고, 열람률이 높은 A를 승자로 판정한 뒤 나머지 2,912명에게 A 콘텐츠를 발송했습니다.

변경된 항목과 최종 발송본을 확인하세요

변경된 항목 표에는 A와 B에서 다르게 설정한 발신자 이름, 이메일 제목, 미리보기 텍스트 등이 표시되고 별표로 실제 변경 항목을 구분합니다. 열기유도 테스트라면 제목처럼 열람에 영향을 주는 요소가 정말 하나의 비교 변수인지 확인하세요.

• 여러 항목을 동시에 바꾸면 어떤 변경이 결과를 만들었는지 판단하기 어렵습니다.
• 최종 발송 미리보기에는 승리 그룹의 콘텐츠가 표시되는지 확인합니다.
• 발송시간 테스트라면 콘텐츠가 같은지, 클릭유도 테스트라면 본문 링크와 버튼 외 요소가 같은지 확인합니다.

A와 B의 성과를 같은 기준으로 비교하세요

그룹별 성과 카드, 주요 지표 비교와 상세 지표 표에는 발송 수, 전달 수·전달률, 열람 수·열람률, 클릭 수·클릭률과 수신거부가 표시됩니다. 판정 기준 배지가 붙은 지표가 승자를 정한 기준입니다.

• A: 발송 364명, 성공 354명, 열람 200명(54.9%), 클릭 58명(15.9%)
• B: 발송 364명, 성공 350명, 열람 178명(48.9%), 클릭 49명(13.5%)
• 열람률 차이: A가 B보다 6.0%p 높아 A가 승리
• 클릭률 차이: A가 B보다 2.4%p 높지만 이 샘플의 판정 기준은 열람률

수신처별로 A와 B를 비교하세요

수신처별 비교를 펼치면 naver.com, gmail.com, daum.net과 같은 수신 메일 도메인별로 A와 B의 열람률·클릭률을 나란히 볼 수 있습니다. 전체 승리 그룹과 다른 결과가 나온 도메인이 있는지 확인하되, 발송 건수가 적은 수신처의 큰 비율 차이는 표본 수와 함께 해석하세요. WIN 표시는 해당 수신처에서 더 높은 비교값을 뜻하며 전체 테스트의 최종 승리 판정을 바꾸지는 않습니다.

승리 그룹과 나머지 발송 결과를 확인하세요

나머지 발송 결과에는 승리 그룹 적용 여부, 나머지 대상의 발송·성공·열람·클릭과 A·B 테스트 대비가 표시됩니다. 샘플 나머지 2,912명은 성공 2,838명(97.5%), 열람 1,464명(50.3%), 클릭 407명(14.0%)입니다.

전체 발송 합산은 테스트 A 364명 + 테스트 B 364명 + 나머지 2,912명 = 3,640명입니다. 전체 성공 3,542명과 실패 98명도 총 발송 3,640명과 일치합니다. A의 54.9%를 전체 열람률로 보고하지 말고 전체 합산 열람 1,842명, 성공 기준 52.0%를 사용하세요.

테스트 설정을 기록하세요

리포트 마지막의 테스트 설정에는 샘플 크기, 판정 기준, 나머지 발송 대상과 테스트 기간이 표시됩니다. 다음 A/B 테스트와 비교할 때는 캠페인명만 아니라 이 네 설정을 함께 기록해야 합니다.