사용할 때
- 새 버전 검증: 새 프롬프트나 플로우를 실제 통화 일부에만 적용합니다.
- 성과 비교: 두 버전의 전환율, 통화 시간, 종료 사유, 추출 결과를 비교합니다.
- 점진적 배포: 10%에서 시작해 안정적으로 보이면 비율을 높입니다.
- 빠른 롤백: 문제가 생기면 안정 버전 비율을 100%로 되돌립니다.
설정 위치
번호 관리에서 전화번호를 선택하면 상세 패널이 열립니다. 인바운드 콜 에이전트 또는 아웃바운드 콜 에이전트 옆의 A/B 테스트 설정 버튼을 사용합니다.
인바운드와 아웃바운드는 따로 설정합니다.
인바운드 테스트는 들어오는 통화에, 아웃바운드 테스트는 해당 번호로 거는 통화에 적용됩니다.
설정 방법
1
전화번호 선택
번호 관리에서 테스트에 사용할 전화번호를 선택하세요.
오른쪽 상세 패널에서 에이전트 연결 영역을 확인합니다.
2
A/B 테스트 열기
인바운드 또는 아웃바운드 에이전트 선택 옆의 A/B 테스트 설정 버튼을 클릭합니다.
테스트할 통화 방향에 맞는 버튼을 사용하세요.
3
테스트 활성화
상단 스위치를 켜고 실험 그룹을 설정합니다.
최소 2개 그룹이 필요합니다.
4
버전과 비율 입력
각 그룹에 에이전트와 고정 버전을 선택합니다.
비율 합계는 100%여야 하며, 각 그룹은 0%보다 커야 합니다.
5
적용
적용을 클릭하면 새로 시작되는 통화부터 설정이 반영됩니다.
운영 기준
결과 확인
대시보드의 A/B 테스트 탭에서 실험을 선택하면 그룹별 평균 통화, 평균 응답 지연, 평균 통화료, CSAT와 종료 사유·커스텀 추출 필드를 비교할 수 있습니다. 개별 통화는 통화 기록에서 확인하세요. 테스트를 운영할 때는 아래 지표를 비교하세요.- 통화 성공률과 미연결 사유
- 평균 통화 시간
- 사용자 감정과 통화 요약
- 통화 정보 추출 결과
- 통화당 비용
아웃바운드 주의사항
아웃바운드 A/B 테스트를 사용하는 번호에서는 캠페인이나 API 요청에서 에이전트를 직접 고정하는 방식과 충돌할 수 있습니다. 한 번호에서 버전 실험을 운영할 때는 A/B 테스트 기준으로 연결할지, 요청마다 에이전트를 명시할지 하나로 정하세요.관련 문서
- 에이전트 버전 관리 — 버전 생성, 프로덕션 지정, 롤백
- 전화번호 — 번호별 에이전트 연결
- 통화 기록 — 개별 통화 상세 확인
- 대시보드 — A/B 테스트 탭에서 그룹별 지표 비교
연관 검색어
연관 검색어
A/B 테스트, AB 테스트, 번호별 테스트, 에이전트 버전 테스트, 점진적 배포, 롤백