A/B Testing이란?
사용자를 변형 A와 B로 무작위 분할해 가설을 검증한다.
주의
- 통계적 유의성 (p-value, 신뢰구간)
- 샘플 크기
- Peeking 방지 (조기 중단 유혹)
- 다중 비교 보정
A/B Testing란?
정의
두 변형을 무작위 분할해 비교하는 실험 방법론. Feature Flag와 자주 결합.
🔗 함께 보면 좋은 용어
Backend 전체 →개발자 포털
API 문서·SDK·Playground·API Key 발급. Stripe·Twilio 모범.
백엔드 플랫폼 비교
Railway·Render·Fly.io·Vercel·Cloudflare. 2026 스타트업 선택.
이벤트 스키마 진화
스키마 변경 시 소비자 호환성. Backward·Forward·Full compatibility.
비동기 작업 큐
Celery·Sidekiq·BullMQ·Resque. 백그라운드 작업 처리.
메시지 순서 보장
메시지 순서 유지의 비용과 제약. 파티셔닝·단일 consumer.
실시간 옵션 비교
폴링·Long Polling·SSE·WebSocket. 복잡도·기능별 선택.