Read Original
#Mobile

한 번 성공하니 다음도 쉬울 줄 알았다: 최소주문금액바 4번의 A/B실험

한 번 성공하니 다음도 쉬울 줄 알았다: 최소주문금액바 4번의 A/B실험
01

Summary

배민 PM이 들려주는 '최소주문금액바' 4번의 실험: 성공의 도파민부터 실패의 레슨런까지

단순한 UI 개선을 넘어 데이터 속 숨겨진 신호를 인사이트로 연결하는 집요한 실험의 여정

이 아티클은 배달의민족 퀵커머스 서비스에서 주문 이탈을 방지하기 위해 도입한 '최소주문금액바'의 성장 과정을 다룹니다. 총 4차례의 A/B 테스트를 거치며 겪은 성공과 시행착오를 통해, 지표의 등락을 넘어 사용자의 행동 패턴을 읽어내는 PM의 시각과 실무적 인사이트를 제공합니다.

  • 01Phase 1에서 장바구니와 탐색 지면 간의 마찰을 줄여 주문전환율 상승 성공
  • 02Phase 2를 통해 최소주문금액 안내가 평균주문금액의 천장 효과를 유발한다는 의외의 발견
  • 03구매 의사가 높은 멤버십 사용자에게 혜택 안내가 더 효과적으로 작용함을 데이터로 검증
  • 04고허들 쿠폰 운영 등 외부 마케팅 환경이 실험 지표에 미치는 결정적 영향 확인
  • 05실험의 목적은 단순한 지표 상승이 아니라 다음 가설을 세우기 위한 '학습'에 있음을 강조

RECOMMENDATION

A/B 테스트를 설계 중인 서비스 기획자나 데이터 분석가에게 권장하며, 실험 결과가 예상과 다를 때 보조 지표를 통해 새로운 돌파구를 찾는 문제 해결 과정을 참고하기 좋습니다.

The Problem

퀵커머스 서비스 이용 시 사용자가 최소주문금액을 채웠는지 확인하기 위해 장바구니와 탐색 지면을 반복적으로 오가야 하는 동선의 불편함과 이로 인한 높은 이탈률을 해결하고자 했습니다.

The Solution

가게 홈 및 검색 결과 등 탐색 지면 하단에 최소주문금액까지 남은 금액을 실시간으로 안내하는 스낵바 UI를 도입하고, 혜택 안내와 상품 추천을 결합한 4단계의 A/B 테스트를 통해 고도화했습니다.

The Result

Phase 1과 2에서는 장바구니 이탈률이 유의미하게 감소하고 커머스 전체 주문전환율이 상승하는 성과를 거두었습니다. 하지만 이후 실험에서는 혜택 노출 조건 충족 부족과 상품 추천에 따른 전환 향상이 뚜렷하지 않아 지표가 정체되는 양상을 보였습니다.

Trade-off

사용자에게 최소주문금액을 명확히 안내함으로써 탐색 마찰은 줄였으나, 동시에 그 금액이 구매의 기준점이 되어버리는 '평균주문금액의 천장' 현상이 발생했습니다. 또한 고도화된 UI 기능의 성과가 외부 마케팅 전략에 강하게 의존하는 부작용을 확인했습니다.

03

Key Concepts

Concept · 01

A/B Testing

두 가지 이상의 안(A안, B안)을 사용자 그룹에 무작위로 노출하여 어떤 안이 목표 지표에 더 긍정적인 영향을 주는지 검증하는 정량적 분석 방법입니다.

  • 최소주문금액바 도입 전후의 주문 전환 변화를 비교하고, 그룹별로 상이한 넛지 UI의 효과를 정량적으로 검증하는 핵심 방법론으로 사용되었습니다.
Concept · 02

AOV (Average Order Value)

특정 기간 동안 주문 한 건당 평균 결제 금액을 의미하며, 거래액 규모를 파악하는 주요 지표입니다.

  • 최소주문금액 정보 제공이 사용자의 최종 결제 금액에 미치는 영향을 추적하여, 정보의 정확성이 가져오는 천장 효과를 포착하는 지표로 활용되었습니다.
Concept · 03

Upselling Nudge

사용자가 현재 담은 상품보다 더 높은 가액의 상품이나 혜택을 선택하도록 심리적으로 유도하는 설계 기법입니다.

  • 할인 혜택이나 저단가 추천 상품을 노출하여 사용자가 최소주문금액 허들을 넘기거나 장바구니 단가를 높이도록 유도하는 심리적 장치로 설계되었습니다.