성장하는 서비스 기획자 린의 공간

서비스 기획·PM의 길을 공부해요

서비스 기획자/아티클 스터디

[아티클 스터디] 바로 활용하는 12가지 AB테스트 사례

yj_lynn 2024. 1. 15. 08:10

🔗 아티클 출처

바로 활용하는 12가지 AB 테스트 사례 | 요즘IT

 

바로 활용하는 12가지 AB 테스트 사례 | 요즘IT

AB 테스트는 가설 수립, 실험 진행, 결과 분석의 3단계로 진행되는 그로스 해킹 방법론입니다. AB 테스트는 제품과 조직의 확실한 성장 엔진으로, 그랩(Grab), 넷플릭스(Netflix), 에어비앤비(Airbnb) 등

yozm.wishket.com


🗨️ 선정 이유

❓ ▪️ AB 테스트를 직접 활용해 본 적이 없어 언젠가 활용해 보고 싶다는 생각을 항상 해왔던 것 같다.

▪️ 다양한 기업의 AB 테스트 사례를 다루고 있어 그 사례를 통해 실전을 익히고 싶어 아티클을 선정하였다.


📑 내용 정리

AB 테스트

  • 가설 수립, 실험 진행, 결과 분석의 3단계로 진행되는 그로스 해킹 방법론
  • 제품과 조직의 확실한 성장 엔진
  • 큰 그로쓰 해킹 팀이나 테스트 문화, 맞춤 툴이 전혀 없는 상황이라도 적용 가능

1️⃣ 기능보다 가치 - Booking.com 온보딩 팝업 카피

  • 연간 2만 5천 개가 넘는 AB 테스트를 실행하는 데이터 기업

문제점 발견 숙소 등록을 위해 가입한 숙박업소주가 첫 3개월 동안 크게 이탈

원인 분석 숙박업소주를 대상으로 한 온보딩 과정에서 제품 튜토리얼 단계에서 대부분 건너뛰는 선택지를 고른다는 것을 알아냄
기존 기능 둘러보기 단계를 시작하는 팝업은 둘러보기 계속, 건너뛰기, 닫기 의 3가지 기능으로 구성되어 있었음
실험 진행 1 처음에 건너뛰기 기능을 없애고 계속하기와 닫기 기능만 남김
→ 둘러보기를 진행하는 고객 13% 🔺  
실험 진행 2 기능 변경없이 팝업의 문구를 수정 (고객은 제품이 어떤 일을 할 수 있는 지가 아니라, 나에게 어떤 도움이 되는지를 설명받음)
→ 둘러보기를 진행하는 고객 50% 🔺  

💡 제품이 고객에게 어떤 가치를 제공할지 설명하는 것이 제품을 설명하는 것보다 더 중요하다.

2️⃣ 입구는 단순하게 - 넷플릭스 랜딩 페이지

  • 제품 개선의 방향 자체를 AB 테스트에 의존하고 있는 기업
  • 재생, 대기열 추가 버튼과 같은 UI, 시청 데이터를 이용한 개인화 기능, 페이지 로드 시간, 인코딩 품질 등 제품의 대부분을 AB 테스트 한다.
  • CTA(Click to Action) 버튼 카피 수정 테스트
    • TRY: JOIN이나 GET에 비해 시험 삼아 가볍게 눌러 볼만한 카피
    • TRY IT NOW: 버튼을 누르는 고객의 심리적 허들을 최소화하는 가장 단순한 카피
    • CTA 버튼은 1개일 때 가장 큰 영향력을 발휘한다. (특히, 고객을 제품 사용으로 인도해야 하는 랜딩 페이지에서는 더)
      • 가입 버튼 아래 로그인 옵션이나 ‘더 알아보기’에 해당하는 다른 버튼을 추가하는 대안은 모두 취소되었다.
      • 로그인 기능이나 넷플릭스에 대한 정보 제공이 고객 편의/전환에 도움 줄 수 있지만, 1순위 지표인 가입률을 해칠만큼 중요하지는 않기 때문

3️⃣ 100의 법칙 - 코드카데미(Codecademy) 플랜 가격 할인율

  • 100의 법칙(Rule of 100): 고객의 처지에서 어떤 상품의 가격이 100달러 미만이라면 할인가가 얼마인지 표시하는 것보다 할인율이 몇 %인지 보여주는 게 할인 폭을 더 크게 실감한다는 이론
  • 프로그래밍 학습 플랫폼 코드카데미는 이 이론을 플랜 선택 페이지에 적용했다.→ 전체적인 페이지 전환율도 개선됨
  • → 연간 결제 플랜으로의 전환율 28%🔺

4️⃣ CTA 버튼 추가 - OFLARA

  • 리스트/그리드 UI는 거의 모든 디지털 프로덕트에서 활용되고 있다.→ 하지만, 이런 생략이 고객의 제품 사용을 불안하게 만든다.
  • → 디자이너는 별도의 CTA 버튼 없이도 고객이 사용하는 데 무리가 없을 것으로 생각하는 경우가 있다.
  • 온라인 주얼리 커머스 OFLARA는 상품을 보여주는 그리드 UI에 장바구니 추가 버튼을 추가했다.
  • → 매출 60% 🔺

5️⃣ 인기 항목을 빠르게 필터링 - TELE2

  • 필터: 고객이 원하는 조건에 맞는 항목만을 드러내 탐색에 드는 비용을 줄여주는 UI
  • 필터에는 취급하는 항목이 가지고 있는 속성에 따라 세부항목의 수가 많아질 수 있다.e.g. 브랜드 필터링 옵션에 브랜드가 수십가지인 경우, 고객은 필터 목록에서 브랜드를 찾기 보다 검색 기능을 사용할 것이다.
  • → 이러한 세부성이 탐색 비용을 줄인하는 필터의 본 목적을 해칠 수 있다.
  • 유럽 통신사 TELE2는 휴대전화 목록에서 인기 브랜드를 바로 선택할 수 있는 빠른 필터를 추가했다.
  • → 필터 클릭률 19% 🔺

6️⃣ 양날의 검, 무한 스크롤 - Etsy

  • 콘텐츠가 많아 한 화면을 넘어가게 되는 리스트/그리드 UI를 처리하는 방법
    • Pagination
    • 무한 스크롤
      • 작은 노력으로 많은 항목을 탐색할 수 있다.
      • 그러나, 많은 탐색이 많은 전환으로 이어지는 것은 아니다. (제품에 따라 다를 수 있다.)
  • 수공예 마켓플레이스 Etsy는 검색 결과 페이지의 그리드 UI를 무한 스크롤 방식으로 바꾸었다.
  • → 조회율, 클릭률, 장바구니에 담는 비율, 구매율 모두 🔻

7️⃣ 콘텐츠 발행일 숨기기

  • 사람들은 같은 주제여도 최신의 콘텐츠가 더 정확하고, 오늘날에 알맞다고 여긴다.
  • 벨기에의 UX 디자이너 Paul Olyslager는 자신의 블로그에서 콘텐츠 발행일을 숨겼다.
  • → 콘텐츠 이탈률 84% 에서 72%로 감소

AB 테스트 사례로 얻을 수 있는 인사이트

  1. 기능보다 가치 전달에 초점을 맞춘 카피
  2. 랜딩 페이지에 심리적 허들을 낮추는 가벼운 카피 사용
  3. 랜딩 페이지에 제품 사용을 복잡하게 느끼는 카피 회피
  4. 랜딩 페이지를 비가입 고객 친화적으로 구성
  5. CTA 버튼의 수 최소화하여 우선순위 높은 기능에 집중
  6. 전체 퍼널의 단계 수를 고려한 디자인
  7. 한 화면에 많지 않은 입력란
  8. 100의 법칙 - 액수가 낮다면 할인가 말고 할인율 노출
  9. 리스트/그리드 UI에 CTA 버튼 추가
  10. 인기 항목은 빠르게 필터링할 수 있도록 디자인
  11. 무한 스크롤은 양날의 검 - 많은 항목을 쉽게 탐색하는 것이 꼭 전환으로 이어지지 않음
  12. 이탈률 감소를 위한 콘텐츠 발행일 숨김

💡 생각 정리

👉 ▪️ 기능 자체보다는 사용자에게 어떤 가치를 전달하는가가 더 중요하다는 포인트에 동의한다. 간결한 정보를 제공하고, 제품팀에서 사용자가 행하길 바라는 목표로 사용자를 이끄는 방안에 대한 고민이 중요하다. 또, 제품과 서비스의 개선은 실험과 데이터에 기반해 이루어져야하고, 그 과정에서 AB 테스트는 강력한 도구임을 알게 되었다.


린의 맛집 블로그 https://blog.naver.com/lynnyeonjulee

 

맛있는 게 좋아 : 네이버 블로그

틀을 잡아가고 있어요 조금만 기다려주세요 ❤️

blog.naver.com