쿠팡이츠는 인기검색어를 왜 제거하려할까? (제거 안해요… 추가 업데이트함)
A와 B를 통해 숨겨놓은 A/B 테스트의 목적 찾아보기
이번주의 힙데비 챌린지는 (6주차) Hackle에서 만든 쿠팡이츠 케이스다. (?)
TMI) 그리고 늘 그렇듯. 나는 쿠팡이츠 또한 써본 적이 없다.
위의 우측 이미지에서. 공통된 부분을 제외하고. 이번 A/B 테스트에서의 실질적인 (기능적인) 차이는 다음과 같다.
그룹 A의 경우 상단 영역을 이용하여
- 사용자의 현재 위치와
- 메뉴검색 기능을 제공한다.
한편 그룹 B는,
- 위치를 위로 올리고 (조금 더 작게도 수정).
- 대신 메뉴 검색을 바로 실행 할 수 있게 작업했다.
얼핏보기에, A/B 테스트의 주인공은 메뉴 검색기능 강조
인 것 같다.
그러면 메뉴 검색기능
은 실제로 어떤 방법으로 사용 되고 있는지
검색기능이 이루고자 하는 목적이 무엇일까?
를 답변하는 User flow를 따라가보자.
검색기능의 목적
우선 쿠팡이츠를 설치하고(…) 이번 실험 대상이 되는 검색 기능
에서의 경험을 따라가보기로 했다.
흐름은 간단하다.
- 검색 버튼을 누르고,
- 검색어를 입력하고 (
붕어빵
) - 그 결과
- 그리고
뒤로가기
버튼을 누른 흐름이다.
(여기서 뒤로가기를 다시 누르면 첫 화면이 나온다)
TMI) 붕어빵
을 검색 했을때, 쿠팡이츠는 과일과 커피가게들을 잔뜩 보여줬다.
빵
을 인식해서 그런건가 ? 라는 생각을 했지만
정작 빵
을 검색했을때는 베이커리들을 보여주고, 츄르
를 검색했을때는 아무것도 보여주지 않은 걸 보니 … 🤔
주소 설정
한편, 이번 테스트의 B 안에서는 주소 기능도 “살짝 축소”
될 것이라고 생각이 된다. 그러면 이는 어떤 기능인지 알아보자
내 경우 쿠팡이츠를 사용하지 않았기 때문에(…) 원래는 (미리 등록해놓은) 집 / 회사 주소를 선택하는 기능이었을 결과도 주소를 추가 하는 단계로 진입되었다.
아하.
주소 설정 기능은. 여러 위치에서 쿠팡이츠를 사용하는 사용자를 위해서, 주소를 “설정” 할 수 있게 하는 기능이다.
다시 A/B Test
로 돌아와서 정리하면.
이번 A/B 테스트의 목적은 메뉴 검색 추가
, 주소 설정 축소
이외에도.
앞에서 기능 흐름을 통해 발견 한 것처럼 인기 검색어
라는 기능 또한
영향을 받게 된다. (B그룹은 인기 검색어
부분을 Skip 하게 될 것이다)
먼저 가설을 정하고. 실험용 A/B 테스트를 해야하는게 맞기 때문에, 케이스에서 주어진 대로
A/B 테스트를 먼저하고. 지표를 어떤걸 측정할지 고민한다
라는 상황이면 진짜 엄청 혼났을 것이다.
그러나 기가 막힌 데비의 임기응변을 통해, 뒤늦게 추측한 가설은 2가지이다.
- 사용자들은 주소설정기능을 사용하긴 하지만 그렇게까지 많이 사용하지 않는다.
(잘 사용한다면 변경해서는 안되고, 안 사용한다면 아예 빼야하는데 귀하디 귀한 상단에 남겨둔 것을 보면 애매하게 사용하는 것 같다) - 사용자들은 인기검색어를 거의 사용하지 않는다.
(사용한다면, 변경되는 UI/UX에서 인기검색어를 하단 메뉴로 남겼어야 했다)
이를 위해 확인해야 하는 지표는
주소 설정 기능 페이지로의 전환율
혹은주소 설정 기능 사용율
기존 검색 과정에서의 검색어를 입력하여 최종 구매 확인 페이지까지로의 전환율
과검색어를 입력하지 않고 인기 검색어를 클릭하여 최종 구매 확인 페이지까지로의 전환율
2가지이다.
쿠팡이츠는 왜 인기 검색어를 제거하려고 할까?
이번 챌린지를 진행 하는 동안 위와 같은 질문이 들었다.
아무리 봐도 주소 설정
줄이는 것과 메뉴 검색
을 추가하는 것은 눈속임이고.
A/B 테스트의 본 목적은, 사실상 인기검색어 패스
라고 생각되어 (뇌피셜) 인기 검색어
기능을 다시 한번 돌아봤고 아래 이미지를 한번 보고 계속 읽으면 좋다.
TMI) 우리 회사 CEO의 이름이 인기 킴이다.