작성
·
133
0
#1. 배너영역, 메뉴카테고리, 이런 음식 어때요, 동네 맛집 기능이 잘 동작하고 있는지 확인하려면 어떤 지표를 확인해야할까요 ? 지표를 정의하고 지표가 어떤식으로 움직이면 잘 동작한다고 볼 수 있을까요 ?
목적
각각의 기능이 잘 동작하기 확인하기 위함
잘 동작하는지에 대한 정의 ?
클릭하여 주문까지 완료되는 것을 잘 동작한다라고 판단한다.
어떤 지표를 볼 지?
앱의 전체 유입 유저
전체 유입 유저 중 각 버튼 별 클릭 (CTR)
각 버튼 별 주문 전환율 (CVR)
(클릭 유저 - 주문 유저) / 클릭 유저
#2. 고객이 검색 기능에 만족했는지 확인하려면 어떤 지표를 봐야할까요 ? 검색하는 흐름을 떠올려보면서 그 안에 있는 이벤트를 조합해보세요
목적
검색 기능이 만족했는지를 확인하기 위함
검색 기능이 만족함에 대한 정의 ?
검색하며 주문까지 완료되면 만족했다고 판단한다.
어떤 지표를 볼 지?
검색 카테고리에 유입하는 유저 (CTR)
검색 유저 중 주문 전환율 (CVR)
(검색 유입 유저 - 주문 유저) / 주문 전환율
#3. 검색 필터 기능은 잘 사용되고 있을까요 ? 필터 기능의 활성화 지표를 정의하려면 어떻게 할 수 있을까요? 검색 필터를 사용하는 흐름을 떠올려보면서 그 안에 있는 이벤트를 조합해보세요
목적
검색 필터가 잘 사용하고 있는지 확인하기 위함
검색 필터가 잘 사용되고 있다는 것은 ?
검색 필터 화면에서 이탈없이 주문까지 완료가 되면 잘 사용하고 있다고 판단
어떤 지표를 볼 지?
검색 필터를 클릭하여 검색 필터 기능에 유입한 유저
검색 필터 기능 → 주문으로 이어진 유저 (CVR)
검색 → 주문으로 이어지기까지 여러개의 퍼널이 존재하는데 각 퍼널별로도 이어지는 CVR을 체크하여 어떤 퍼널에서 이탈률이 큰 지도 보조지표로 보면 좋을 것 같음
#4. 배달 서비스에서 가장 중요한 지표는 무엇일까요? 왜 그 지표가 중요할까요? 그것을 어떻게 늘릴수(줄일 수) 있을까요 ? (MECE하게 가장 중요한 것을 생각해보고 컴포넌트를 로직틱하게 그려보자)
가장 중요한 지표 ?
앱 유입 유저→배달까지 전환율
앱 유입 유저→배달 완료까지 걸린 시간
왜 그 지표가 중요한지 ?
본질적으로 배달앱의 목적은 고객에게 배달이라는 좋은 서비스를 제공하기 위함으로 여기서 좋은 서비스란 원하는 매장이 많이 있는지? (이때 원하는 매장이 없으면 이탈), 빠른 시간에 원하는 음식을 받았는지 ? (고객 만족)의 개념으로 접근함
#5. 추천 알고리즘의 성능 지표, 추천 알고리즘은 유저의 정보와 유저 로그를 토
대로 구매할 것 같은 제품을 보여줍니다. 추천 알고리즘의 성능을 확인하기 위해 어떤 지표를 파악해야할까요? 왜 해당 지표일까요 ?
목적
추천 알고리즘의 성능을 확인하기 위함
어떤 지표를 봐야하는가 ?
추천 알고리즘을 사용하는 유저가 제품 구매까지 이어지는지 ?
(추천 알고리즘 유입 유저 - 구매 유저)/추천 알고리즘 유입 유저
왜 해당 지표일까 ?
성능이 좋다함은 곧 유저의 정보를 잘 파악하여 실제 “구매를 할 법”한 상품을 추천했다는 것이므로 구매까지 이어지는지를 확인
TBD...
답변 3
0
안녕하세요. 피드백을 해주셔서 너무 감사합니다.
피드백 중에 추가 질문 주신 부분에 대해서도 답변 달아볼게요.
1번 문제
유입 유저에서 유입의 정의는 어떻게 해야할까요 ?
로그인을 한 유저로 생각했습니다.
CTR 정의에서 분자 분모를 구체적으로 작성
분자 : 각 버튼 클릭 유저 / 분모 : 전체 유입 유저(로그인을 한 유저)
각 버튼 별 주문 전환율 (CVR)
제가 반대로 생각했네요...
분자 : 주문한 유저 / 분모 : 각 버튼 별 클릭 유저
0
소연님 안녕하세요! 문제 푸느라 고생하셨습니다! 순차적으로 피드백을 드려볼게요
목적을 정의하시고 지표를 고민하신 점 잘하셨습니다!
유입 유저에서 유입의 정의는 어떻게 해야할까요?
CTR 정의에서 분자 분모를 구체적으로 작성해보시면 좋을 것 같아요
어떤 지표를 볼지에 대해 정의를 해주셨는데, 각 버튼 별 주문 전환율은 왜 이렇게 정의하셨을까요?
(클릭 유저 - 주문 유저) / 클릭 유저
전환율 지표는 '전환 수 / 특정 행동을 한 수'인데 지금 작성해주신 것은 전환되지 않은 비율을 의미하네요
예를 들어 클릭 유저가 5명, 주문한 유저가 3명이면 주문 전환율은 3/5가 되는데, 지금 정의에 의하면 (5-3)/5가 되어서 2/5가 되네요. 반대 의미가 되네요
이것도 CVR 정의에 이슈가 있네요. CVR을 다시 정의해보셔요. 기본적으로 CVR, CTR 조합으로 2번의 문제를 해결할 수 있습니다
여기서 조금 더 나아가면, 검색의 경우 알고리즘 관점으로 지표를 이해하는 것도 필요합니다
아래 글들에 잘 정리가 되어서 한번 읽어보셔도 좋을 것 같아요
검색 필터가 잘 사용된다는 것을 주문까지라고 생각해주셨는데 이유가 있을까요?
1차적으로 검색 필터를 잘 사용한다는 것은 사람들이 클릭을 하는 것이 사용하는 것이라 볼 수 있어요
주문이 된다고 할 때, 검색 필터가 좋아서인지 제품이 좋아서인지 명확하게 나뉘지 않을 수 있습니다
이럴 땐 조금 더 명시적인 지표를 먼저 메인 지표로 보고, 보조적으로 전환율을 보는 것도 가능합니다
검색 필터엔 여러가지 필터 기능이 있습니다. 이럴 때 여러 필터를 선택할 수 있는데, 이런 상황엔 어떤 지표를 생각해보시겠어요?
컴포넌트 그린 부분 좋네요! 다만 광고에서 장바구니로 가는데, 회사에선 외부 링크로 가는 광고가 있을 수도 있어요. 이런 경우엔 어떻게 그려보시겠어요?
지표가 왜 중요한가에 대해 잘 작성해주셨는데, 추가적으로 이런 질문을 드리고 싶어요
원하는 매장이 많이 있는지는 전환율, 걸린 시간과 관련이 있을까요?
이럴 땐 그 사람이 확인한 매장의 수 지표를 확인하는 것도 가능할 것 같아요. 접속 위치 반경 내의 매장 수(혹은 카테고리의 매장 수)를 알면 작성해주신 매장에 대한 정보를 알 수 있지요
플랫폼 비즈니스는 고객(수요자)와 가게(공급자) 관점으로 생각해보는 것을 추천합니다. 가게가 얼마나 있는지도 중요합니다. 또한 배달 서비스에선 배달하는 분도 계시니 배달하는 분들이 많은 것도 필요합니다(배달하는 분들이 많아야 배달 완료까지 걸린 시간(ETA)가 더 짧아질 가능성이 있습니다)
추천 알고리즘의 지표는 검색과 유사하게 추천만의 알고리즘 지표가 있음을 알려드리고 싶었어요
말씀해주신 지표를 기본적으로 보고, 추천 알고리즘 자체의 성능을 파악하곤 합니다
Precision, Recall 등의 방법을 아래 링크에서 살펴보시면 도움이 될 것 같아요
문제 푸느라 고생하셨습니다! 다음 과제도 기다릴게요!
0
안녕하세요, 인프런 AI 인턴입니다. 소연님께서 제기하신 여러 지표에 대한 질문에 답변드리겠습니다.
기능별 동작 확인 지표:
검색 기능 만족도 지표:
검색 필터 기능 활성화 지표:
배달 서비스의 중요 지표:
추천 알고리즘 성능 지표:
이미지 출처: Inflearn
관련 정보 출처: Inflearn FAQ