인프런 커뮤니티 질문&답변
작성한 질문수
4-8 지표 정의하기 연습 문제 풀이!
해결된 질문
작성
·
51
0
1번 문제
[기능이 잘 동작하고 있는지 확인하려면?]
| 문제 상황
배달 서비스를 담당하는 PM입니다.
배너 영역, 메뉴 카테고리, 이런 음식 어때요, 동네 맛집 기능이 잘 동작하고 있는지 확인하려면 어떤 지표를 확인해야 할까오?
지표를 정의하고, 지표가 어떤식으로 움직이면 잘 동작한다고 볼 수 있을까요?
| 목적
기능이 잘 동작하고 있는지 확인
| Think
(1) CVR(전환율) : 우선 우리의 목적은 해당 기능들이 잘 동작하고 있는지 확인하는 것이다. 해당 기능들은 홈 화면에서 음식점 화면으로 넘어가는 역할을 하기에 서비스 이용자들로 하여금 화면 전환이 중요하다고 생각한다.
(2) CTR(클릭율) : 배달 서비스의 매출은 주문이 이루어지냐가 주가 되기 때문에, 주문의 시작이 되는 홈 화면 내 CTR을 확인해보면 잘 동작한다를 알 수 있을 것으로 보인다.
CTR이 기존 대비 상승한다면 잘 동작한다고 볼 수 있을 것 같다.
2번 문제
[검색 만족도 지표]
| 문제 상황
배달 서비스를 담당하는 PM입니다.
고객이 검색 기능에 만족했는지 확인하려면 어떤 지표를 봐야 할까요?
검색하는 흐름을 떠올려보면서 그 안에 있는 이벤트를 조합해보세요.
| 목적
고객이 검색 기능에 만족했는지 확인
| Think
(1) CTR(클릭율) : 지표로 CTR을 설정한 이유는 2가지가 있다. 첫번째로는 검색창 자체를 클릭하는 비율이다. 앞선 1번 문제에서처럼 배너 영역이 제공하는 곳을 클릭하는 사람들도 있지만, 검색 영역을 클릭하는 사람들도 존재한다. 검색 기능에 만족했다면 일정 기간 대비 배너 영역 CTR보다 검색 영역 CTR이 더 높게 나올거라고 생각한다.
두번째로는 검색을 한 이후 검색 결과로 나온 음식점 페이지로 들어가는 CTR이다.
3번 문제
[검색 필터 기능의 활성화 지표]
| 문제 상황
배달 서비스를 담당하는 PM입니다.
검색 필터 기능은 잘 사용되고 있을까요? 필터 기능의 활성화 지표를 정의하면 어떻게 할 수 있을까요?
검색 필터를 사용하는 흐름을 떠올려보면서 그 안에 있는 이벤트를 조합해보세요.
| 목적
검색 필터 기능이 활용되고 있는지 확인
| Think
(1) CVR(전환율) : 물론 CTR도 중요할 것으로 예상이 되지만 아무래도 검색 필터는 여러가지이기도 하고, 필터를 ON/OFF 할 때 클릭을 많이 하기 때문에 이걸로 기능이 잘 활용되고 있는지를 파악하는 것 자체가 어려울 것이라고 생각했다.
그래서 CVR에 중점을 두어 생각해보았는데 검색 필터 기능을 개발하기 전 어느정도 기준치를 정해놓고 검색 필터를 설정한 이후 음식점 페이지로 들어가는지를 확인하면 검색 필터 기능의 활용도를 알 수 있을 거라고 생각한다.
또는 일정 기간을 두어 (검색 영역에서 필터를 사용하지 않고 음식점 페이지에 들어가는 비율)-(검색 영역에서 필터를 사용하고 음식점 페이지에 들어가는 비율) 을 계산해서 검색 필터의 활용도를 알아내는 방법도 있을 것 같다.
4번 문제
[배달 서비스에서 가장 중요한 지표는?]
| 문제 상황
배달 서비스를 담당하는 PM입니다.
배달 서비스에서 가장 중요한 지표는 무엇일까요? 왜 그 지표가 중요할까요?
그것을 어떻게 늘릴 수(줄일 수) 있을까요?
| 목적
배달 서비스에서 가장 중요한 지표란?
| Think
(1) 주문 수 : 이 문제를 정의하고 해결하기 위해서는 정말 다양한 지표가 나올 수 있다고 생각한다. 다른 분들의 의견들도 다 다르게 나오기도 했다. 하지만 근본적으로 배달 서비스의 매출을 책임지고 기업 입장에서 순이익을 높이기 위해서는 주문 수가 많아야만 한다.
배달 서비스는 주문을 통해서만 이루어지는 서비스이기 때문에 주문수를 통해 문제를 해결하는 방법이 가장 근본적인 방법이라고 생각한다.
이는 리텐션의 문제일수도, 구매 전환의 문제일수도 있기에 AARRR/RARRA 두 방법 모두 사용 가능할 것으로 보인다. 2가지 방법을 통해 나온 결론을 A/B Test하여 결과를 도출하는 것이 좋을 것 같다.
5번 문제
[추천 알고리즘의 성능 지표]
| 문제 상황
여러분은 이커머스 서비스에서 추천 알고리즘을 만드는 조직의 PO입니다.
추천 알고리즘은 유저의 정보와 유저 로그를 토대로 구매할 것 같은 제품을 보여줍니다.
추천 알고리즘의 성능을 확인하기 위해 어떤 지표를 파악해야 할까요? 왜 해당 지표일까요?
| 목적
추천 알고리즘의 성능을 확인하기 위한 지표는?
| Think
(1) 카테고리별 CTR(클릭율) : 추천 알고리즘 자체가 유저의 정보와 로그를 바탕으로 구매할 것 같은 제품을 보여준다. 그렇다면 해당 유저가 자주 이용하는 카테고리별 CTR을 확인하고 페이지 전환이나 구매 전환까지 이루어지를 보면 될 것 같다. 추천 알고리즘과 카테고리별 CTR을 매칭해보면 알고리즘의 추천 성능이 어느정도 일치하고 불일치하는지 판단할 수 있을 것이다.
6번 문제
[여러분들이 자주 사용하는 서비스의 지표]
| 문제 상황
여러분들이 자주 사용하는 서비스에서 제일 중요한 지표는 무엇일까요? 왜 해당 지표가 제일 중요할까요?
그 외에 확인해야 하는 지표를 2개 더 뽑는다면 무엇이 있을까요?
| 목적
성공 지표 1~2개 및 보조 지표 설정해보기
| Think
[에듀테크 강의를 제공하는 구독형 서비스 기업, 코드잇]
성공 지표
(1) AU : 우선 구독형 서비스를 제공하는 기업이기 때문에 활성 사용자 수가 많아야만 그에 따른 소비자 구매건 수도 늘어나게 될 것이다.
(2) 리텐션/이탈율 : 기존 소비자가 계속해서 구독을 이어나가야 하니 이탈율 감소를 위해 성공 지표로 설정했다.
보조 지표
(1) 소비자 구매건 수
7번 문제
[퍼널 개선 프로젝트]
| 문제 상황
여러분들은 가입 퍼널을 개선하라는 미션을 받았습니다.
현재 가입 퍼널 프로세스 전환율은 약 20%며 가입 퍼널에서 온보딩을 더 진행하는 기능을 만들었습니다. 온보딩의 효과를 파악하려면 어떤 지표를 봐야할까요?
상상이 어렵다면 여러분들이 자주 사용하는 서비스를 가정하고 말씀하셔도 좋습니다.
| 목적
가입 퍼널 내 추가된 온보딩의 효과를 파악하기 위한 지표
| Think
(1) 가입 퍼널 프로세스 별 이탈율 : 전환율을 높이기 위해 온보딩을 더 진행하였기때문에, 프로세스 별 이탈율을 함께 보면 좋을 것 같다.
(무작정 온보딩을 추가시킨다고 좋은게 아니고, 신규 가입자들이 어느 특정 프로세스에서 이탈하게 되는지를 파악하고 그 지점에서 온보딩 기능을 더 추가하거나 빼야하거나 하기 때문)
-> 이 문제는 헷갈려서 제가 문제를 잘 이해하고 푼게 맞는기 의문이 드네요..!
선생님, 항상 감사합니다 !
답변 2
0
해성님 안녕하세요! 문제 푸느라 고생하셨어요~~!
1번
CVR에서 전환율에서 "전환" 이벤트를 화면 전환으로 정의하신걸까요?
화면 전환으로 정의하면 클릭율과 거의 비슷한 개념으로 볼 수 있습니다
전환 이벤트를 "구매"로 정의하면 구매 전환율이 되어서 실제로 홈화면에서 특정 화면을 통해 구매했는가의 비율을 가지게 됩니다
그래서 1), 2) 생각 잘 해주셨는데 전환 이벤트 정의에 대해 고민을 해보시면 좋을 것 같아요!
목적 정의를 고민하신 것 잘 하고 계신데, 목적이 문제와 동일합니다. 목적이라고 하면 조금 더 구체적으로 가야 합니다. 기능이 잘 동작한다? 잘 동작한다는 뭐지? 이 정의가 필요해요.
CTR이 기존 대비 상승이라고 했는데 기존은 배포 이전이겠죠? 이렇게 이야기를 한다면 만약 시즈널리티의 이슈로(만약 월드컵 결승에 우리가 나간다고 하면 치킨이 엄청 많이 팔릴 거예요) 올라갈 거예요. 이런 상황이라면 기능 때문이 아니라 시즈널리티 때문에 발생한 이슈겠지요
그래서 더 정확히는 전후 비교 외에 AB Test를 통해 신기능을 경험하는 유저와 아닌 유저와 나뉘어서 지표를 보면 더 정확한 판단을 할 수 있습니다
2번
CTR로 잘 정의해주셨고, 이거 외에 정의한다면 구매 전환율(CVR)을 뽑을 수 있을 거예요. 일단 검색을 만족하면 클릭했을거고, 그러면 결제를 했겠죠? 이걸 2가지 지표로 파악하는 거예요.
목적에 지금 검색 기능에 만족했는지 확인이라고 해주셨는데, 만족했다면 어떤 행동을 했을 것이다까지 생각해보시면 더 구체화가 가능해요!
참고로 검색 알고리즘은 "알고리즘"이라 이미 정해진 지표 몇가지가 있어요. 알고리즘 단어가 나오면 한번 검색해보시는 것도 추천해요
3번
이 문제는 간단하게 검색 필터를 사용했냐?를 확인하고 싶은 문제입니다
따라서 전환율까지 가지 않고, 단순하게 클릭했는지를 파악하는 것이 더 좋을 것 같아요. ON/OFF 클릭이 많이 생기니 그 클릭이 얼마나 있나로 일단 이 제품 자체의 사용 비율을 구할 수 있지요
아래 영상에서 제가 특정 기능 지표를 어떻게 바라보면 좋은지 알려드리고 있는데, 한번 살펴보셔요
4번
4번 문제가 면접에 나온다면, Input Metric -> Output Metric 프레임을 생각해보시면 됩니다. Output Metric이 결국 매출인데, Input Metric은 무엇으로 해야 할까요?
주문 수도 가능한 지표고, 좀 더 뾰족하게 신규 유저의 주문 수 등 다양하게 볼 수 있어요
AARRR 관점의 답변은 저라면 좋은 답변으로 판단하지 않을 것 같은데, 그 이유는 배달 서비스에서 가장 중요한 지표란? => 배달 서비스만의 지표를 생각해보란 의미라서요. 배달 서비스, 배달 비즈니스는 어떻게 진행되는지 고민해보시고(비즈니스 모델도 살펴보고) 지표를 뽑아보시면 더 좋을 것 같아요
5번
CTR도 쓸 수 있고, 보조적으로 CVR을 사용해서 실제로 구매까지 했나 살펴볼 수 있어요.
또한 알고리즘 관점 지표도 있으니 살펴보셔요
6번
코드잇 서비스는 왜 생긴걸까요? 고객의 어떤 문제를 해결하기 위해 나온 것일까요?
고객의 문제를 먼저 생각하며 지표 정의를 해보면 좋아요
결국 코드잇은 공부를 하기 위한 서비스니 학생들이 얼마나 공부하고 있는지를 대표할 수 있는 지표를 고를 것 같아요
그리고 회사 관점에선 말씀하신 사용자 수 또는 하루에 "강의 구매를 위해 구매 페이지를 얼마나 접근하는가?"를 살펴볼 수 있을 것 같아요. 구매 페이지에 들어온 사람들 수가 있고 실제 구매한 사람이 있으면 비율로 표시할 수 있는데 2개의 숫자 조합이 어떻게 해야 더 올라갈 수 있을지 고민해봐도 좋을 것 같아요
7번
요 문제는 특정 지표를 선정해서 AB Test를 해야하는 의도로 미리 낸 문제입니다. AB Test 파트 학습하시고 문제 다시 보시면 이해가 되실 것 같아요
계속 문제 풀어보시지요! 파이팅입니다!
0
안녕하세요, 인프런 AI 인턴입니다. 차해성님, 지표 정의하기 연습 문제에 대해 고민한 흔적이 많이 보입니다. 각 질문에 대해 유사한 질문 및 답변을 확인하고, 도움되는 링크를 준비했습니다.
1. 기능이 잘 동작하고 있는지 확인
기능이 잘 동작하는지를 CTR과 CVR로 확인하려는 접근은 일반적으로 유효합니다. CTR이 높아지면 사용자의 관심을 끌었음을 의미하고, CVR이 높으면 실제 행동으로 이어졌음을 나타냅니다. 이와 관련된 기존 답변은 다음 링크에서 확인 가능합니다.
- 4-8. 지표 정의 연습 문제 답변
2. 검색 만족도 지표
검색 기능에서 중요한 것은 검색 결과의 정확성과 관련 행동이며, 이를 CTR과 같은 지표로 평가할 수 있습니다. 관련 답변은 아래에서 확인하세요.
- 4-8 지표 정의하기 연습문제
3. 검색 필터 기능의 활성화 지표
필터 기능의 사용성과 전환율을 통해 기능의 효율성을 측정하려는 시도는 좋습니다. 유사한 접근을 다룬 기존 답변 링크는 다음과 같습니다.
- 4-8. 지표 정의하기 연습문제
4. 배달 서비스에서 가장 중요한 지표
배달 서비스에서는 주문 수가 중요한 핵심 지표가 될 수 있습니다. 하지만 다른 지표와의 균형도 필요한데, 고객 만족도나 주문 전환율 등을 고려해야 합니다.
5. 추천 알고리즘의 성능 지표
추천 알고리즘에 대해 잘 이해하고 계시며, CTR을 이용해 효율성을 측정하는 방법은 매우 효과적입니다. 추가적으로, 알고리즘의 성능 지표에 관한 내용을 찾으려면 다음을 참고해 보세요.
- https://sungkee-book.tistory.com/11
6. 자주 사용하는 서비스의 지표
AU와 리텐션은 구독형 서비스에서 정말 중요한 평가 척도입니다. 이 지표들을 적절히 활용하여 고객 유지를 향상시킬 수 있습니다.
7. 퍼널 개선 프로젝트
각 단계의 이탈률을 통해 온보딩을 포함한 전반적인 퍼널 최적화가 필요하며, 이에 맞춘 실험 등이 필요할 수 있습니다. 다음 링크에서 관련 정보를 확인해 볼 수 있습니다.
- 4-8 지표 정의 연습 문제
마지막으로, 각 질문에 대한 유사한 답변을 참고하여 문제 해결에 도움을 얻으시기 바랍니다. 질문해 주셔서 감사합니다. 추가적으로 궁금한 점이 있으시면 언제든지 질문해 주세요. 곧 지식공유자께서도 더 많은 피드백과 답변을 제공해 주실 것입니다.
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.