실험 소재 예시관련 질문입니다.
주요 실험 소재를 설명해주신 예시 관련해서 질문이 있어요.
예시) B라는 기능이 추가되면 "신규유저"가 우리 제품에 더 만족할까?
위 예시에서 특별히 신규유저를 지칭하신 이유가 있을까요?
실험 결과에 대해서 세그먼트를 고려할 필요가 있다는 맥락일까요? 혹은 유저 유입에 대한 실험이 중요하다는 이야기일까요..?
ㅎㅎ.. 엄청 사소한 것 같은데, 궁금해서 여쭤봅니다.
답변 1
0
S0님 안녕하세요 :) 좋은 질문해주셔서 감사합니다! 사소한 것은 없지요!!
이렇게 질문해주시는 자세가 넘 좋은 자세라고 생각합니다.
신규 유저를 고려하는 것은 여러가지 상황에서 가능해요
- 신규 유저만 겪는 기능을 설계하는 경우 : 예를 들면 온보딩 기능
- 모든 유저에게 AB Test를 하기엔 부담스러운 경우 : 리스크가 있을 것 같은 기능인 경우 혹은 아직 가능성을 고민하는 시기인 경우
- 기존 유저들이 많고, 오래된 서비스라 사용성이 둔화되었다는 판단이 되는 경우 : 신규 유저에 집중해서 기능을 내서 성과를 확인하고 싶은 경우입니다. 전체 유저를 대상으로 하면 수치가 잘 오르지 않고, 크게 반응하지 않는다는 근거가 있다면 이런 방식을 고려해봅니다
- 기존 유저와 신규 유저의 경험이 달라지는 경우 : 온보딩과 유사한데 기존 유저가 경험하면 혼란이 될 수 있으면 신규 유저에게만 실험할 수 있습니다
다르게 표현하면 특정 세그먼트를 고려하는 실험이 점점 생길 수 있다라는 의미입니다. 서비스가 작은 경우엔 신규 유저가 아닌 전체 유저 대상으로 해도 괜찮을 수도 있지요(샘플 사이즈의 이슈도 존재하기에) 점점 실험을 많이 하다보면 세그먼트를 집중해서 실험하는 경우가 생길거에요-!
6-7 로그설계하기 연습문제 제출/ 피드백 요청
0
32
2
4-8. 지표 정의 연습 문제
0
47
2
Tracking Plan, Taxonomy 문제풀이
0
76
1
6-7 로그설계하기 실습 제출
0
50
1
6-7 로그설계하기 연습문제 제출/ 피드백 부탁드립니다.!!
0
52
1
4-8 지표정의 연습문제
0
49
3
질문있습니다!
0
63
1
4-8 지표 정의하기 연습 문제 풀이
0
98
1
4-8 지표 정의하기 연습 문제 풀이!
0
85
2
4-8. 지표 정의 연습 문제 1번과 2번 피드백을 여쭐 수 있을까요?
0
91
2
강의 수강 목적입니다!
0
53
2
6-7. 데이터 로그설계 연습 문제 제출합니다!
0
94
3
4-8. 지표 정의 연습 문제 피드백 부탁드립니다!
0
129
3
이미 배포가 확정된 기능에 대한 ABT 진행에 대한 문의
0
90
3
4-8 지표 정의 풀이 피드백 부탁드립니다🙇♂
1
99
3
강의 목적입니다.
0
79
2
6-4 데이터 로그 설계 프로세스 강의 관련 질문
0
66
1
4-8 지표정의 문제 풀이 입니다
0
128
2
데이터 취합과 정리 어디서부터 해야할까요
0
98
2
3장 강의자료 다운로드 시, 2강이 다운로드 됩니다.
0
69
2
데이터 로그 설계 과제 작성
0
111
2
코칭 관련
0
80
2
슈퍼셋 사용이 처음이라 질문드립니다.
0
113
1
지표정의 4-8 문제풀이 입니다.
0
133
1