inflearn logo
강의

Course

Instructor

The Complete Guide to AB Testing

Hypothesis Test

가설검정 강의 마지막 부분이 헷갈립니다.

599

bodi

2 asked

0

가설검정 마지막 부분이 헷갈려서 질문드립니다.

단측검정일 경우 0.05로 유의수준을 잡지만

양측검정일 경우 그래프에서는 a/2로 되어있으니 0.025로 가는게 맞나요? 엄격한, 보수적인 실험이 안되도록 조심하라고 하셨는데 0.05로 가는게 맞나요?

말씀해주신 내용과 그래프가 살짝 상반된 것 같아서 질문 드립니다.

강의 잘보고있습니다. 감사합니다.

통계 ab-test

Answer 1

1

거친코딩

안녕하세요 :)

데이터분석가 거친코딩입니다.

질문해주신 내용에 답변을 드리자면,

양측 검정의 경우 말씀해주신대로 유의수준 0.025로 가게되는 것이 맞습니다.

강의 때 설명드린대로, 저희가 실험하는 모든 테스트는 우수성 테스트를 위함이기때문에,

엄격한 평가기준이 아니라면 단측검정을 하셔도 크게 무리가 없습니다.

그래서 보수적인 실험을 지양하시고,

실험에 대한 후속 모니터링까지 하신다면 단측검정인 유의수준 0.05로 보셔도될 것같습니다 :)

감사합니다.

거친코딩 드림.

 

0

bodi

네 답변 감사합니다!

강의 수강 목적 남겨봅니다!

0

57

3

강의 수강 목적입니다!

0

54

2

A/B테스트 진행 시 실험 내용 중 이해 안가는 부분

0

42

1

모델 서빙과 관련된 강좌가 출시되는지 질문드립니다.

0

52

2

6-7 로그설계하기 연습문제 제출/ 피드백 요청

0

57

2

4-8. 지표 정의 연습 문제

0

73

2

Tracking Plan, Taxonomy 문제풀이

0

101

1

6-7 로그설계하기 실습 제출

0

64

1

6-7 로그설계하기 연습문제 제출/ 피드백 부탁드립니다.!!

0

75

1

최소 샘플 사이즈

0

89

1

후속모니터링에 대해 질문드립니다.

0

102

1

샘플 사이즈 문의

0

155

1

A/B 테스트 period calculation

0

159

1

결과정리, 해석해주시는 부분에서 질문

0

164

1

최소 샘플 사이즈

0

164

1

여기서 유의수준은 p-value와 동일한가요?

0

409

1

Pdf자료가 어딨죠

0

194

1

최소 샘플 사이즈 관련 문의드립니다.

0

432

1

최소 샘플 사이즈 관련 질문

0

224

1

학습 자료 질문

0

245

1

A/B Test 실험주제 예상지표 선정

0

550

2

'p-value는 기존 귀무가설이 발생할 확률'이라고 하셨는데요. 이건 잘못된 설명 아닌가요?

0

448

1

MDE의 D는 detectable입니다.

0

422

1

디폴트 정렬 상태로 전환하지 않고 필터 정렬 방법을 바꾼 유저는 제외해야 하나요?

0

388

1