-
질문 & 답변
카테고리
-
세부 분야
기획 · 전략 · PM
-
해결 여부
해결됨
최소 샘플 사이즈 관련 질문
24.02.20 11:18 작성 조회수 70
0
선생님 안녕하세요
좋은강의 감사합니다.
A/B 테스트 실헙계획 - 집단크기 결정 관련해서 내용 질문이 있습니다.
해당 강의의 내용은, AB테스트가 유의미해지려면 필요로하는 최소 샘플사이즈가 있다 인데요
python scipy 에서 ttest_ind 함수를 사용하면요
from scipy import stats
t, p = stats.ttest_ind(array1, array2, equal_var= False)
이런식으로 하면 t와 p가 정해지는데, 여기에서 array 1과 array 2가 최소 샘플 수를 만족시킨다는 보장이 없는 것이잖아요.
그럼 여기에서 나온 t p는 어떻게 해석해야 하는건가요?
답변을 작성해보세요.
0
거친코딩
지식공유자2024.02.20
안녕하세요.
거친코딩입니다.
일단 먼저 좋은 질문 해주셔서 감사합니다.
제가 강의에서도 말씀드린대로
신뢰할수있는 ab test결과를 얻으시려면 필요충분한 샘플 사이즈수가 확보되어야한다고 말씀드렸습니다.
그리고 파이썬에서 계산되는 t값과 p값은 샘플사이즈수와는 별개로 리스트값에 어떠한 값이 존재하면 통계량을 산출하게 되어있습니다.
그런데 만약에 리스트안에 10:10 개의 t test를 진행하면 p value 값이 0.05가 나와도
해석상으로는 우리는 신뢰할 수 있는 0.05라 말하기 어렵다 라고 해석하시면 됩니다.
신뢰있는 0.05가 되기위해서는 강의에서 나오는 방식대로 충분한 샘플 사이즈수를 확보해주시기 바랍니다.
감사합니다.
거친코딩 드림
답변 1