ABใในใๅฎๅ่ ๅฎ็งใฌใคใ
AB Testใฎไบบๆฐใจ้ขๅฟใ็็บ็ใซๅคงใใใชใใ ใใซใๅฝๅ ๅใฎAB Test่ฌ็พฉใไปใใใ็ฅใใใใพใ๏ผ
ๅ่ฌ็ 319ๅ
้ฃๆๅบฆ ๅ็ด
ๅ่ฌๆ้ ็กๅถ้

- ๆช่งฃๆฑบ
์ต์ ์ํ ์ฌ์ด์ฆ
์๋ ํ์ธ์ ์ข์ ๊ฐ์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค. 3๊ฐ ppt ๋ง์ง๋ง ํ์ด์ง์ ์ต์ ์ํ ์ ๊ณต์ ๊ด๋ จ ์ง๋ฌธ ์์ต๋๋ค. ๋ง์ง
ํต๊ณab-testdbsdk3337
ใป
9ใถๆๅ
0
74
1
- ่งฃๆฑบ
ํ์๋ชจ๋ํฐ๋ง์ ๋ํด ์ง๋ฌธ๋๋ฆฝ๋๋ค.
์๋ ํ์ธ์!์ข์๊ฐ์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค. ํ์๋ชจ๋ํฐ๋ง ๋ถ๋ถ์ ๋ํด ์ง๋ฌธ์ด ์์ด ๋จ๊น๋๋ค. ํ์๋ชจ๋ํฐ๋ง์ด ํ์ํ ์ด์ ์ ๋ํด์๋ ์ดํดํ์๋๋ฐ์. ํ์๋ชจ๋ํฐ๋ง์ ๊ธฐ๊ฐ์ ์ด๋์ ๋๋ก ํด์ผํ ๊น์? ๋ณดํธ์ ์ธ ๊ธฐ์ค์ด๋ ๊ธฐ๊ฐ์ ๊ตฌํ๋ ๋ฐฉ๋ฒ์ด ์์๊น
ํต๊ณab-testkshsmr7128
ใป
0
86
1
- ่งฃๆฑบ
์ํ ์ฌ์ด์ฆ ๋ฌธ์
์๋ ํ์ธ์, minimum ์ํ ์ฌ์ด์ฆ ์ ํ๋ ๋ถ๋ถ์์ ์ง๋ฌธ๋๋ฆฝ๋๋ค.online ํ๋ซํผ์ ๊ฒฝ์ฐ base-metric๊ณผ expected-metric์ CVR, CTR ์ด ์ ์ฉ์ด ๊ฐ๋ฅํ๋ฐ<p
ํต๊ณab-testteohus
ใป
0
130
1
- ่งฃๆฑบ
A/B ํ ์คํธ period calculation
์๋ ํ์ธ์์ข์ ๊ฐ์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค! a/b test ์์ minimum sample ์ฌ์ด์ฆ๋ฅผ ๊ตฌํ ๋ค period calculation ๋จ๊ณ์์ ์ง๋ฌธ ์์ด์ ๋ฌธ์๋๋ฆฝ๋๋ค. ๊ฐ์ ๋ฃ๋ ์ค์ ๋ค๋ฅธ a/b ํ ์คํธ ์ ํ๋ธ ๊ฐ์
ํต๊ณab-testteohus
ใป
0
132
1
- ่งฃๆฑบ
๊ฒฐ๊ณผ์ ๋ฆฌ, ํด์ํด์ฃผ์๋ ๋ถ๋ถ์์ ์ง๋ฌธ
์๋ ํ์ธ์, ์ข์ ๊ฐ์ ๊ฐ์ฌํฉ๋๋ค.๊ฒฐ๊ณผ์ ๋ฆฌํด์ ํด์ํด์ฃผ์๋ ๋ถ๋ถ์์ ์ง๋ฌธ์ด ์์ต๋๋ค.App์์์ Buy CVR ์ ๊ตฌํ ๋ raw data๋ ์ด๋ป๊ฒ ํ๋ณด๋๋๊ฑด๊ฐ์? ๋ณดํต์ ์ผ์ด์ค์
ํต๊ณab-testteohus
ใป
0
138
1
- ่งฃๆฑบ
์ต์ ์ํ ์ฌ์ด์ฆ
๊ณ ์ ๋ ๋ฒ ํ๊ฐ์ด 0.2๋ผ๋ ๊ฑด๊ฐ์, 0.8์ด๋ผ๋ ๊ฑด๊ฐ์?์์์๋ 0.2์๋ค๊ฐ ๋ค์์๋ 0.8์ด๋ผ ๋ฌด์จ๋ง์ธ์ง ํท๊ฐ๋ ค์ ใ
ํต๊ณab-testynny
ใป
0
136
1
- ่งฃๆฑบ
์ฌ๊ธฐ์ ์ ์์์ค์ p-value์ ๋์ผํ๊ฐ์?
5% ๋ผ ๋์์ p-value๋ผ๊ณ ์๊ฐํ๋๋ฐ ๊ณ์ ๋ฃ๊ณ ์์ผ๋ฉด ๊ทธ๊ฒ๋ ์๋ ๊ฒ ๊ฐ๊ณ , ์ ์์์ค์ ์ด๋ป๊ฒ ๊ฒฐ์ ๋๋์ง๋ ๊ถ๊ธํฉ๋๋ค.
ํต๊ณab-testneoyongwon
ใป
0
343
1
- ่งฃๆฑบ
Pdf์๋ฃ๊ฐ ์ด๋จ์ฃ
์ฒซ ์์ ๋ง ์๋ฃ๊ฐ ์๋ค์
ํต๊ณab-testneoyongwon
ใป
0
170
1
- ่งฃๆฑบ
์ต์ ์ํ ์ฌ์ด์ฆ ๊ด๋ จ ๋ฌธ์๋๋ฆฝ๋๋ค.
๋ง์ฝ์ ํ๊ธฐ์ ๊ฐ์ ์คํ์ด๋ฉด ์ด๋ป๊ฒ ์ต์ ์ํ ์ฌ์ด์ฆ๋ฅผ ๊ตฌํ๋์? ๊ธฐ์กด ๊ด๊ณ ๋ ์ด๋ฏธ์ง ๊ด๊ณ ์์ต๋๋ค. ๊ทธ๋์ ๋น๋์ค ๊ด๊ณ ๋ก ๋ฐ๊พธ๊ณ ์ํด์ ABT๋ฅผ ํฉ๋๋ค. ์ด ๋ Success metric์ Clic
ํต๊ณab-test์ต์์ํ์ฌ์ด์ฆseongminlee02083729
ใป
0
411
1
- ่งฃๆฑบ
์ต์ ์ํ ์ฌ์ด์ฆ ๊ด๋ จ ์ง๋ฌธ
์ ์๋ ์๋ ํ์ธ์ ์ข์๊ฐ์ ๊ฐ์ฌํฉ๋๋ค. A/B ํ ์คํธ ์คํ๊ณํ - ์ง๋จํฌ๊ธฐ ๊ฒฐ์ ๊ด๋ จํด์ ๋ด์ฉ ์ง๋ฌธ์ด ์์ต๋๋ค. ํด๋น ๊ฐ์์ ๋ด์ฉ์, ABํ ์คํธ๊ฐ ์ ์๋ฏธํด์ง๋ ค๋ฉด ํ์๋กํ๋ ์ต์ ์
ํต๊ณab-testgyungyoonpark9378
ใป
0
204
1
- ่งฃๆฑบ
ํ์ต ์๋ฃ ์ง๋ฌธ
์๋ ํ์ธ์,a/b ํ ์คํธ์ ๋ํ ์ ์ตํ ๊ฐ์ ๊ฐ์ฌํฉ๋๋ค.์ค๋ ๊ฐ์ ์๊ฐํ๊ธฐ ์์ํ๋๋ฐ, ๊ฐ์ ์๊ฐ ์ค ์ฐธ๊ณ ์ฌํญ์ ์๋ ํ์ต์๋ฃ1~7๊ฐ๊น์ง ๊ฐ์์ ๋์ค๋ PDF๋ฅผ ์ ๊ณต
ํต๊ณab-testํ์ต์๋ฃevepark04160919
ใป
0
233
1
- ๆช่งฃๆฑบ
์ํ ์ฌ์ด์ฆ ๊ด๋ จ ์ง๋ฌธ
AB ํ ์คํธ ํ๊ฐ์งํ๋ก ํ์ฉ๋๋ ๊ฒฝ์ฐ๋ ํฌ๊ฒ ํ๊ท ์งํ์, ๋น์จ ์งํ๊ฐ ์์ต๋๋ค. ์ด๋ ์ด๋ค ์งํ๊ฐ ํ๊ฐ๊ธฐ์ค์ผ๋ก ํ๋ ๊ฐ์ ๋ฐ๋ผ ์ํ ์ฌ์ด์ฆ ๊ณ์ฐ ๋ฐฉ๋ฒ๋ ๋ฌ๋ผ์ง๊ฒ ๋ ํ ๋ฐ์,๊ฐ์์์๋ ์คํ๋ชฉํ์ ์ง์ ๋ ํ๊ฐ์งํ(๋น์จ์งํ)๋ฅผ ๊ธฐ์ค์ผ๋ก ์ํ์ฌ์ด์ฆ๋ฅผ ๊ณ์ฐํ๊ณ
mypoints
ใป
1
387
1
- ๆช่งฃๆฑบ
์นดํ ๊ณ ๋ฆฌ๋ณ ํต๊ณ์ ๊ฒ์ ๊ด๋ จ ์ง๋ฌธ
์๋ ํ์ธ์ ์นดํ ๊ณ ๋ฆฌ๋ณ ํต๊ณ์ ๊ฒ์ฆ ๊ด๋ จํด์ ์ง๋ฌธ ์์ต๋๋ค.์ต์ด ์คํ ์ค๊ณ์ ์ ์ ์์ค๊ณผ ๊ฒ์ ๋ ฅ, ๋ฒ ์ด์ค ์์ค์ ๋ฐ๋ฅธ ๋ฆฌํํธ ์์ค์ ๊ณ ๋ คํ์ฌ ํต๊ณ์ ๊ฒ์ฆ์ ์ํ ์ต์ด ์ํ ์ฌ์ด์ฆ๋ฅผ ๊ณ์ฐํฉ๋๋ค.๊ทธ๋ฌ๋ ๋์ผํ ๋ชจ์์ ๋ํด ์นดํ ๊ณ ๋ฆฌ๋ณ ๊ตฌ๋งค ์ ํ์จ
mypoints
ใป
1
329
1
- ่งฃๆฑบ
A/B Test ์คํ์ฃผ์ ์์์งํ ์ ์
์๋ ํ์ธ์. ๊ฑฐ์น์ฝ๋ฉ๋์ง๋จํฌ๊ธฐ ๊ฒฐ์ ์ฑํฐ์์๋ ์คํ ์ ํ์ ํ์คํ ๋ฆฌ๋ฅผ ๋ณด๊ณ ์ด๋ฐ ์คํ์ ํ์๋ ํ๊ท ์ ์ผ๋ก ์ผ๋ง์ ๋์ lift ์์น์ด ์์๋์ง ๋ณด๊ฒ๋๋ฉด ์๋ฅผ๋ค์ด 2%์ ๋ ์์นํ๋ค ์ ๋๋ฅผ ํ์ธํ ์ ์๋ค๊ณ ํ์ จ๋๋ฐ A/B Test ์คํ์ฃผ์ 1์
ํต๊ณab-testbodi
ใป
0
534
2
- ๆช่งฃๆฑบ
๊ฐ์ค๊ฒ์ ๊ฐ์ ๋ง์ง๋ง ๋ถ๋ถ์ด ํท๊ฐ๋ฆฝ๋๋ค.
๊ฐ์ค๊ฒ์ ๋ง์ง๋ง ๋ถ๋ถ์ด ํท๊ฐ๋ ค์ ์ง๋ฌธ๋๋ฆฝ๋๋ค. ๋จ์ธก๊ฒ์ ์ผ ๊ฒฝ์ฐ 0.05๋ก ์ ์์์ค์ ์ก์ง๋ง์์ธก๊ฒ์ ์ผ ๊ฒฝ์ฐ ๊ทธ๋ํ์์๋ a/2๋ก ๋์ด์์ผ๋ 0.025๋ก ๊ฐ๋๊ฒ ๋ง๋์? ์๊ฒฉํ, ๋ณด์์ ์ธ ์คํ์ด ์๋๋๋ก ์กฐ์ฌํ๋ผ๊ณ ํ์ จ๋๋ฐ 0.05๋ก ๊ฐ๋๊ฒ
ํต๊ณab-testbodi
ใป
0
588
1
- ๆช่งฃๆฑบ
'p-value๋ ๊ธฐ์กด ๊ท๋ฌด๊ฐ์ค์ด ๋ฐ์ํ ํ๋ฅ '์ด๋ผ๊ณ ํ์ จ๋๋ฐ์. ์ด๊ฑด ์๋ชป๋ ์ค๋ช ์๋๊ฐ์?
์๋ ํ์ธ์.๋ชจ๋ฅด๊ณ ๋ง์ํ์ ๊ฒ์ ์๋ ๊ฒ ๊ฐ์๋ฐ์. ์์ ์ด ํ์ํ ๊ฒ ๊ฐ์ต๋๋ค.
ํต๊ณab-testjohn
ใป
0
422
1
- ๆช่งฃๆฑบ
MDE์ D๋ detectable์ ๋๋ค.
์๋ ํ์ธ์.์คํ์ธ ์ค ์์๋๋ฐ, ๋ฐ์๋ defectable์ด๋ผ๊ณ ํ์ ์ ์๋ชป ์๊ณ ๊ณ์ ๊ฒ ๊ฐ์ ๋ง์๋๋ ค์!
ํต๊ณab-testjohn
ใป
0
414
1
- ๆช่งฃๆฑบ
๋ํดํธ ์ ๋ ฌ ์ํ๋ก ์ ํํ์ง ์๊ณ ํํฐ ์ ๋ ฌ ๋ฐฉ๋ฒ์ ๋ฐ๊พผ ์ ์ ๋ ์ ์ธํด์ผ ํ๋์?
์๋ ํ์ธ์.A: ํ๋งค์B: ๋ฐฐ๋ฌ๋น ๋ฎ์์C: ๋ณ์ ๋์์D: ๋ฐฐ๋ฌ ๋น ๋ฅธ์์ด๋ ๊ฒ ํํฐ ๋ํดํธ ๊ฐ์ ๊ฐ๊ฐ 4๊ฐ์ ๊ทธ๋ฃน์ผ๋ก ๋๋์ด ๋ณด์ฌ์ค ๋ค ๊ฐ ๊ทธ๋ฃน์ ์ํ๋ ์ ์ ๋ค์ output metric(ARPU, ์ ํ์จ ๋ฑ)์ ๋น๊ต
ํต๊ณab-testjohn
ใป
0
368
1

