A/B TEST ๊ธฐ๋ณธ ์๋ฃ
๐ a/b test ๊ณ์ฐ๊ธฐ : https://abtestguide.com/calc/
A/B-Test Calculator - Power & Significance - ABTestGuide.com
Std. Error of difference SEdifference = ( SEA2 + SEB2 )1/2
abtestguide.com
๐ a/b test ๊ณ์ฐ๊ธฐ๋ฅผ ์จ๋ ๋๋๊ฐ ? https://yozm.wishket.com/magazine/detail/1325/
A/B ํ ์คํธ ๊ฒฐ๊ณผ, ์ด๊ฒ ๋ง์? | ์์ฆIT
์ด ๊ธ์ A/B ํ ์คํธ ๊ฒ์ฆ ๋ฐฉ๋ฒ๊ณผ ๊ด๋ จ๋ ๋ช ๊ฐ์ง ํ์ ๋๋ฆฝ๋๋ค. ์ ๋ ์ฒ์์ ์ ํ์จ์ PV๋ก ๊ณ์ฐํด์ผ ํ๋์ง, UV๋ก ๊ณ์ฐํด์ผ ํ๋์ง๋ถํฐ ํท๊ฐ๋ ธ์ต๋๋ค. ๊ทธ๋์ ์ธก์ ๊ธฐ์ค์ ์ ํ๋ ๋ฐฉ๋ฒ๋ถํฐ ์์
yozm.wishket.com
๐ https://yozm.wishket.com/magazine/detail/1012/
p๊ฐ? ์ ๋ขฐ๊ตฌ๊ฐ? AB ํ ์คํธ๋ฅผ ์์ฑํ๋ ํต๊ณ ๋ถ์, ๊ธฐ๋ณธ ๊ฐ๋ ์ก๊ธฐ | ์์ฆIT
ํ ๋ฒ์ด๋ผ๋ AB ํ ์คํธ๋ฅผ ๋๋ ค๋ณธ๋ค๋ฉด ๊ฒฐ๊ณผ ๋ถ์์ด ์๊ฐ๋ณด๋ค ์ด๋ ค์ด ์ผ์์ ๊นจ๋ซ๊ฒ ๋ฉ๋๋ค. ๋ปํ ๋์ ๋ณด์ด๋ ๊ฒฐ๊ณผ, ์์น์ธ๋ฐ ๋งค๋ฒ ํด์ํ๊ธฐ๊ฐ ๋๊ฐํฉ๋๋ค. ๋ฐ๋ผ์ ์ด๋ฒ ๊ธ์์ AB ํ ์คํธ ๊ฒฐ๊ณผ๋ฅผ
yozm.wishket.com
๐ https://angeloyeo.github.io/2021/01/05/confidence_interval.html
์ ๋ขฐ ๊ตฌ๊ฐ์ ์๋ฏธ - ๊ณต๋์ด์ ์ํ์ ๋ฆฌ๋ ธํธ
angeloyeo.github.io
๐ ์งํ์ ์ : https://bigsol.atlassian.net/wiki/spaces/YFJMS/pages/9863246
Log in with Atlassian account
We tried to load scripts but something went wrong. Please make sure that your network settings allow you to download scripts from the following domain: https://aid-frontend.prod.atl-paas.net/atlassian-id/front-end/5.0.396
id.atlassian.com
๐ https://blog.hackle.io/post/abtest-bucketing
ํตํด ๋ธ๋ก๊ทธ(Hackle Blog) : A/Bํ ์คํธ์์ ๊ฐ์ฅ ์ค์ํ ์ฌ์ฉ์ ๋ถ๋ฐฐ ๋ฐฉ๋ฒ๊ณผ ๊ณ ๋ คํ ์
A/B ํ ์คํธ์์ ์ฌ์ฉ์๋ฅผ ๋ฌด์์๋ก ๋ถ๋ฐฐํ ๋ ๊ณ ๋ คํด์ผ ํ๋ ๊ฒ์ ๋ํด ์๋ ค๋๋ฆฝ๋๋ค.
blog.hackle.io
๐ https://medium.com/daangn/1%EC%A3%BC-1%EA%B0%9C-%EC%8B%A4%ED%97%98%ED%95%98%EB%8A%94-%ED%94%84%EB%A1%9C%EB%8D%95%ED%8A%B8-%ED%8C%80%EC%9D%B4-%EB%90%98%EB%8A%94-%EC%97%AC%EC%A0%95-b8a4c337a8e1
1์ฃผ 1๊ฐ ์คํํ๋ ํ๋ก๋ํธ ํ์ด ๋๋ ์ฌ์
์๋ ํ์ธ์ ๋น๊ทผ๋ง์ผ ์ค๊ณ ๊ฑฐ๋ํ์์ ๋ฐ์ดํฐ ๋ถ์๊ฐ๋ก ์ผํ๊ณ ์๋ ๋งคํ์์!
medium.com
๐ https://towardsdatascience.com/the-essential-guide-to-sample-ratio-mismatch-for-your-a-b-tests-96a4db81d7a4
The essential guide to Sample Ratio Mismatch for your A/B tests
If you can’t trust the result of an experiment, you can’t trust the decisions you make based on it; and you’d be surprised how often you…
towardsdatascience.com
A/B TEST ๊ด๋ จ ์ฌํ ์๋ฃ
๐ A/B ํ ์คํธ์ ํ์ฅํ, MAB (Multi-Armed Bandits) ์๊ณ ๋ฆฌ์ฆ
A/B ํ ์คํธ์ ํ์ฅํ, MAB (Multi-Armed Bandits) ์๊ณ ๋ฆฌ์ฆ
์ด๋ฒ ํฌ์คํ ์์๋ A/B ํ ์คํธ์ ํ์ฅํ์ด๋ผ ๋ณผ ์ ์๋ MAB (Multi-Armed Bandits) ์…
playinpap.github.io
๐ ๋ฒ ์ด์ง์ A/B ํ ์คํธ in Python
๋ฒ ์ด์ง์ A/B ํ ์คํธ in Python
๋ฒ ์ด์ง์ ๊ด์ ์์ AB Test๋ฅผ ํ๋ ๋ฐฉ๋ฒ์ ๋ํด ์ ๋ฆฌํ์ต๋๋ค. ์ ์ฒด ์ฝ๋๋ ์ฌ๊ธฐ ์์ ํ์ธํ ์ …
playinpap.github.io
๐ A/B ํ ์คํธ์์ ์๋ฏธ์๋ ํจ๊ณผ ๊ธฐ์ค (MDE)์ ์ค์ ํ๋ ๋ฐฉ๋ฒ
A/B ํ ์คํธ์์ ์๋ฏธ์๋ ํจ๊ณผ ๊ธฐ์ค (MDE)์ ์ค์ ํ๋ ๋ฐฉ๋ฒ
๋ถ์ : A/B ํ ์คํธ์ ๊ฐ์ฅ ์ฐพ๊ธฐ ํ๋ ํ๋ผ๋ฏธํฐ๋ฅผ ์์๋ณด๊ธฐ ์ด ๊ธ์ ๊ฐ์ธ ๋ธ๋ก๊ทธ ์ ๋จผ์ ์์ฑ๋ ๊ธ์ ๋๋ค…
playinpap.github.io
๐ ๋ฒ ์ด์ง์ A/B ํ ์คํธ - Bayes theorem
๋ฒ ์ด์ง์ A/B ํ ์คํธ - Bayes theorem
์ด ๊ธ์ ์์ฑ์ ๋ธ๋ก๊ทธ ์์๋ ๋ณด์ค ์ ์์ต๋๋ค. ๋น๋์ฃผ์(Frequentist) vs ๋ฒ ์ด์ง์(Baye…
playinpap.github.io
๐ https://yozm.wishket.com/magazine/detail/1034/
AB ํ ์คํธ ์ธ์ฌ์ดํธ์ ์๋ก์ด ์ฐจ์, ๋ฒ ์ด์ง์ ํต๊ณ์ ๊ฐ์ค ๊ฒ์ | ์์ฆIT
AB ํ ์คํธ๋ฅผ ํ๊ณ ๊ฒฐ๊ณผ๋ฅผ ๊ณต์ ํ ๋๋ฉด ‘๋์์ด ์๋ณธ๋ณด๋ค ๋์ ํ๋ฅ ’์ ๊ดํด ๋ฌผ์ด๋ณด๋ ์ฌ๋์ด ๊ผญ ํ ๋ช ์ฏค์ ์๊น๋๋ค. ๋จ์ํ ์งํ ๋น๊ต๋ฅผ ๋์ด์, AB ํ ์คํธ๋ก ์ป์ ๊ฒฐ๊ณผ๊ฐ ์ ๋ง๋ก ์๋ฏธ ์๋์ง
yozm.wishket.com
๋๊ธ