스타트업을 위한 실험 문서 템플릿 + 작성 가이드라인 (펌) 스타트업을 위한 실험 문서 템플릿 + 작성 가이드라인 https://www.minwookim.kr/experiment-doc-template/ 스타트업을 위한 실험 문서 템플릿 + 작성 가이드라인 그로스 실험, 프로덕트 실험, 마케팅 실험 등에 모두 이용할 수 있는 실험 문서 템플릿입니다. www.minwookim.kr 그로스 실험, 프로덕트 실험, 마케팅 실험 등에 모두 이용할 수 있는 실험 문서 템플릿입니다. 지난 번 글(스타트업을 위한 '실험'과 '가설' 개념 설명)에 이은 실험 시리즈. 그로스 실험, 프로덕트 실험, 마케팅 실험 등에 모두 이용할 수 있는 실험 문서 템플릿입니다. 실험을 설계하기 위해서는, 그리고 실험을 통해 학습하는 내용을 문서화해서 팀의 자산으로 남기기 위해서는 실험 문서가 필.. 2023. 1. 10. 데이터 분석 방법론 - AAARR AARRR 이란? 스타트업이나 그로스 해킹에 관심이 있는 사람이라면 AARRR이라는 용어를 한 번쯤은 들어봤을 것이다. AARRR은 미국의 스타트업 엑셀러레이터인 500 Startups의 설립자인 데이브 맥클루어Dave McClure)가 개발한 분석 프레임 워크로 Acquisition(획득) , Activation(활동), Retention(재방문), Referral(공유), Revenue(수익) 각 단계별 알파벳 첫 글자를 의미한다. AARRR 분석 프레임 워크는 시장 진입 단계에 맞는 특정 지표를 기준으로 우리 서비스의 상태를 가늠한다. 수많은 데이터 중 현시점에서 가장 핵심적인 지표에 집중할 수 있게 함으로써, 분석할 리소스(인력이나 시간 등)가 충분하지 않은 스타트업에게 매력적인 프레임워크로 활용.. 2023. 1. 5. A/B TEST SRM 오류를 해결하는 방법 : The essential guide to Sample Ratio Mismatch for your A/B tests https://towardsdatascience.com/the-essential-guide-to-sample-ratio-mismatch-for-your-a-b-tests-96a4db81d7a4 The essential guide to Sample Ratio Mismatch for your A/B tests If you can’t trust the result of an experiment, you can’t trust the decisions you make based on it; and you’d be surprised how often you… towardsdatascience.com If you can’t trust the result of an experiment, you can’t trust t.. 2022. 12. 8. A/B test 관련 학습자료 A/B TEST 기본 자료 🖍 a/b test 계산기 : https://abtestguide.com/calc/ A/B-Test Calculator - Power & Significance - ABTestGuide.com Std. Error of difference SEdifference = ( SEA2 + SEB2 )1/2 abtestguide.com 🖍 a/b test 계산기를 써도 되는가 ? https://yozm.wishket.com/magazine/detail/1325/ A/B 테스트 결과, 이게 맞아? | 요즘IT 이 글은 A/B 테스트 검증 방법과 관련된 몇 가지 팁을 드립니다. 저는 처음에 전환율을 PV로 계산해야 하는지, UV로 계산해야 하는지부터 헷갈렸습니다. 그래서 측정 기준을 정하는 .. 2022. 12. 8. 4. Google Analytics 에서 말하는 Session 세션이란 무엇인가 ? 세션을 만드는 방법은 ? 세션이란? 만약 제가 Coupang 페이지에 들어가본다고 가정합니다. 들어가서 어떤 페이지에도 들어가고, 클릭도 해보고 이런저런 활동을 했습니다. 그리고 1 시간 정도 점심 먹고 나서 또 coupang 페이지에 들어가서 어떠한 행동을 했다고 하면, 그 두개의 행동 덩어리를 각각 묶으면 분석에 활용할 수 있습니다. 사람들이 한 번 들어왔을 때 어떤 행동들을 연속적으로 하는지, 어떤 계기로 앱을 종료했는지 같은 개념이 세션입니다. GA에서는 30분 단위로 세션을 판단합니다. GA에서는 30분간 사이트와 아무런 상호작용이 없다면 ⇒ 세션이 끊어진걸로 봅니다. 만약 30분 이내 무슨 상호작용이 있다면 ⇒ 세션이 연속되는걸로 정의합니다. 📌 즉 , 30분 이내의 같은 user_id 에서 event가 발생한다면 ⇒.. 2022. 12. 6. 3. 데이터 분석가가 지표를 설정하는 법 지표 설정의 포인트 North Star Metric을 정하는 것도 중요하지만, 그것에 영향을 미치는 선행지표 설정은 더욱 중요합니다. 다른 스타트업들의 투자유치에서 활용되는 지표를 맹신해서는 안됩니다. 언론보도, 채용공고에서 언급하긴 좋으나 다른 스타트업에서 그대로 참고하기 어렵습니다. 성장을 이끄는 지표가 무엇인지는 철저히 내부의 데이터를 기반으로 검증해야 합니다. 실질 수익을 증가시키지 못하는 선행 지표는 과감히 버리셔도 좋습니다 ‘모든 지표를 충족하려는 순간 아무것도 개선시키지 못한다’는 것에 대한 빠른 수용 초기 Onboarding / Lock-in 유도 / 외부 확산 중 제일 중요하게 생각하는 내부 Agenda의 수립 ‘어떠한 문제를 해결하기 위해 어떠한 지표를 향상시키는 프로젝트를 어느 기간에.. 2022. 12. 4. 2. Retention Chart를 SQL으로 그려보자 ! 월간 리텐션 1. 맨처음 고객들의 최초 방문일을 정하기 SELECT customer_id, -- 고객 별 최초 방문일 Min(reg_dttm) AS first_visit_date -- 첫 방문일을 구하기 위해 min을 해준다. 이때 min을 쓰기 때문에 distinct 는 필요없다. FROM records -- 로그가 담겨져 있는 테이블 GROUP BY customer_id ORDER BY first_visit_date 2. JOIN해주기, 방문월과 첫 방문월을 JOIN 그 다음 visit_month와 first_visit_month를 같이 보여주는 테이블을 만들기 이 부분을 CTE로 보여주기 WITH montly_visit AS (SELECT r.customer_id, Date_format(c.firs.. 2022. 11. 19. 1. Retention Chart를 Python으로 그려보자 ! 리텐션이란 ? retention AAARRR 이라는 스타트업 그로스해킹 지표중 첫번째 R을 맡고 있다. 중간단계면서 가장 중요한단계 유저들의 리텐션이 가장 중요하다는 말을 매우 자주 들을수 있는데 리텐션이 왜 중요하냐면 플랫폼의 특성상 사용자의 이동이 빈번한 만큼 고객 충성도를 높이고 한 고객이 다른 고객에게 이런 경험을 공유하는 것이 무엇보다 중요한 성장지표다.사용자 경험이 반복되어야 다시 들어오고 다시 들어오는데 이렇게 계속 방문해줘야 서비스도 살아난다. 무슨말인지 이해하기 힘들수도 있을것 같아서 간단한 소개 자료를 들고왔다. 토스 PO 세션 두번째 [유저가 떠나지 않는 개념] 동영상에서 리텐션의 중요성을 이야기 하고 있다 AARRR 중에서도 리텐션 먼저 뜯어고쳐야 -> 즉 리텐션 곡선중 평평해지는 .. 2022. 11. 19. 이전 1 다음 반응형
