하길우
크리에이터
[칼럼] 전략가의 무기들
[실험] AB테스트가 잘 구성되었는지 검증할때(이론편/개괄)
실험은 데이터를 활용하는 전략가에게 있어서 가장 강력한 인과 검증 수단 중 하나압니다.
시중에 실험을 분석해서 p-value를 구하는 것은 매우 잘 나와있지만,
1) 제품에서 실험을 설계하는 것 2) 실험 구성을 검증하는 것 3) 실험을 잘 분석하는 것
이 세가지에 대한 실무지식은 거의 부재한 것 같습니다.
그래서 부족하지만 제 경험과 클래스101에서 실제 진행된 실험들을 토대로 실험 관련해서 공부할 수 있는 자료를 작성해보려합니다.
저 역시 늘 배우는 단계이기 때문에, 부족한 부분이 있다면 댓글로 알려주시면 감사하겠습니다 😀
시작하기전에 공통적으로 알아 두셔야하는 부분이 있습니다.
"실험을 대체 왜 하는가?"
제품을 성공시키는 관점에서, 실험을 하는 이유는 딱 2가지입니다.
멤버십 전용