테스트 설계 시 유의해야 하는 표본크기와 검정력

기존에 사용하던 광고소재 A와 새로운 소재 B의 성과를 비교하기 위해 클릭률을 조사한다고 가정하자. 이 조사를 위해서는 얼마나 많은 클릭수를 수집해야 할까? 두 소재의 성과 차이가 50% 이상 나는지 확인하는 게 목표라면, 상대적으로 적은 수의 표본으로도 확인할 수 있을 것이다. 이 기준, 즉 '효과크기'가 가설 검정에 필요한 '표본크기'를 결정한다. 검정력이란 특정 표본크기에서 특정한 효과...

statsmodel검정력statsmodel