분할 테스트 모범 사례

테스트할 가정 결정

분할 테스트를 설정하기 전에 무엇을 테스트할 것인지, 그 결과가 광고 전략에 어떤 도움이 될지 생각해봅니다. 가정에 대해 고민하면 테스트할 변수에 집중하고 "클린" A/B 테스트를 설계하여 실행하는 데 도움이 됩니다.

변수의 차이가 큰 테스트 그룹 설정

테스트 변수를 선택할 때, 두 테스트 그룹 설정이 크게 다른 것이 좋습니다. 시스템이 더 우수한 광고 그룹을 판단할 수 있도록 두 광고 그룹이 유사한 결과를 내놓지 않게 하려면 확실한 차이가 있어야 합니다.

적절한 테스트 예산 설정

분할 테스트 예산은 최선의 수행 전략을 확인하는 데 있어서 확신을 줄 수 있는 충분한 결과를 만들어야 합니다. 분할 테스트를 생성하면 정해진 예산을 기반으로 시스템이 예상 검정력을 시험합니다. 예상 검정력이 충분함을 보여주는 예산이어야 합니다.

적절한 테스트 기간 할당

가장 신뢰할 만한 결과를 얻으려면 최소 7일 동안 테스트하는 것이 좋습니다. 분할 테스트는 최대 30일 동안 실행할 수 있습니다. 7일 미만의 테스트는 더 우수한 것을 판단하기에 충분히 길지 않을 수 있는 반면, 테스트가 길어지면 예산이 부족할 수 있습니다.

대규모 오디언스 설정

분할 테스트를 실행할 때 불충분한 표본 크기로 인해 문제가 발생하지 않도록 오디언스를 확장하시기 바랍니다.

더 높은 추정 검정력 값 보장

검정력 값은 성과가 뛰어난 결과를 좌우하는 데 도움을 주는 귀하의 광고 그룹에서 잠재적인 차이를 감지할 확률입니다. 80% 이상의 검정력 값을 제공하는 예산을 권장합니다.

테스트 중 변경 방지

분할 테스트 실행이 시작된 후에 광고 그룹을 변경하면 결과에 영향을 미치거나 광고 그룹에 대한 심사가 다시 시작될 수 있습니다. 분할 테스트 실행이 시작된 후에는 테스트 설정을 변경하지 않는 것이 좋습니다.