5명만 테스트해도 문제의 80%가 보이는 이유

5명만 테스트해도 문제의 80%가 보이는 이유

'표본이 너무 적지 않나요'라는 질문을 자주 받습니다.

여론조사와 사용성 테스트는 목적이 다릅니다. 숫자를 재는 것이 아니라 문제를 찾는 것입니다.

여론조사는 '몇 퍼센트가 그렇게 생각하는가'를 알아내는 것이라 많은 표본이 필요합니다. 사용성 테스트는 '어디서 막히는가'를 찾는 것입니다.

한 사람이 막혔다면 그것은 이미 문제입니다. 몇 퍼센트가 막히는지는 중요하지 않습니다.

첫 번째 사람이 가장 많은 문제를 드러냅니다. 두 번째는 첫 번째와 겹치는 문제를 반복하고 새로운 것을 조금 발견합니다. 이런 식으로 갈수록 새 문제가 줄어듭니다.

다섯 명쯤 되면 대부분의 문제가 나왔고, 그 이후로는 같은 이야기가 반복됩니다.

많은 인원을 한 번에 테스트하는 것보다, 적은 인원으로 여러 차례 하는 편이 훨씬 효과적입니다.

테스트 → 수정 → 다시 테스트를 반복하면, 고친 것이 실제로 나아졌는지 확인하면서 새로운 문제도 찾을 수 있습니다.

다섯 명으로 충분하지 않은 경우도 있습니다. 사용자 유형이 확연히 다르거나, 정량적인 비교가 필요한 경우입니다.

다만 이런 경우에도 먼저 소수로 큰 문제를 걷어낸 뒤에 하는 편이 효율적입니다.