문제 상황을 명확히 설정한 뒤 가설을 날카롭게 가다듬어 한 가지로 통일하는 것이 정말 중요하다는 것입니다. 공을 들여 가설을 한 가지로 설정했다면 이번 테스트에서 관찰하는 것은 그것 한 가지여야 합니다. 일정의 여유로 개선을 위한 추가적인 아

변수를 통제한 실험을 해야 할 수도 있고, 유저 인터뷰를 할 수도 있고, 스모크 테스트나 메카니컬 터크 실험을 할 수도 있습니다.중요한 것은 완벽하게 통제된 실험을 하는 것이 아니라, 가정이 얼마나 사실에 부합하는지 확인함으로써 리스크를 낮추는 것입니다. &n

다음 글부터는 실험에서의 신뢰성을 보장하기 위해 어떤 것들이 필요한지, 하나하나씩 풀어가 볼 예정입니다. 마지막으로 제품 실험과 관련해 몇 가지 주의 사항을 전달드리며 글을 마칩니다. 실험의 목적은 배움(learn)이지, 확인(confirm)이 아니다