오늘날 디지털 제품의 성공은 사용자 경험(UX)에 달려있다고 해도 과언이 아닙니다. 수많은 서비스가 치열하게 경쟁하다 보니, 사용자에게 매끄럽고 직관적인 경험을 제공하는 건 선택이 아닌 필수가 되었죠. 하지만 제품 개발 과정에서 사용자의 목소리를 듣는 ‘사용자 테스트(User Test)’는 여전히 많은 팀에게 높은 장벽으로 남아 있습니다.

실제 사용자를 모집하는 데 드는 시간과 비용, 테스트를 설계하고 진행하기 위한 전문 인력, 그리고 수집된 데이터를 분석해 의미 있는 인사이트를 도출하기까지의 복잡한 과정은 특히 리소스가 제한적인 스타트업이나 중소기업에 큰 부담이 될 수 있습니다. 설령 어렵게 테스트를 진행하더라도, ‘프로 테스터’들의 편향된 의견이나 일관성 없는 피드백으로, 결과의 신뢰성에 의문이 드는 경우도 많죠.

오늘 소개할 ‘Uxia’는 이러한 문제를 해결하기 위해 등장했습니다. ‘User testing, Reinvented.’라는 슬로건을 내걸고, 실제 사람을 대신하여 인공지능(AI)이 사용자 행동을 시뮬레이션합니다. 또 제품의 사용성을 테스트하는 ‘합성 테스트(Synthetic Testing)’라는 접근 방식을 제시하고 있는데요. 더 이상 사용자를 모집하기 위해 며칠을 기다리거나, 값비싼 비용을 지불하거나, 방대한 양의 테스트 영상을 분석하느라 시간을 투자하는 리소스를 줄이기 위한 방법입니다.

서비스를 이용하면, 단 몇 분 만에 100명 규모의 가상 사용자로부터 편향 없고 신뢰도 높은 피드백을 얻을 수 있습니다. 이는 단순히 비용과 시간을 절약하는 것을 넘어, 제품 개발의 속도와 검증을 일정 수준으로 끌어올릴 수 있다는 점을 의미합니다. 이번 리뷰에서는 Uxia가 어떻게 사용자 테스트를 진행하고 있는지, 핵심 기능과 특징 등을 실제 경험을 바탕으로 깊이 있게 확인하고자 합니다.

Uxia의 주요 기능과 특징

Uxia의 가장 큰 특징은 AI 기반의 ‘합성 테스트’입니다. 이는 실제 사용자가 아닌, AI가 생성한 가상의 사용자들이 주어진 시나리오에 따라 제품을 사용하고 피드백을 제공하는 방식인데요. 이 기술을 통해 기존 테스트 방식의 한계를 극복하고, 빠르고 정확하며 비용 효율적인 솔루션을 제공하는 것을 목표로 합니다.

Uxia의 작동 원리는 그리 어렵지 않습니다. 사용자가 테스트하고 싶은 디자인 시안(이미지 또는 비디오 형태의 프로토타입)과 테스트 목표를 업로드하면, Uxia의 AI 엔진이 바로 분석을 시작합니다. 이 AI는 수많은 실제 사용자 행동 데이터를 학습하여, 마치 실제 사람처럼 다양한 방식으로 제품과 상호작용하는 수천 개의 가상 사용자 페르소나를 생성하죠.

이 가상 사용자들은 디자인을 보고, 정보를 해석하고, 버튼을 클릭하는 등의 행동을 시뮬레이션하며 주어진 과업을 수행합니다. 이 과정에서 AI는 각 사용자의 행동 패턴, 특정 지점에서 겪는 어려움, 긍정적으로 느끼는 요소 등을 데이터로 수집합니다.

중요한 것은 이 모든 과정이 별도의 스케줄링이나 대기 시간 없이 단 몇 분 안에 완료된다는 점입니다. 사용자는 복잡한 설정 없이, 커피 한 잔의 여유를 즐기는 동안 수천 명의 사용자 테스트를 마친 것과 같은 결과를 얻게 됩니다.

테스트를 실행하기 위해 우리는 총 6단계를 거치게 됩니다. 가장 먼저 설정해야 하는 건, 테스트의 목적입니다. 저는 요즘IT 서비스의 홈 화면에 대한 사용성 테스트를 진행해 보기로 하고, 해당 내용을 작성한 뒤에 다음 단계인 ‘프로토타입 업로드’로 이동했습니다.

두 번째 단계는 프로토타입 업로드입니다. 프로토타입은 테스트 설계에서 가장 중요한 단계로, 테스터가 우리가 업로드한 이미지 또는 영상을 바탕으로 참여 후 의견을 제공하기 때문입니다. 프로토타입은 이미지 또는 영상으로 업로드할 수 있고, 개별 파일의 크기는 최대 100MB까지 지원합니다. 저는 요즘IT의 홈 화면을 캡처한 뒤 프로토타입으로 등록했습니다.

이어서, 서비스에 대한 설명 그리고 태그를 입력합니다. 태그는 기본 제공되는 내용 외, 직접 입력 후 등록하는 것이 가능한데요. 서비스 설명 등은 입력 후 AI의 도움을 받아 보완할 수 있습니다. 이때 서비스에 대한 설명은 가능한 상세히 적어두는 게 좋습니다. 그렇지 않으면 AI가 비슷한 서비스를 참고해, 멤버십이 없는 데 있다고 판단하는 등의 오류가 발생할 수 있습니다.

다음은 테스트에 대한 보다 상세한 맥락과 배경 그리고 테스터에게 궁금한 점을 입력하는 단계입니다. 아무래도 비대면이고 AI를 활용한 테스트이기 때문에, 어떤 부분에 초점을 맞춰야 하는지, 테스트를 진행하는 서비스 입장에서 궁금한 점은 무엇인지를 더 자세히 써주는 것이 도움이 됩니다.

다음 단계에서는 테스트에 참여할 그룹을 선정할 수 있습니다. 구체적인 대상을 지정하거나 일반적인 그룹을 선택할 수 있으며, 구체적인 대상을 선택한 경우 테스터 수(10명에서 100명), 테스터 나이(18세에서 80세), 그리고 성별(남성, 여성, 둘 다)을 설정할 수 있고요.

이제 지금까지 입력한 정보를 다시 한번 확인하고, 테스트 실행 버튼을 누르면 앞서 말한 테스트가 진행됩니다. 5분 안에 상세 리포트를 받아볼 수 있죠. 설정 과정은 현재 상태에 따라 소요 시간이 달라질 수 있는데요. 직접 참여한 프로젝트라면 대부분의 정보를 이미 알고 있을 가능성이 높기에 5분 내로 설정 및 테스트 실행이 가능합니다.

이제 실제 테스트 결과를 확인할 시간입니다. Uxia는 방대한 시뮬레이션 데이터를 매우 직관적이고 실행 가능한 형태로 가공하여 제공합니다. 테스트 실행, 참여 데이터 정리 및 가공 등을 모두 알아서 제공하므로, 추가로 투입할 리소스는 거의 없습니다. 테스트 결과는 크게 ‘주요 문제점’’과 ‘강점’으로 나누어 확인할 수 있습니다.

또한 “페이지를 처음 봤을 때 어떤 서비스라고 느껴졌나요?”와 같이 설정 단계에서 입력한 질문별 답변 내용을 퍼센티지에 따라 확인할 수 있습니다. 여기에 별도의 인용문을 제공해, 이번 테스트에서 주로 확인해야 할 사용자의 주요 피드백은 무엇인지 빠르게 훑어볼 수 있죠. 쉽게 사용할 수 있는지, 디자인은 어떤지, 전반적인 만족도, 신뢰도 등 6가지 주요 항목에 따른 테스트 결과도 시각화된 상태로 확인할 수 있습니다.

리포트 마지막에는 테스트 결과를 바탕으로 어떤 식의 개선점을 반영하면 좋을지에 대한 내용을 정리해 줍니다. 이 서비스를 통해 테스트를 진행한다면, 5분 정도를 투자해 전반적인 테스트 결과와 개선점까지 제안받을 수 있는 것이죠.

AI 활용의 장단점은?

AI 기반 합성 테스트는 속도, 비용, 편향성 감소 측면에서 분명한 장점을 가지고 있습니다. 실제로 ‘Uxia’는 무료 계정으로 3개의 테스트를 진행할 수 있어, 3개를 모두 활용해 본 결과, 모두 동일한 수준의 리포트가 나왔는데요. 개인적으로는 신뢰 수준도 높게 느껴졌습니다.

하지만 AI를 활용한다는 점에서의 한계도 있습니다. AI는 학습된 데이터 내에서 행동하기 때문에, 실제 사용자의 예상치 못한 창의적인 행동이나, 제품의 오용 사례를 발견하기는 어렵다는 점입니다. 또한 특정 디자인이 주는 미묘한 감정적 반응이나, 문화적 맥락을 이해하는 데도 한계가 있습니다. 서비스에 대해 깊게 설명하고 이해하는 과정을 건너뛸 수 있기 때문입니다.

따라서 Uxia는 전통적인 사용자 테스트를 보완하고, 효율성을 극대화하는 파트너로 활용하는 것이 가장 바람직하다고 생각합니다. 제품 개발 초기 단계에서 다양한 디자인 시안을 빠르게 비교하거나, 특정 기능의 사용성을 반복적으로 테스트하며 개선점을 찾아 나가는 과정에서 특히 도움이 될 겁니다. 최근에는 바이브 코딩을 활용해 스스로의 프로젝트를 진행하고 검증하는 분들이 많은데요. 이런 상황에서도 도움이 될 것입니다.

한 번은 꼭 써봐야 하는 이유

Uxia를 통해 우리는 ‘무엇이’ 문제인지를 빠르게 파악하고, ‘왜’ 그런지에 대한 해답이 필요할 때 빠른 답을 얻어낼 수 있습니다. 한계도 분명 있지만, 리포트 자체의 결과만 놓고 보면 LLM 서비스를 통해 직접 설계하고 진행하는 것에 비해 효율은 훨씬 뛰어나다고 생각합니다. A/B 테스트 기능 등을 통해 더욱 다양한 검증도 진행할 수 있고요.

현재 무료 계정으로는 3개의 테스트를 생성해 결과를 받아볼 수 있는데요. 무제한 테스트와 테스터 수 등의 조건을 넓게 활용하고 싶다면, 월 39 유로(약 63,000원)를 결제 후 프로 계정을 이용해 보셔도 좋을 것 같습니다.

<참고>

https://www.uxia.app