본문으로 건너뛰기
인터페이스 언어: 한국어
디자인 / Signal

프로토타입 사용성 테스트: 유도하지 않고 관찰하는 법

진행자가 함께하는 사용성 테스트에서 중립적인 과제를 준비하고, 관찰과 추측을 구분해 기록하는 방법을 살펴봅니다.

본문 언어: 한국어

일러스트: 개방된 갤러리에 있는 붉은 옷의 여성과 금빛 빛줄기.
목차

한 참가자가 쇼핑몰 프로토타입을 보고 있다고 상상해 보세요. 수령 정보를 찾느라 3초쯤 말이 없자 디자이너가 말합니다. “가격 아래에 있는 작은 글씨를 눌러 보세요.” 참가자는 클릭하고 과제는 끝납니다. 모두 안도합니다. 팀이 새로 알게 된 사실은 하나입니다. 사람은 알려 준 곳을 클릭할 수 있다는 것. 참가자가 정보를 스스로 찾을 수 있는지는 여전히 잘 모릅니다.

진행자가 있는 사용성 테스트는 참가자가 과제를 수행하려는 모습을 곁에서 관찰하는 방식입니다. 진행자는 주의 깊게 듣되 어느 정도 말을 아껴야 합니다. 대화할 여지를 만들고 무엇이 불분명한지 이해하면서도 참가자 대신 과제를 해서는 안 됩니다. 사람을 편안하게 맞이하되 문마다 길을 알려 주지는 않는, 조금 특별한 환대입니다.

프로토타입의 문제를 살피는 데 꼭 정교한 실험실이 필요한 것은 아닙니다. 대신 질문, 알맞은 과제, 적합한 참가자, 기록 방법은 필요합니다. 이것들이 없으면 녹화에는 커서가 움직이는 장면만 가득하고 결정을 뒷받침할 자료는 별로 남지 않을 수 있습니다.

무엇을 알고 싶은지 먼저 정하세요

“웹사이트를 확인해 봅시다”라고 하면 대화가 끝없이 이어질 수 있습니다. “구매자가 특정 상품 옵션을 원하는 수령 지점에서 받을 수 있는지 알아낼 수 있을까요?”라고 물으면 범위가 생깁니다. 프로토타입에 어떤 정보가 있어야 하는지, 과제 완료를 어떻게 판단할지도 정할 수 있습니다.

팀의 조사 질문과 참가자에게 주는 지시를 구분하세요. 팀은 재고 정보가 눈에 띄는지 알고 싶을 수 있습니다. 참가자에게는 그 정보가 필요한 구매 상황을 제시합니다. “재고 탭을 찾아보세요”라는 지시는 이미 이름을 알려 주고 경로를 암시합니다. 수령을 계획해 보는 과제와는 다른 것을 확인하게 됩니다.

예를 들어 이런 과제를 줄 수 있습니다. “금요일에 예시거리의 수령 지점에서 초록색 정리함을 받고 싶습니다. 가능한지, 다음에 무엇을 해야 하는지 알아보세요.” 거리 이름과 상품은 허구지만 상황의 목표는 분명합니다. 버튼 이름이나 화면을 따라가는 순서는 알려 주지 않습니다.

GOV.UK의 진행자 동반 테스트 안내는 목표가 분명하고 현실적인 과제를 제시하되 답이나 수행 경로를 알려 주지 않도록 권합니다. 준비할 때 유용한 원칙입니다. 구체적인 상황은 해당 서비스를 실제로 이용할 사람들에게 맞춰야 합니다.

상황에 필요한 조건도 적어 주세요. 금요일 수령은 필수인가요, 아니면 선호 사항인가요? 다른 수령 지점을 골라도 되나요? 이런 정보가 없으면 진행자가 마음속에 특정 경로를 정해 둔 탓에 참가자의 합리적인 선택을 나중에 오류로 판정할 수 있습니다. 판단에 필요한 제약은 알려 주되 방법을 고를 자유는 남겨 두세요. 좋은 과제에는 팀이 예상하지 못한 해결책이 들어갈 자리도 있습니다. 다만 시나리오에서 빠진 내용을 추측하게 해서는 안 됩니다.

세션 전에 기대하는 결과를 정하세요. 이 예에서는 참가자가 상품 옵션, 수령 지점, 재고 조건과 다음 단계를 파악해야 합니다. 올바른 화면에 도착했다는 사실만으로 내용을 이해했다고 볼 수는 없습니다. 정보를 찾고도 뜻을 거꾸로 이해해, 상품이 없는 곳으로 자신 있게 찾으러 갈 수 있습니다.

프로토타입에도 그 결과를 확인할 수 있는 상태를 준비하세요. 색상이나 수령 지점을 바꿀 수 없다면 테스트 범위를 좁혀야 합니다. 참가자가 설계의 문제를 만난 것인지 프로토타입 도구의 한계인지 추측하게 해서는 안 됩니다. 시작할 때 어떤 자료를 보게 되는지는 설명하되, 살펴볼 경로는 미리 알려 주지 마세요.

참가자는 조사 질문에 맞춰 고르세요. 회사 카탈로그를 오래 다뤄 온 사람은 처음 구매하는 사람에게 낯선 약어를 쉽게 이해할 수 있습니다. 그러니 일정을 채우기 전에 UX 조사 참가자 모집 기준부터 정해야 합니다. 수요일에 시간이 나는 지인이 있다는 것만으로 적합한 참가자가 되는 것은 아닙니다. UX 조사 참가자 모집을 다룬 글도 (폴란드어) 참고할 수 있습니다.

프로토타입에 필요한 상태가 없을 때 어떻게 대응할지도 정해 두세요. 참가자가 목업에서 지원하지 않는 경로를 택하면 그 선택을 기록하고 한계를 설명합니다. 문제를 참가자 탓으로 돌리지 마세요. 이후 정보의 이해도를 살펴보기 위해 미리 정한 화면을 열어 줄 수는 있습니다. 다만 그 구간은 도움을 받은 뒤 시작했다고 표시해야 합니다. 만든 사람이 미처 예상하지 못했다는 이유로 흥미로운 대안 경로가 기록에서 사라져서는 안 됩니다.

첫 정식 세션 전에 시나리오 점검을 도와줄 사람과 과제를 한 번 진행해 보세요. 도구와 안내문을 확인하는 예행연습입니다. 작동하지 않는 링크, 뜻이 모호한 가상 이름, 빠진 화면 상태를 발견할 수 있습니다. 이 연습을 고객에 대한 조사 결과로 제시해서는 안 됩니다.

세션에서 일어날 수 있는 짧은 가상 장면

진행자가 상황을 설명합니다. 참가자는 상품을 열고 색상을 고른 뒤 “재고 있음”이라는 문구에서 멈춥니다. “그럼 금요일에 받을 수 있겠네요”라고 말합니다. 수령 지점은 바꾸지 않았습니다. 팀은 문구 아래의 작은 링크를 곧바로 물어보고 싶어집니다.

대신 진행자는 “여기서 ‘재고 있음’이 무슨 뜻이라고 이해하셨나요?”라고 물을 수 있습니다. 빠진 요소를 가리키지 않고 읽은 내용을 설명해 달라는 질문입니다. 참가자가 답합니다. “초록색 상품이 제가 선택한 매장에 있다는 뜻이요.” 하지만 프로토타입의 문구는 배송 창고의 재고를 가리킵니다. 이제 기록할 만한 구체적인 해석 차이가 드러났습니다.

참가자는 다음 단계로 넘어가려 합니다. 진행자는 계속하도록 두고 뒤의 단계가 오해를 풀어 주는지 살핍니다. 프로토타입이 더 진행할 수 없게 막는다면 그 구간을 끝내고 다음 과제로 넘어갈 수 있습니다. 목업에서 구매 전체를 완료할 수 있는 척할 필요는 없습니다.

도움이 필요했다면 정확히 기록하세요. “참가자가 문구를 스스로 해석한 뒤 진행자가 수령 지점 변경을 안내했다”라고 쓰면 실제로 무슨 일이 있었는지 알 수 있습니다. 안내 후의 행동도 살펴볼 만하지만, 그 사람이 수령 지점을 스스로 찾아냈다는 증거는 아닙니다. 이 구분이 세션을 무효로 만드는 것은 아닙니다. 각 구간의 결과를 정직하게 활용하게 해 줍니다.

Aeneia 콘셉트 사진

GOV.UK 조사 실무자의 조언은 진행자가 지시와 반응을 중립적으로 유지하고, 참가자의 경로가 옳거나 의외라는 신호를 주지 않아야 한다고 강조합니다. 참가자는 목소리의 톤이나 표정에도 반응할 수 있습니다. 무심코 나오는 “좋아요”도 조심하세요. 친절하게 들리지만 초록색 화살표처럼 작용할 수 있습니다.

진행자가 방 안의 가구처럼 꼼짝하지 않아야 한다는 뜻은 아닙니다. 듣고 있다는 반응을 보이고, 설명을 더 부탁하고, 불편함에도 대응할 수 있습니다. 사람을 돕는 일과 인터페이스 사용법을 알려 주는 일을 구분하면 됩니다. 참가자가 중단하고 싶다면 중단하세요. 표를 빈칸 없이 채우려고 버튼에 관한 질문 하나에 참가자의 편안함을 희생할 필요는 없습니다.

침묵도 해석이 필요합니다. 참가자는 읽고 있을 수도, 생각 중일 수도, 과제를 이해하지 못했을 수도 있습니다. 몇 초 만에 막혔다고 단정하지 말고 행동을 살펴보세요. 질문한다면 “지금 무엇을 생각하고 계신가요?”처럼 중립적으로 시작합니다. “수령 지점 정보가 안 보이세요?”처럼 진행자의 진단을 질문에 넣지 마세요.

평가를 묻는 질문은 과제를 마치거나 중단한 뒤에 하는 편이 좋습니다. 그때 무엇이 어려웠는지, 결과를 어떻게 이해했는지 물을 수 있습니다. 과제를 수행하는 중에 “편리한가요?”라고 물으면 과제에서 주의가 벗어나고 디자인에 대한 예의 바른 감상을 유도하기 쉽습니다.

행동과 해석, 개선 아이디어를 따로 기록하세요

세션 기록에는 세 가지 메모가 유용합니다. 첫째는 관찰입니다. 참가자가 “재고 있음”을 읽고 수령 지점을 바꾸지 않았습니다. 둘째는 참가자의 말입니다. 그 문구가 동네 매장을 뜻한다고 이해했습니다. 셋째는 팀의 가설입니다. 문구가 재고의 적용 범위를 설명하지 못합니다. 세 기록의 지위는 서로 다릅니다.

“버튼을 더 크게 만들자”는 아이디어는 그다음 단계입니다. 좋은 생각일 수 있지만 관찰만으로 자동으로 도출되지는 않습니다. 문제는 문구나 선택 순서, 선택한 지점에 대한 잘못된 가정에 있을 수도 있습니다. 수정안을 고르기 전에 여러 순간을 비교하고 어떤 정보를 전달해야 하는지 확인하세요.

쓸모 있는 기록에는 프로토타입 버전, 과제, 관찰한 상태, 참가자의 말과 진행자의 개입이 들어갑니다. 녹화한다면 목적과 접근 권한, 보관 방법을 세션 전에 합의하세요. 프로젝트 보고서에는 참가자의 불필요한 개인정보를 빼고 문제를 재구성할 수 있을 만큼의 발췌만 담아도 대개 충분합니다.

원격 세션이라면 시작할 때 기술적인 조건도 확인하세요. 프로토타입이 열리는지, 올바른 창을 공유하는지, 글자를 읽을 수 있는지 살핍니다. 참가자가 휴대전화를 쓴다면 화면 일부가 잘린 영상만 보고 행동을 판단하지 마세요. 도구를 설정하느라 멈춘 시간은 구매 과정의 어려움이 아닙니다. 나중에 설정 시간이 과제 수행 시간에 더해지지 않도록 따로 기록하세요. 도구가 그 사람의 평소 사용 방식을 방해한다면 결과를 해석하기 전에 적절한 참여 조건을 정합니다.

관찰자도 자신의 역할을 알아야 합니다. 질문은 적어 두었다가 나중에 논의하도록 하세요. 세 사람이 한꺼번에 화면 구성을 설명하기 시작하면 세션은 제품 발표가 됩니다. 참가자는 어느 질문부터 답해야 할지 추측하거나 심사위원단 앞에서 자신의 사용 방식을 변호할 의무가 없습니다.

세션이 끝나면 잠시 시간을 내어 함께 메모를 비교하세요. 참가자의 말에서 나온 결론과 아직 추측으로 남은 내용을 구분해 표시합니다. 같은 순간을 두 사람이 다르게 이해했다면 기록으로 돌아가세요. 관찰자의 확신은 참가자가 실제로 한 행동과 말의 기록을 대신하지 못합니다.

문제가 없었던 사례도 남겨 두세요. 참가자가 배송 창고와 수령 지점을 정확히 구분했다면 어떤 정보를 활용했는지 기록합니다. 오해한 사례와 비교하면 이미 디자인에 들어 있는 유용한 단서를 찾을 수 있습니다. 그렇다고 그 단서를 모든 곳에 자동으로 옮기지는 마세요. 그 참가자의 이전 경험 덕분에 통했을 수도 있습니다. 보고서에는 성공한 경로와 장애물을 모두 보여 주세요. 그래야 일부 참가자에게 도움이 된 요소를 수정 과정에서 지우지 않을 수 있습니다.

결과를 디자인 결정과 연결하세요. “참가자가 창고 재고와 수령 지점의 재고를 혼동했다”는 관찰은 문구의 적용 범위를 고치고 수정 후 다시 시험하는 출발점이 됩니다. 반면 “사람들은 읽지 않는다”는 말은 거의 아무 데도 이르지 못합니다. 다음 회의에서 같은 말을 되풀이하는 데는 도움이 될지 몰라도요.

발견한 내용을 가설 카드와 다음 테스트로 정리하세요. 예를 들어 문구 옆에 배송 창고를 명확히 표시하면 오해가 줄어들 것이라는 가설을 세울 수 있습니다. 선택한 변경이 관찰된 문제를 실제로 해결하는지는 다시 테스트해야 알 수 있습니다. 사업 실험의 가설 카드를 다룬 글을 (폴란드어) 읽어 볼 수 있습니다.

Aeneia Design 소개는 웹사이트 프로젝트와 확인 방법을 논의하는 출발점입니다. 테스트를 논의할 때는 구체적인 과제와 필요한 상태가 보이는 프로토타입을 준비해 오세요.

이 세션이 답할 수 없는 질문도 밝히세요

몇 가지 관찰로 장애물을 발견하고 개선안을 준비할 수는 있습니다. 하지만 그것이 고객 전체를 대표하는 비율을 자동으로 알려 주지는 않습니다. 누가 참여했고 어떤 과제를 수행했으며 어떤 조건이 인위적이었는지 설명하세요. 보고서를 읽는 사람이 자료의 범위를 이해할 수 있어야 합니다.

짧은 5초 테스트는 첫 화면에서 무엇을 파악하는지에 관한 질문을 다룹니다. 진행자가 함께하는 과제 테스트는 그 이후의 결정과 장애물을 살펴보게 해 줍니다. 한 방법을 모든 상황의 승자로 고를 필요는 없습니다. 줄이고 싶은 불확실성에 따라 선택하세요. 진행자 없이 과제를 시험하려면 명확한 종료 조건과 오류 확인 방법을 갖춘 진행자 없는 사용성 조사를 별도로 준비합니다. 세션 도중 설명을 덧붙이지 않아도 과제를 이해할 수 있어야 합니다. 5초 테스트를 설명하는 글도 (폴란드어) 참고하세요. 진행자 없는 조사를 다룬 글을 (폴란드어) 살펴볼 수 있습니다.

며칠에 걸친 구매 여정이 궁금하다면 한 번의 세션은 그 일부만 보여 줍니다. 일기 조사는 서로 다른 시점의 경험을 모을 수 있습니다. 반면 공개된 웹사이트에서 양식이 작동하는지 확인하려면 별도의 구현 결과 점검 (폴란드어)이 필요합니다. 좋은 프로토타입이 메시지가 받은편지함에 도착한다는 증거는 아닙니다. 일기 조사에 관한 글도 (폴란드어) 도움이 됩니다.

마지막으로 관찰 자료에 근거한 개선 사항을 몇 개 골라 새 버전의 테스트를 준비하세요. 문구나 경로를 바꾼 이유를 나중에도 볼 수 있도록 이전 기록을 남겨 둡니다. 조사가 제 몫을 한 때는 팀이 더 근거 있는 결정을 내리고 방문자의 길도 한결 수월해졌을 때입니다. 진행자가 올바른 버튼을 점점 더 빨리 가리키게 되는 것이 아닙니다.

Aeneia / Aeneia 편집부

편집부의 글입니다. 본문에 출처 링크가 있습니다.

Aeneia 소개

함께한 브랜드

  • L’Oréal
  • Garnier
  • Netflix
  • Carrefour
  • Warner Bros. Discovery
  • Biedronka
  • HBO Max
  • Wolt
  • Żabka
  • COSRX
  • 주폴란드 중국대사관
  • Mixa
Aeneia / Initium

지식에서 결정으로

정리하고 싶은 과제를 알려 주세요. 어디서 시작할지 함께 정합니다.

Aeneia에 문의하기

파트너의 솔루션을 활용합니다

  • Google
  • OpenAI
  • Microsoft
  • Stripe
  • Anthropic
  • Linear