원격 사용성 테스트 보드: 과제·관찰·후속 테스트

원격 사용성 테스트 보드는 진행자가 과제를 안내하고, 연구팀이 관찰과 해석을 구분해 기록하는 데 사용합니다. 참여자의 행동과 발언, 당시 상황을 함께 남기면 다음에 무엇을 확인해야 할지 구체적으로 정할 수 있습니다.

Boardmix 사용자 인터뷰 템플릿으로 세션 목적과 참여자의 상황을 정리할 수 있습니다. 실제 조작을 관찰하는 사용성 테스트에서는 인터뷰 질문에 더해 과제, 시작 상태, 종료 조건, 관찰 기록 항목을 추가하세요.

세션 질문 정하기

“처음 사용하는 사람이 조작 방법에 대한 힌트 없이 공유 기능을 찾고 필요한 권한을 선택할 수 있는가?”처럼 확인할 질문을 먼저 씁니다. 참여자에게는 달성할 목표를 설명하는 과제 안내가 필요합니다. 힌트를 주지 않는다는 것은 아무 설명 없이 조작하게 한다는 뜻이 아닙니다.

대상 기능, 참여자의 경험, 사용할 기기와 이번에 다루지 않을 범위도 정합니다. 아래는 동료 알렉스에게 계획을 검토받는 공유 과제를 가정한 예시입니다. 실제 고객 정보나 연락처 대신 조사용 계정과 테스트용 주소를 준비하세요.

과제 카드 준비하기

중립적인 안내, 시작 상태, 종료 조건을 작성합니다. “공유 버튼을 눌러 댓글 권한을 선택하세요”처럼 경로를 알려 주지 말고 참여자가 달성해야 할 목적을 전달합니다.

진행자용 보조 질문, 예상 경로와 미완료 판단 기준은 참여자용 안내와 분리합니다. 참여자에게는 필요한 과제만 보여 주고, 연구 기록은 접근 권한을 별도로 설정한 다른 보드에 보관하세요. 같은 캔버스의 다른 위치에 두는 것만으로 비공개가 되지는 않습니다.

관찰과 해석 나누기

“오른쪽 위 메뉴를 두 번 열었다”는 관찰이고 “탐색 구조가 혼란스럽다”는 해석입니다. 참여자 ID, 과제, 시점과 함께 각각 기록하세요. 진행자가 힌트를 주거나 연결이 끊겼다면 그 사실도 남겨야 제품 사용의 어려움과 세션 진행 문제를 구분할 수 있습니다.

예시의 P03은 시작 후 01:10에 “이 링크로 편집할 수 있나요?”라고 물었습니다. 이 발언은 그대로 남길 관찰 기록입니다. “댓글 권한과 편집 권한을 혼동할 수 있다”는 여기서 세운 가설입니다. 발언만으로 잘못된 권한을 선택했다고 단정하지 말고 실제 선택과 선택 이유도 확인합니다.

다른 참여자가 어려움 없이 완료한 기록도 남기세요. 참여자의 경험, 시작 화면, 안내 문구가 달랐다면 같은 조건에서 나온 결과처럼 합치지 않습니다.

조작을 유도하지 않고 진행하기

1. 목적, 기록 방법, 녹화 여부와 정보 처리 방식을 설명합니다.
2. 과제를 제시하고 내용을 이해했는지 확인한 뒤 행동을 기다립니다.
3. 행동과 발언을 먼저 기록하고 바로 정답을 알려 주지 않습니다.
4. 후속 질문은 참여자마다 가능한 한 같은 방식으로 묻습니다.
5. 힌트, 중단, 기술적 문제와 종료 이유를 기록합니다.
6. 무엇이 불분명했는지, 조작 뒤 어떤 결과를 예상했는지 물으며 마칩니다.

연구팀용 Boardmix 보드에서는 메모를 관찰 기록에, 댓글을 관찰자의 질문에 사용할 수 있습니다. 녹화 파일과 개인정보를 어디에 보관할지 정하고 필요한 사람만 접근하도록 공유 범위를 설정하세요.

관찰 결과를 다음 테스트로 연결하기

P03의 사례에서는 다음 프로토타입에 권한 설명을 추가하고, 같은 목적의 과제로 상대방에게 허용한 작업을 참여자가 설명할 수 있는지 확인합니다. 테스트 중에 답을 알려 주는 대신 화면 설명을 바꾼 버전에서 행동을 관찰하는 것입니다. 같은 참여자가 다시 테스트한다면 앞선 경험이 영향을 줄 수 있다는 점도 기록합니다.

Boardmix 보드를 열어 참여자용 과제와 연구팀용 관찰 기록을 각각 준비하세요. 다음 세션에서는 “이해하기 어려웠다”는 인상에 그치지 않고 어떤 설명이 어떤 판단에 도움이 되었는지 확인할 수 있습니다.