원격 사용자 조사

원격 사용자 조사(Remote User Testing)는 연구자와 물리적으로 먼 곳에 사는 사용자를 조사할 때, 직접 출장을 가지 않고도 사용자의 행동과 반응을 확보하는 방법론이다. 해외 출장 조사는 시간·비용 부담이 크고, 사전 조사(서베이·다이어리 스터디)로 최대한 보완해도 물리적 이동의 한계는 남는다. pxd는 협력 서비스 ALIVE(미국 10대 대상 사진·동영상 편집 앱)의 사용성 개선 프로젝트에서, 새로운 서비스 발굴이 아닌 기존 기능 개선이 목적이었기에 해외 출장 대신 원격 조사를 선택했다.

원격 사용자 조사는 크게 두 방식으로 나뉜다. 모더레이팅이 있는 원격 조사(Moderated Remote User Testing)는 Methinks, Lookback 같은 화상 통화 기반 툴을 이용해 연구자(또는 위탁 모더레이터)가 사용자와 실시간으로 대화하며 후속 질문을 던질 수 있다. 모더레이팅이 없는 원격 조사(Unmoderated Remote User Testing)는 UserZoom, UserTesting, TryMyUI 같은 툴을 통해 사용자가 스스로 과제를 수행하고 그 과정을 녹화해 연구자에게 전달하는 방식이다. 두 방식은 서로 다른 강점을 가지므로, 조사 목적(태도·성향 파악이 중요한가, 단순 사용성 확인인가)에 따라 선택해야 한다.

pxd는 미국 10대 사용자 조사에서 두 방식을 병행 실험했다. Methinks는 깊이 있는 후속 질문(왜 어려웠는지, 무엇 때문에 헷갈렸는지)을 통해 문제의 원인을 구체적으로 파악할 수 있었지만, 인터뷰당 소요 시간이 계획(15~20분)보다 실제로는 10~20분 더 길어졌고 미국 10대의 속어·줄임말을 이해할 수 있는 현지 모더레이터가 필요했다. UserTesting은 리크루팅부터 전체 사용자 비디오 확보까지 24시간 이내에 끝나 속도와 규모 면에서 강력했지만, 만족/불만족의 이유를 깊이 캐묻기 어렵다는 한계가 뚜렷했다.

실무 적용 시 유의점은 세 가지다. 첫째, 프로젝트 성격에 맞춘 도구 선택—모더레이팅이 있는 조사는 스크린 쉐어링으로 집안 곳곳까지 살펴보는 등 조사 범위가 넓고, 모더레이팅이 없는 조사는 명확한 task를 짧은 시간에 많은 사용자에게 검증하기 좋다. 둘째, 연구자의 역할과 언어 조력자—해외 사용자 조사에서는 영어 실력과 별개로 현지 문화·속어를 아는 모더레이터가 필요할 수 있다. 셋째, No-show 주의—온라인 조사는 노쇼·중도 포기 비율이 높아 여유 있는 리크루팅과 여분 샘플 확보가 필요하다.

팬데믹발 원격 리서치 확산과 인프라 제약 환경의 대응

코로나19로 대면·현장 조사가 전면 중단되면서, 언젠가 도입될 것이라 여겨졌던 원격 리서치가 예상보다 훨씬 빠르게 업계 전반의 기본값으로 자리 잡았다. 글로벌 UX 컨설팅 네트워크 UXalliance는 팬데믹 초기(2020년 3월) 회원사들의 경험을 모아 실무 팁을 정리했는데, 핵심은 여섯 가지다. ① 여러 선택지 검토—리서치를 무기한 연기할지, 리서치 없이 제품을 출시할지, 방법을 조정해 리서치를 지속할지 세 갈래 대안을 먼저 저울질한다. ② 현지 UX 리서치 회사 활용—클라이언트가 직접 만나기 어려운 해외 사용자를 현지 파트너가 원격으로 대신 관찰·인터뷰하며, 오디오·비디오 실시간 스트리밍으로 지구 반대편과 즉각 협업한다(이는 UX 얼라이언스 글로벌 네트워크가 지향하는 핵심 서비스이기도 하다). ③ 참가자·연구자 안전 조치—WHO 지침에 따라 사전 스크리너로 고위험군을 걸러내고, 급한 이탈에 대비해 리크루팅 풀을 넉넉히 확보하며 세션 사이 표면을 소독한다. ④ 연구 방법의 유연한 조정—관찰처럼 몰입이 필요한 조사는 온라인 다이어리 스터디와 사용자가 직접 촬영한 비디오로 대체하고, 포커스 그룹은 Miro·Mural 같은 협업 툴로 원격 진행한다. ⑤ 글로벌 시간대 고려—클라이언트와 현지 참가자의 시차를 감안해 조사 시간대를 배치한다. ⑥ 인터넷 환경별 대응—스트리밍 제약이 없으면 실시간 관찰·채팅으로 협업하고, 인터넷이 불안정하면 5~10분 지연 버퍼를 두고 시청하며, 환경이 매우 열악하면 세션 녹화본을 사후 업로드하는 방식으로 전환한다.

이런 원칙은 실제 현장에서 지역별 인프라 제약에 맞춰 더 세밀하게 구체화됐다. 2020년 3월 코로나 유행으로 아프리카 전역의 프로젝트가 일시 중지되자, Mantaray Africa UX팀은 파트너·클라이언트·팀 간 논의를 거쳐 다이어리 스터디, 원격 1:1 인터뷰, 디지털 문맹 참가자를 위한 도우미 동반 Dyad(2인 1조) 세션, Miro를 활용한 공동 워크숍 등 방법론을 유연하게 조합해 대면 조사 수준의 풍부한 데이터를 확보하려 시도했다.

이 과정에서 아프리카 및 동남아 등 인프라가 낙후된 지역 특유의 제약이 드러났다: 불안정한 인터넷 연결, 전기 공급 문제, 잦은 홍수 등 기상 조건, PC·노트북 없이 모바일 기기로만 접근하는 환경(Mobile 1st), 저가형 기기의 화질·음질 이슈, 다수의 디지털 문맹 참가자, 개인 공간이 거의 없는 좁은 주거 환경이 그것이다. 이를 보완하기 위해 팀은 기술 이해도가 낮은 참가자를 위한 기술 지원·교육 인력 투입, 현지 팀 브리핑과 파일럿 세션을 위한 여유 시간 확보, 로컬 팀·클라이언트 간 시차를 고려한 스케줄링, 실시간 피드백 체계, 참가자의 기술 환경 사전 확인 등으로 조사 과정 전반을 최적화했다.

이렇게 최적화된 원격 리서치는 세 가지 실행 방식으로 나뉘어 진행됐다: ① 현장 팀 없이 진행하는 일반적인 원격 조사, ② 현장 팀을 참가자의 집에 직접 파견하는 방식, ③ 전기·인터넷 문제를 해결할 수 있는 교회·학교·차량 같은 Central Location에 현장 팀을 파견하는 방식이다. 인프라가 열악한 지역일수록 현장 팀의 파견과 각국 간 지속적인 문제 해결 노하우 공유가 원격 조사의 성패를 갈랐다. pxd 역시 최근 몇 년간 국내외 프로젝트에서 리모트 리서치가 기본이 되었으며, 참가자에게 사전·도중 활용 가이드를 배포하고 테스트 세션을 진행하는 등 조사 환경에 대한 이해를 높이는 노력을 통해 비대면임에도 현장 조사 수준의 깊이 있는 인사이트를 확보해 왔다.

핵심 내용

원격 사용자 조사: 물리적 출장 없이 원거리 사용자의 행동·반응을 조사하는 방법
모더레이팅이 있는 원격 조사(Methinks, Lookback): 화상 통화 기반, 깊이 있는 후속 질문 가능, 세션당 시간이 길어짐
모더레이팅이 없는 원격 조사(UserZoom, UserTesting, TryMyUI): 사용자가 스스로 수행·녹화, 24시간 내 다수 사용자 확보 가능, 원인 파악은 제한적
태도·성향 파악 목적이면 모더레이터가 있는 조사, 명확한 사용성 확인이면 없는 조사가 유리
해외 사용자 조사에는 현지 언어·속어를 아는 모더레이터/언어 조력자가 중요
온라인 조사는 노쇼 비율이 높아 여유 있는 리크루팅 필요
팬데믹으로 대면 조사가 불가능해진 아프리카 사례: 인터넷·전력·기상·Mobile 1st·저가기기·디지털문맹·개인공간 부족 등 인프라 제약을 고려한 원격 조사 설계가 필요
인프라 제약 지역에서는 현장 팀을 참가자 집 또는 전기·인터넷이 확보된 Central Location에 파견하는 혼합형 원격 조사가 효과적
UXalliance가 정리한 팬데믹 리서치 6원칙: 대안 선택지 검토 / 현지 리서치 회사 활용 / 참가자·연구자 안전 조치 / 연구 방법 유연 조정 / 글로벌 시간대 고려 / 인터넷 환경별 3단계 대응(실시간·지연 버퍼·사후 업로드)

출처

먼 곳에 사는 사용자를 조사하는 방법 — 2017-08-10, Seungyoon Lee
UXMC 2021:Design for the Future, Design for All #3 — 2021-12-06, nayeong.k
코로나19 시대의 글로벌 유저 리서치 — 2020-03-24, Seungyoon Lee

원격 사용자 조사

팬데믹발 원격 리서치 확산과 인프라 제약 환경의 대응

핵심 내용

관련 개념

출처