홈페이지를 리뉴얼하면서 사용자 조사를 하고 싶지만 참여자 모집에 시간과 비용이 빠듯한 경우가 많습니다. 최근에는 AI로 만든 가상의 사용자, 이른바 합성 사용자에게 의견을 묻는 방식이 대안으로 떠올랐지만, 결론부터 말하면 이 방식은 기획 초반 아이디어 점검용으로만 쓰고 최종 결정은 반드시 실제 사용자 피드백으로 내려야 합니다.
AI 합성 사용자의 지나친 긍정 편향
합성 사용자란 대규모 언어 모델이 특정 연령, 직업, 성향을 가진 가상의 고객처럼 답변하도록 설정한 리서치 도구입니다. 문제는 이 가상 사용자가 새로운 디자인 시안이나 메뉴 구조를 보여주면 대체로 좋다는 반응만 내놓는다는 점입니다. 실제 연구에서도 이런 도구가 유용하긴 하지만 지나치게 낙관적인 피드백만 준다는 지적이 나왔습니다.
비판적인 의견을 받으려면 모델에게 문제점을 적극적으로 찾아달라고 별도로 요청해야 하는데, 이 과정을 생략하면 비용이나 실제 채택률, 운영 인력 같은 현실적인 제약은 거의 언급되지 않습니다. 결국 담당자는 긍정적인 결과만 보고 리뉴얼 방향을 과신하게 될 위험이 있습니다.
홈페이지 리뉴얼 리서치에 생기는 영향
중소기업 입장에서는 참여자 모집이라는 병목이 사라진다는 점이 매력적입니다. 실제로 국내외 UX 연구자 다수가 정식 사용자 조사에 들어가기 전 예비 단계로 합성 사용자를 활용하고 있으며, 설문지나 스크리너 질문을 다듬거나 초기 방향성을 잡는 테스트에 주로 쓰입니다. 다만 메뉴 구조나 구매 전환 페이지처럼 실제 성과와 직결되는 최종 결정에는 합성 사용자만으로 판단한 사례가 거의 없다는 점이 분명합니다.
| 활용 단계 | 합성 사용자 적합도 |
|---|---|
| 설문지, 질문지 초안 설계 | 적합 |
| 초기 방향성 탐색 테스트 | 제한적 적합 |
| 최종 디자인, 메뉴 구조 확정 | 부적합, 실사용자 필요 |
합성 사용자를 안전하게 쓰는 단계
- 설문·스크리너 질문부터 다듬기 실사용자 조사에 들어가기 전, 질문 문구가 어색하거나 중복되는지 합성 사용자에게 먼저 검토시킵니다.
- 비판을 명시적으로 요청하기 좋은 점만 묻지 말고 이 디자인에서 불편하거나 비용이 많이 들 것 같은 부분을 찾아달라고 구체적으로 지시합니다.
- 초기 방향성 확인까지만 신뢰하기 홈페이지 구조안이 여러 개일 때 큰 방향을 좁히는 용도로만 쓰고, 세부 디자인 선택은 보류합니다.
- 실제 사용자 테스트를 별도로 일정에 넣기 합성 사용자 테스트가 끝났다고 리서치를 마친 것으로 착각하지 말고, 고객이나 잠재 방문자를 대상으로 한 실측 테스트를 반드시 진행합니다.
합성 사용자 결과만 믿었을 때 생기는 실수
- 긍정적인 답변 비율만 보고 디자인 시안을 바로 확정하는 경우, 실제 방문자의 이탈률과 전혀 다른 결과가 나올 수 있습니다.
- 합성 사용자가 언급하지 않았다고 해서 비용이나 운영 부담이 없는 것으로 오해하는 경우가 많습니다.
- 합성 사용자 조사를 실사용자 조사의 대체재로 여기고 예산을 전부 줄이는 것은 리스크가 큽니다.
한 줄 정리 AI 합성 사용자는 홈페이지 기획 초반 방향을 빠르게 좁히는 도구로는 유용하지만, 최종 디자인과 구조 결정은 반드시 실제 사용자 피드백을 거쳐야 합니다.