AI "참여자"로서의 합성 사용자

1. 서론: AI 합성 사용자의 등장과 논란 🤖

• AI 기반 도구들이 사용자 및 제품 리서치 분야에 쏟아져 나오고 있지만, 그 중에서도 AI가 만들어낸 사용자, 즉 합성 사용자(Synthetic Users)만큼 논란을 불러일으킨 것은 드물다고 해요.
• 합성 사용자란?

  "합성 사용자는 실제 사용자를 연구하지 않고도 인공적으로 만들어진 연구 결과를 제공하는, 사용자 집단을 모방하려는 AI 생성 프로필입니다."

• 이들은 챗 인터페이스를 통해 훈련 데이터에 기반한 생각, 필요, 경험을 시뮬레이션해서 표현할 수 있어요.
• 핵심 아이디어:

  "AI 기반 참여자를 인터뷰함으로써, 실제 사람과 대화하지 않고도 사용자 집단의 필요와 행동을 알 수 있다."

• 발표자는 연구자로서 이런 방식이 "대체로 끔찍하게 들린다"고 솔직하게 말하지만, 그 매력도 이해한다고 해요.

  "진짜 사람을 모집하고, 일정 잡고, 대화하는 데는 시간, 돈, 노력, 에너지가 필요하죠. 항상 그럴 여유가 있는 건 아니에요. 그냥 AI 사용자와 대화하는 게 많은 사람들에게 꽤나 유혹적으로 들릴 수 있습니다."

2. 실험: 합성 사용자 vs. 실제 사용자 🧑‍💻

• 신뢰성과 유용성을 알아보기 위해,
  • ChatGPT와
  • 합성 사용자(Synthetic Users)라는 전용 AI 사용자 플랫폼
    두 가지를 사용해 실험을 진행했어요.
• 실제 인간과의 연구 결과와 AI 사용자 인터뷰 결과를 비교했습니다.

3. 합성 사용자의 한계 🚫

• 가장 큰 문제점:

  "AI 사용자는 실제 인간보다 훨씬 더 긍정적인 경향이 있었습니다."

• AI 챗봇의 특징:

  "AI 챗봇은 상대를 기쁘게 하려는 경향, 즉 아첨(sycophancy)이 있고, 항상 인간 행동을 잘 모델링하지 못합니다."

• 이상적이고 비현실적인 답변

  "합성 사용자에게 평소 행동에 대해 물었을 때, 항상 깔끔하고 이상적이며 비현실적인 답변을 내놓았습니다."

• 예시:

  "온라인 강의를 계획한 대로 모두 수강했냐고 물었더니, 합성 사용자는 항상 모든 온라인 강의를 계획대로 완료했다고 답했습니다."

• 현실의 인간은 다르다!

  "인간은 그렇지 않아요. 우리는 복잡하죠. 실제 세계에서는 완벽하고 예측 가능한 행동만 하진 않아요." "우리 연구에 참여한 실제 사용자들은 여러 이유로 시작한 온라인 강의를 자주 끝내지 못한다고 말했습니다. 예를 들어 너무 바쁘거나 흥미를 잃어서요."

• UX 리서치의 본질:

  "UX 리서치는 인간 행동을 탐구합니다. 사람들이 왜 그런 선택을 하는지, 어떤 맥락적 요인이 행동에 영향을 주는지, 무엇이 중요하고 언제 중요한지 이해하려면 실제 인간의 경험을 들어야 합니다." "이런 것들은 현재의 합성 사용자로는 배울 수 없습니다."

4. 합성 사용자의 활용 가능성 📝

• 완전히 쓸모없는 건 아니다!

  "합성 사용자는 데스크 리서치(책상 위 조사)에는 훌륭한 도구입니다."

• 이미 알려진 정보 파악에 유용

  "특정 사용자 집단에 대해 이미 알려진 것을 배우는 데 적합하죠."

• 낯선 도메인 연구 준비에 도움

  "익숙하지 않은 도메인의 사용자를 연구하려고 할 때, 그 집단을 가짜로라도 인터뷰해보면 실제 연구를 어떻게 구조화하고 진행할지에 대한 인사이트를 얻을 수 있습니다."

• 하지만, 진짜 경쟁력을 주는 정보는?

  "여러분의 사용자에 대해 정확하고 새로운 정보를 얻고 싶다면, 즉 회사의 경쟁사보다 앞서고 싶다면, 그건 오직 실제 인간에게서만 얻을 수 있습니다."

5. 미래 전망: 연구 기반 합성 사용자 🔮

• 현재(영상 촬영 시점)에도

  "이 개념의 다음 버전을 개발 중인 회사들이 있습니다."

• 연구 결과 기반 합성 사용자

  "인터넷에 있는 아무 정보가 아니라, 실제 여러분의 연구 결과에 기반한 합성 사용자. 즉, 대화할 수 있는 연구 기반 페르소나(persona)를 생각해보세요."

• 앞으로 주목해야 할 점!

  "리서치용 AI 도구가 쏟아지는 가운데, 이런 발전을 눈여겨볼 필요가 있습니다."

6. 마무리 및 추가 리소스 안내 🎬

• 감사의 인사와 추가 안내

  "시청해주셔서 감사합니다. 더 많은 UX 영상을 보고 싶으시다면, 여기 있는 영상들을 확인해보세요. 채널 구독도 고려해주시고요." "nngroup.com 웹사이트에서는 2,000개가 넘는 무료 아티클 라이브러리를 이용하실 수 있습니다. 실시간 실습 UX 교육을 제공하는 UX 강좌도 등록하실 수 있어요."

핵심 키워드 요약

• 합성 사용자(Synthetic Users)
• AI 기반 사용자 리서치
• 실제 사용자 vs. 합성 사용자
• 아첨(sycophancy)
• 이상적/비현실적 답변
• 데스크 리서치
• 연구 기반 페르소나
• UX 리서치의 본질: 인간 행동 탐구

이 영상에서 꼭 기억해야 할 말

"합성 사용자는 실제 인간보다 훨씬 더 긍정적인 경향이 있었습니다."
"인간은 그렇지 않아요. 우리는 복잡하죠."
"UX 리서치는 인간 행동을 탐구합니다. 이런 것들은 현재의 합성 사용자로는 배울 수 없습니다."
"여러분의 사용자에 대해 정확하고 새로운 정보를 얻고 싶다면, 그건 오직 실제 인간에게서만 얻을 수 있습니다."
"연구 기반 페르소나와 대화할 수 있다면, 그건 정말 주목할 만한 발전입니다."

이 요약이 합성 사용자와 AI 리서치의 현재와 한계, 그리고 미래 가능성까지 한눈에 이해하는 데 도움이 되었길 바랍니다! 😊