신상품 조사는 늘 같은 딜레마였다. 제대로 하면 비싸고 느리고, 빨리 하면 부실하다. 합성 소비자 — LLM으로 만든 가상 응답자 — 가 이 딜레마를 흔들고 있다. 다만 흔히 오해하는 방향으로는 아니다. 합성 소비자는 인간 조사를 대체하는 기술이 아니라, 신상품 개발의 깔때기(funnel)를 바꾸는 기술이다.
이미 현장은 움직였다. Qualtrics가 14개국 시장조사 담당자 3,000명을 조사한 「2025 Market Research Trends Report」에 따르면, 73%가 이미 합성 응답을 한 번 이상 써봤고, 71%는 3년 내에 데이터 수집의 절반 이상이 합성 응답으로 채워질 것이라고 본다. 합성 데이터 시장 규모는 2023년 약 2억 6,700만 달러에서 2032년 46억 달러로 추정된다.
어디까지 맞히나 — 친숙한 카테고리의 놀라운 정확도
하버드 비즈니스 스쿨의 디지털 데이터 디자인 연구소(D³)의 Israeli 외(2024)는 LLM을 합성 포커스 그룹으로 써서 지불의사액(WTP) 실험을 했다. 결과는 인상적이었다. 치약·태블릿 PC처럼 친숙한 카테고리에서는 합성 소비자가 실제 인간의 선호와 놀라울 정도로 일치하는 결정을 내렸고, 비용과 시간은 인간 대상 연구의 "극히 일부"였다. BASES·ASSESSOR·FGI·컨조인트 분석 같은 전통 방법론의 일부 단계를, 합성 소비자가 빠르고 싸게 대체하기 시작한 것이다.
여기서 멈추면 "인간 조사 끝, 합성으로 전환"이라는 잘못된 결론에 도달한다. 진짜 이야기는 그다음에 있다.
실무에서 쓰는 방식 — 대체가 아니라 1차 필터
합성 소비자가 잘하는 건 '깊이'가 아니라 '넓고 빠른 스크리닝'이다. 그래서 깔때기의 맨 앞에 둔다.
- 콘셉트 스크리닝 — 신제품 콘셉트 30개를 100개 합성 페르소나에 한꺼번에 노출해, 관심도·지불의사액·우려 포인트를 받아내는 1차 필터.
- 광고 카피 사전 테스트 — 카피 12개를 동시에 노출해, 세그먼트별 클릭 의도와 부정 반응 키워드를 추출.
- 가격 민감도 곡선 — 같은 페르소나에 가격을 5단계로 변주해 던지고 WTP 곡선을 추정.
수백 명을 모집해 며칠씩 걸리던 1차 걸러내기를, 몇 시간에 끝낸다. 살아남은 소수의 콘셉트만 인간 조사로 넘긴다. 인간 조사를 없애는 게 아니라, 인간 조사가 진짜 중요한 곳에만 쓰이게 만든다.
잊으면 안 되는 한계 — 부호가 뒤집힌다
합성 소비자를 '싸고 빠른 인간'으로 착각하는 순간 위험해진다. Dominguez-Olmedo 외(2024, NeurIPS), Röttger 외(2024, ACL), Bisbee 외(2024, Political Analysis)는 일관된 경고를 내놓는다. LLM 합성 응답자는 **단일 속성만 통제했을 때와 다중 속성을 동시에 통제했을 때, 효과의 방향이 뒤집히는 부호 역전(sign reversal)**까지 보인다는 것이다.
- 카테고리 의존성 — 친숙한 카테고리에서는 잘 맞지만, 신규·낯선 카테고리에서는 인간 분포를 안정적으로 재현하지 못한다.
- 취약한 안정성 — 프롬프트 문구, 질문 순서, 응답지 레이블, 모델 업데이트만으로 결과가 바뀐다.
즉, 합성 소비자의 정확도는 '있다/없다'의 문제가 아니라 '어떤 카테고리에서, 어떤 조건으로'의 문제다. 이 경계를 모르면, 빠르게 틀린 답을 대량으로 생산하게 된다.
기업이 배워야 할 것 — 깔때기를 바꿔라, 대체하지 마라
- 인간 조사 대체용으로 도입하지 마라. '넓게·빠르게 스크리닝'하는 깔때기 앞단의 도구로만 쓴다.
- 반드시 인간 검증과 짝지어라. 합성 결과가 살린 콘셉트는, 소수의 실제 인간 조사로 다시 확인한다.
- 재현성 로그를 의무화하라. 프롬프트·모델 버전·시드를 기록한다. 기록 없이는 그 결과를 다시 만들 수 없다.
- 카테고리별로 신뢰 등급을 다르게 두라. 친숙한 카테고리와 신규 카테고리에 같은 신뢰를 주지 않는다.
- 합성 도입 자체를 KPI로 삼지 마라. KPI는 '합성 응답을 몇 % 썼는가'가 아니라 '신상품 출시 실패율을 얼마나 줄였는가'다.
합성 소비자는 마법이 아니라 도구다. 어디서 강하고 어디서 무너지는지를 아는 사람의 손에서만, 신상품 개발의 속도와 정확도를 동시에 끌어올린다.
— 임보람