리서치

합성 응답자, 페르소나 조건화 AI, 평가 방법론, 시뮬레이션 증거의 한계에 대한 Minds Research Lab의 실험·벤치마크·기술 논문.

ANES 2024: 합성 응답과 후속 인간 응답 비교

300명의 매칭된 패널과 28개 후속 문항을 바탕으로 진행된 ANES 선거 전후 비교 연구로, 응답 형식과 참가자 프로필 접지(grounding)에 따른 결과를 각각 분석합니다.

300명의 매칭된 응답자를 대상으로 27개의 이항형, 순서형, 다중선택형 문항을 평가하여 집계 적합도와 개별 예측을 분리해 분석한 CES 비교 연구입니다.

360명과 17개 문항에 걸쳐 네 가지 응답 조건을 비교한 타깃 분리형 GSS 파일럿 연구로, 확률 도출 효과와 프로필의 가치를 분리하여 검증합니다.

두 개의 공개 인터뷰 코퍼스를 통해 요약된 프로필과 검색된 이전 근거가 22명의 실제 참가자가 내놓은 66개 후속 응답에 대한 충실도를 개선하는지 검증합니다.

5개국 600명의 학생과 10개의 홀드아웃 문항을 평가하여 가중치 적용 분포 오차와 명확한 국가 및 언어적 한계를 검증한 PISA 비교 연구입니다.

299명, 869개 문항 비교를 통해 블라인드 심사관과 명확한 태스크 한계 내에서 접지된 Minds가 참가자의 가치관과 근거 이유를 더 잘 반영하는지 측정합니다.

참여자 프로필과 메모리가 범용 GPT, Claude, Gemini 프롬프트 대비 합성 응답의 품질을 언제 향상시키는지 홀드아웃 인터뷰 비교 테스트로 검증합니다.

사용 가능한 Minds의 정성 및 정량 리서치 방법론, 필수 입력값, 버전 관리되는 파이프라인 단계, 계산기, 산출물 및 한계를 정리한 공개 맵입니다.

301개 Mind를 활용한 Z세대 프로덕션 테스트를 포함한 5개 공개 설문 데이터셋을 통해 확인한 합성 오디언스 정확도와 프로필 기반 접지(grounding)의 효과.

결과 비공개(outcome-blind) 검증을 통해 301명의 고정된 Z세대 Minds로부터 얻은 903개의 응답과 영국 Food Standards Agency가 발표한 조사 분포를 비교했습니다. 종합 근사치는 93.99%에 달했습니다.

Minds가 합성 오디언스를 근거화하는 데 사용하는 공공 통계·학술·산업 출처와 그라운딩 활용 방식.

Minds가 근거를 갖춘 AI 페르소나를 재사용 가능한 오디언스로 구성해 콘셉트, 메시지, 포지셔닝, 시장을 더 빠르게 탐색하는 방법입니다.

오디언스 정의, 그라운딩, 프롬프트 중립성, 결과 검토, 보고 및 후속 검증을 아우르는 가상 타겟 오디언스 실무 검증 체크리스트입니다.

Minds가 재사용 가능한 AI 페르소나 그룹을 생성하고, 병렬 가상 응답을 수집하며, 데이터 검증을 중시하는 리서치 워크플로우에 어떻게 부합하는지 설명합니다.

Spark Effect 연구에 따르면, 페르소나가 설정된 AI 에이전트는 단일 에이전트 기준 모델보다 훨씬 더 다양한 창의적 결과물을 만들어내는 것으로 나타났습니다.

Minds 소속