Minds는 실제 사람처럼 슈퍼볼 광고 순위를 매길까?

USA TODAY Ad Meter 2026의 광고 54편을 모두 접지된(grounded) Minds 100명으로 구성된 오디언스에게 보여 주고, 각 광고가 얼마나 마음에 드는지 물었습니다. 그다음 이들의 응답을 Ad Meter 사람 패널의 평점과 비교했습니다.

두 순위는 가까웠습니다. 순위 상관은 0.79(95% 구간 0.65~0.88)였고, 광고 1,420쌍 중 80%에서 Minds와 사람이 같은 광고를 앞에 두었습니다. 평균적으로 광고의 Minds 점수는 사람 점수와 평가 척도의 6.77%만큼 떨어져 있었습니다.

점수가 완벽하지는 않았습니다. Minds는 광고를 평균적으로 척도의 5.12%만큼 후하게 평가했고, 점수의 퍼짐도 사람의 0.70배에 불과했습니다. 순위는 활용하고, 점수 수준은 보정하세요.

무엇을 했나요?

미국 성인을 반영하도록 Minds 100명으로 오디언스를 구성했습니다. Mind는 자신만의 프로필과 기억을 가진 AI 응답자이고, 오디언스는 리서치 질문에 답하는 Mind들의 그룹입니다. 나이, 성별, 지역은 미국 인구조사국(Census Bureau)의 2024년 인구 추계를 따릅니다. 인종과 민족, 학력, 고용 상태는 2024년 American Community Survey를 따릅니다. 정당 지지는 특정 정당 쪽으로 기우는 사람을 포함해 Gallup의 2025년 수치를 따르고, 거주 지역 유형은 2024년 General Social Survey를 따릅니다. 이 특성들의 조합은 2024년 General Social Survey에서 관찰된 패턴을 따릅니다. 그래서 오디언스는 특성을 무작위로 섞은 사람이 아니라 현실적인 사람들로 이루어집니다.

각 Mind는 접지되어 있습니다. 학습된 프로필과 자신만의 지식 베이스를 가지며, 지식 항목 수의 중앙값은 124개입니다(Mind당 102개에서 138개). 5,400개의 응답 모두가 답한 Mind 자신의 지식을 활용했으며, 응답당 검색된 구절 수의 중앙값은 4개였습니다. 웹 검색을 사용한 응답은 없었습니다.

광고 54편은 모두 하나의 설문에 들어갔고, 각 광고는 전체 영상으로 제시되었습니다. 모든 Mind는 모든 광고에 같은 질문에 답했습니다. "Ad NN이 전체적으로 얼마나 마음에 드나요? 1(전혀 마음에 들지 않음)부터 5(매우 마음에 듦)까지 평가해 주세요." NN은 설문 안에서 광고의 번호였습니다. 따라서 Minds 100명 × 광고 54편 = 응답 5,400개입니다. 각 Mind는 다섯 개 선택지 각각에 확률을 부여했고, 한 광고에 대한 그 Mind의 점수는 기대 평점입니다. 광고의 Minds 점수는 Minds 100명 전체의 평균입니다. 아래의 순위는 이 점수를 정렬한 결과입니다. 설문은 영어로 진행했습니다.

사람 쪽 데이터는 Super Bowl LX를 대상으로 한 USA TODAY Ad Meter 2026입니다. USA TODAY는 등록된 패널이 약 190,000명이라고 밝혔습니다. 각 패널은 대상이 되는 모든 광고를 같은 1에서 5까지의 척도로 평가해야 했고, USA TODAY는 평균 평점으로 광고 순위를 매깁니다. 광고별로 몇 명이 평가했는지는 공개하지 않습니다.

모든 광고가 포함됩니다. 어려운 광고를 빼거나 잘 맞은 결과만 남기지 않았습니다.

Minds 100명. 전체 순위.

광고 54편 전체에서 Minds와 사람 사이의 Spearman 순위 상관은 0.79였습니다(95% 구간 0.65~0.88). Minds 점수를 무작위로 섞은 10,000번 중 이만큼 높은 상관에 도달한 경우는 많아야 1번이었습니다(순열 검정 p ≤ 0.0001).

순위를 더 구체적으로 읽는 방법이 있습니다. 사람이 서로 다르게 평가한 광고 두 편을 아무렇게나 골라 봅니다. 이런 쌍은 1,420개입니다. 그중 1,134쌍, 즉 80%에서 Minds도 사람이 더 좋아한 광고에 더 높은 점수를 주었습니다. 이런 일치와 불일치를 세는 Kendall의 tau-b는 0.59였습니다.

점수 사이의 Pearson 상관은 0.78이었습니다. 사람들이 가장 좋아한 광고는 Minds 점수도 높은 경향이 있었지만, 순서가 똑같지는 않았습니다.

점수는 얼마나 가까웠나요?

평점은 1에서 5까지의 척도 그대로 표시합니다. 차이는 척도 범위에 대한 비율로 나타냅니다. 척도의 범위는 4점이므로, 0.4점 차이는 척도의 10%입니다.

평균적으로 광고의 Minds 점수는 사람 점수와 척도의 6.77%만큼 떨어져 있었습니다(95% 구간 5.46%~8.11%). "절대"라는 말은 너무 높게 매긴 경우와 너무 낮게 매긴 경우를 모두 빗나간 것으로 센다는 뜻입니다. 서로 상쇄되지 않습니다. 차이의 중앙값은 6.50%였습니다. 큰 빗나감에 더 큰 가중치를 두는 제곱평균제곱근 차이는 8.43%였습니다.

남은 차이의 상당 부분은 일정한 편향입니다. 나머지 53편의 광고로 평균 편향을 추정해 각 광고에서 빼면, 평균 차이는 척도의 5.59%로 줄어듭니다. 이 보정은 참고용으로 보여 드리며, 핵심 결과는 보정하지 않은 점수를 사용합니다.

상위와 하위

크리에이티브 팀에게는 순위의 양 끝이 가장 중요합니다. 나란히 놓고 보겠습니다.

사람 기준 상위 세 편 중 두 편은 Minds 기준 상위 세 편에도 들었습니다. 사람 기준 1위인 Budweiser는 Minds에서 네 번째였고, Minds 기준 3위인 Toyota의 Superhero Belt는 사람 기준 20위였습니다.

하위 세 편은 덜 겹쳤습니다. 양쪽 모두에 든 광고는 Coinbase뿐이었습니다. 사람 기준 하위 세 편 중 나머지 두 편인 Ro와 Svedka는 Minds에서 49위와 51위로, 여전히 하위권이었습니다. 그룹을 넓힐수록 겹치는 정도가 커집니다.

Minds가 모든 광고를 좋아한 것은 아닙니다. Minds가 가장 낮은 점수를 준 광고는 사람들도 낮게 평가한 광고였습니다. 사람 기준 하위 삼분의 일에 속한 광고 18편 중 14편이 Minds 기준 하위 삼분의 일에도 들었습니다.

System1 Group의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

Budweiser: 사람 점수 4.00, Minds 점수 3.46.

YouTube ↗

Toyota: 사람 점수 3.04, Minds 점수 3.51.

YouTube ↗

Coinbase: 사람 점수 2.06, Minds 점수 2.49.

Minds가 가장 가까웠던 광고는?

어떤 점수는 거의 똑같았습니다. 이 사례들은 점수를 매긴 뒤에 골랐습니다. 위의 모든 결과에는 여전히 광고 54편이 모두 포함됩니다.

YouTube ↗

Rocket and Redfin: 사람 점수 3.27, Minds 점수 3.27.

소유자가 다른 웹사이트에서 이 영상을 재생하도록 허용하지 않습니다. 커버 이미지나 YouTube 링크를 열어 시청하세요.

YouTube ↗

NFL: 사람 점수 3.23, Minds 점수 3.24.

YouTube ↗

Levi's: 사람 점수 3.02, Minds 점수 3.03.

어디서 빗나갔나요?

가장 큰 차이는 모두 과대평가였습니다. Minds는 다음 세 편의 광고를 사람들보다 훨씬 더 좋아했습니다.

YouTube ↗

Wix: 사람 점수 2.38, Minds 점수 3.20.

YouTube ↗

Apartments.com and Homes.com: 사람 점수 2.63, Minds 점수 3.40.

공식 업로드는 방영된 광고보다 깁니다. Minds는 방영된 30초 버전을 평가했습니다.

YouTube ↗

Anthropic: 사람 점수 2.45, Minds 점수 3.20.

이는 더 넓은 패턴의 일부입니다. Minds는 광고 54편 중 42편에 사람 평균보다 높은 점수를 주었고, 평균적으로 척도의 +5.12%만큼 높게 점수를 매겼습니다. 점수의 폭도 좁혔습니다. Minds 점수의 퍼짐은 사람 점수의 0.70배에 불과했습니다. 사람들이 가장 좋아한 광고는 과소평가되는 경향이, 가장 싫어한 광고는 과대평가되는 경향이 있었습니다. 가장 크게 과소평가된 광고는 바로 1위 광고였습니다. 사람은 Budweiser에 4.00점, Minds는 3.46점을 주었습니다.

이렇게 빗나간 결과도 위의 모든 결과에 포함됩니다. 더 가까워 보이도록 점수를 보정하지 않았습니다.

크리에이티브 팀에게 어떤 의미가 있나요?

유용한 것은 순위입니다. 실제 광고 54편에서 Minds는 5쌍 중 4쌍에서 더 강한 광고를 약한 광고보다 앞에 두었고, Minds의 하위 삼분의 일은 사람의 하위 삼분의 일과 대체로 일치했습니다. 그래서 Minds 오디언스는 크리에이티브 안을 빠르게 분류하고, 예산을 쓰기 전에 약한 안을 찾아내는 방법이 됩니다.

절대 수준은 보정이 필요합니다. Minds 점수 3.4는 사람 점수 3.4가 아닙니다. 이번 결과로 보면 척도의 약 5%만큼 높게 나올 가능성이 크고, 광고 간 차이도 실제보다 작아 보입니다. Minds 점수를 공개될 평점의 예측으로 읽지 말고, 광고끼리 비교하거나 알려진 사람 기준값에 맞춰 보정하세요.

다음 단계는 블라인드 사전 테스트입니다. 광고가 방영되기 전에 오디언스와 질문을 고정하고, 사람 결과가 나오기 전에 Minds 점수를 공개하는 방식입니다.

이 연구를 읽는 방법

• 오디언스: 미국 성인을 반영하도록 구성한 Minds 100명. Ad Meter 패널은 자발적으로 참여한 사람들이며, 인구통계 구성은 공개되지 않았습니다. 이 패널을 재현하지는 않았습니다.
• 접지와 오염: 실행 전에 고정된 규칙에 따라 슈퍼볼, Ad Meter 또는 2026년 캠페인을 언급한 지식 항목 107개를 삭제했습니다. 실행 시점에는 하나도 남아 있지 않았습니다.
• 사전 등록: 가설, 채점 방식, 모든 지표를 실행 전에 고정했습니다. 사람 점수를 열어 보기 전에 응답을 암호학적 해시로 봉인했습니다.
• 블라인딩: 응답이 봉인될 때까지 별도의 관리자가 사람 점수를 보관했습니다. 실행 전에 분석 담당자가 보도 자료를 통해 알고 있던 결과는 하나였습니다. Budweiser가 1위를 했다는 사실입니다.
• 사전 지식: Ad Meter 2026 결과는 2026년 2월에 공개되었습니다. 이 결과를 Minds의 지식에서 삭제했지만, 기반 언어 모델은 학습 과정에서 광고나 관련 보도를 접했을 수 있습니다. 이 연구는 블라인드 예측이 아니라 사후 테스트입니다.
• 모델: 설문은 Minds의 기본 라우팅으로 실행되었습니다. 응답 5,322개는 gemini-3.8-flash, 61개는 gemini-3.5-flash-lite, 17개는 gpt-5.6-terra에서 나왔습니다. 모델 하나로 고정하지 않았습니다.
• 범위: 한 번의 조사, 전반적 선호도를 묻는 질문 하나, 광고 54편. USA TODAY는 광고별 표본 크기를 공개하지 않으므로, 사람 쪽의 불확실성은 모형에 반영하지 않았습니다.
• 견고성: 기대 평점 대신 각 Mind가 최종 선택한 답 하나로 채점해도 결과는 거의 같습니다. Spearman 0.79이고 평균 차이도 거의 같습니다.
• Minds의 평균 차이는 모든 광고에서 3이라고 답하는 경우보다 작았습니다. 이는 사전 등록한 검증입니다(단측 p = 0.0009).
• 모델 대조군 없음: 이 연구에서는 같은 모델에 더 단순한 프롬프트를 쓰는 비교를 실행하지 않았습니다. 따라서 접지 자체가 얼마나 기여했는지는 보여 주지 않습니다.
• 하나의 광고 세트: 이 결과는 슈퍼볼 한 번의 광고 54편을 다룹니다. 다른 광고 세트에서는 일치 정도가 다를 수 있습니다.

결론은 구체적입니다. 이 연구에서 접지된 Minds 100명은 Ad Meter 2026 광고 54편의 순위를 사람 패널과 가깝게 매겼고, 점수는 척도의 약 5%만큼 높게 매겼습니다. 공개되지 않은 새 캠페인, 개별 시청자, 매출에 대해 같은 정확도를 주장하지는 않습니다.

모든 광고. 모든 비교.

아래에 광고 54편 전체를 사람 순위 순서로 보여 드립니다. 각 차트는 같은 1에서 5까지의 척도에서 평균 선호도를 비교하며, 차이가 과장되지 않도록 0부터 그렸습니다. 표에는 정확한 점수와 순위가 나오며, 점수가 같으면 같은 순위를 공유합니다. 제외한 광고는 없습니다. 모든 광고에 영상(소유자가 퍼가기를 막은 경우 영상으로 연결되는 커버 이미지), 차트, 점수, 차이를 함께 실었습니다.

Budweiser · American Icons

System1 Group의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 13.45%

Lay's · Last Harvest

YouTube ↗

절대 차이: 3.38%

Pepsi · The Choice

Campaign Unpacked의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 0.67%

Dunkin' · Good Will Dunkin'

Campaign Unpacked의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 3.86%

Michelob Ultra · The ULTRA Instructor

System1 Group의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 4.09%

Xfinity · Jurassic Park ... Works

공식 업로드는 방영된 광고보다 깁니다. Minds는 방영된 60초 버전을 평가했습니다.

YouTube ↗

절대 차이: 0.59%

Novartis · Relax Your Tight End

YouTube ↗

절대 차이: 5.21%

NFL · Champion

소유자가 다른 웹사이트에서 이 영상을 재생하도록 허용하지 않습니다. 커버 이미지나 YouTube 링크를 열어 시청하세요.

YouTube ↗

절대 차이: 5.68%

Bud Light · Keg

Campaign Unpacked의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 0.65%

Amazon Alexa · Alexaaaa+

YouTube ↗

절대 차이: 4.21%

Ring · Be A Hero In Your Neighborhood

YouTube ↗

절대 차이: 1.12%

Rocket and Redfin · America Needs Neighbors Like You

YouTube ↗

절대 차이: 0.08%

State Farm · Stop Livin' on a Prayer

Commercial Archivist의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 1.11%

Dove · The Game is Ours

YouTube ↗

절대 차이: 0.58%

Uber Eats · Hungry for the Truth

Commercial Archivist의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 3.91%

NFL · You Are Special

소유자가 다른 웹사이트에서 이 영상을 재생하도록 허용하지 않습니다. 커버 이미지나 YouTube 링크를 열어 시청하세요.

YouTube ↗

절대 차이: 0.23%

Blue Square Alliance Against Hate · Sticky Note

YouTube ↗

절대 차이: 2.06%

Bosch · Justaguy

YouTube ↗

절대 차이: 6.12%

Universal Orlando Resort · Lil' Bro'

YouTube ↗

절대 차이: 9.09%

Toyota · Superhero Belt

YouTube ↗

절대 차이: 11.79%

Levi's · Backstory

YouTube ↗

절대 차이: 0.24%

Pringles · Pringleleo

YouTube ↗

절대 차이: 6.76%

Google · New Home

YouTube ↗

절대 차이: 7.35%

Toyota · Where Dreams Began

YouTube ↗

절대 차이: 8.54%

Hellmann's · Sweet Sandwich Time

YouTube ↗

절대 차이: 3.86%

T-Mobile · Tell Me Why (T-Mobile's Version)

VCU Brandcenter의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 4.72%

Liquid I.V. · Take A Look

YouTube ↗

절대 차이: 4.60%

TurboTax · The Expert

YouTube ↗

절대 차이: 13.59%

Kinder Bueno · Yes Bueno 2026

YouTube ↗

절대 차이: 6.40%

Instacart · Bananas

YouTube ↗

절대 차이: 3.86%

Ritz · RITZ Island

YouTube ↗

절대 차이: 7.70%

Grubhub · The Feest

YouTube ↗

절대 차이: 9.14%

He Gets Us · More

YouTube ↗

절대 차이: 1.70%

Boehringer Ingelheim · Mission: Detect the SOS

YouTube ↗

절대 차이: 11.86%

MAHA Center Inc. · MAHA Real Food by Mike Tyson

YouTube ↗

절대 차이: 9.94%

Apartments.com and Homes.com · Can't Live There

YouTube ↗

절대 차이: 19.25%

Volkswagen · The Great Invitation: Drivers Wanted

YouTube ↗

절대 차이: 7.37%

Cadillac Formula 1 · The Mission Begins

공식 업로드는 방영된 광고보다 깁니다. Minds는 방영된 30초 버전을 평가했습니다.

YouTube ↗

절대 차이: 11.38%

Squarespace · Unavailable

공식 업로드는 방영된 광고보다 깁니다. Minds는 방영된 30초 버전을 평가했습니다.

YouTube ↗

절대 차이: 9.81%

Fanatics Sportsbook · Bet On Kendall

YouTube ↗

절대 차이: 0.62%

Hims & Hers · Rich People Live Longer

YouTube ↗

절대 차이: 8.79%

Nerds · Taste Buds

YouTube ↗

절대 차이: 8.68%

DraftKings · DraftKings Live-ish Super Bowl LX

beastlycharizard13의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 6.59%

Oakley Meta · Athletic Intelligence is Here - Part Two

Bull N Bear의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 8.01%

OpenAI · You Can Just Build Things

YouTube ↗

절대 차이: 12.73%

Anthropic · Can I get a six pack quickly?

공식 업로드는 방영된 광고보다 깁니다. Minds는 방영된 30초 버전을 평가했습니다.

YouTube ↗

절대 차이: 18.79%

Novo Nordisk · A New Way to Wegovy

Commercial Archivist의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 9.83%

Oakley Meta · Athletic Intelligence is Here - Part One

J’aime les startups의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 13.52%

Poppi · Make it poppi

Commercial Archivist의 아카이브 업로드입니다. 공개된 공식 업로드가 없습니다.

YouTube ↗

절대 차이: 2.18%

Wix · Wix Harmony: The New Way to Create

YouTube ↗

절대 차이: 20.40%

SalesForce · @MrBeast's Vault

YouTube ↗

절대 차이: 1.35%

Ro · Healthier on Ro

YouTube ↗

절대 차이: 9.14%

Svedka · Shake Your Bots Off

YouTube ↗

절대 차이: 8.09%

Coinbase · Everybody Coinbase

YouTube ↗

절대 차이: 10.76%

데이터와 출처

• 데이터: 54개 비교 전체 CSV. 광고별 사람 점수와 Minds 점수, 순위, 차이, 사용한 영상이 들어 있습니다.
• 사람 결과: USA TODAY의 Ad Meter 2026 발표와 2026년 전체 순위.
• 방법: 접지된 Minds 100명, 설문 하나, 전체 영상 54편, 질문 하나, 응답 5,400개. 응답을 봉인할 때까지 사람 점수를 공개하지 않았습니다. 사전 등록한 결과: 순위 상관과 평균 점수 차이.
• 영상: YouTube에서 삽입했습니다. 광고주의 공식 업로드가 공개되어 있으면 그것을, 그렇지 않으면 방영된 광고의 아카이브 업로드를 사용했습니다. 커버 이미지는 이 영상들의 스틸 컷입니다.

USA TODAY, Ad Meter 및 모든 브랜드는 광고와 사람 기준값을 식별하기 위해서만 언급했습니다. Minds는 USA TODAY나 어떤 광고주와도 제휴 관계가 없으며, 이들의 후원이나 보증을 받지 않았습니다. 모든 광고의 권리는 각 소유자에게 있습니다.

검증 연구 개요에서 이 결과를 다른 공개 벤치마크와 함께 볼 수 있고, 방법론은 Minds 오디언스를 구성하는 방법을 설명합니다.