크리에이티브 효과

크리에이티브 사전 테스트: 창의성과 성과의 전쟁을 끝내는 법

창의성과 성과가 적처럼 느껴지는 건 데이터가 너무 늦게 도착하기 때문입니다. 예산을 쓰기 전에 크리에이티브를 사전 테스트하면, 근거가 과감한 아이디어를 죽이는 대신 지켜 주기 시작합니다.

풍동 안에서 연기 줄기가 흐르는 가운데 대담한 형태의 종이 조형물이 테스트를 받고 있고, 한 손이 작은 빨간 사각형이 표시된 조형물의 앞쪽 가장자리를 조정하는 흑백 사진입니다.
이 글의 출발점이 된 질문

“모든 아이디어를 무난하게 깎아 내지 않으면서 캠페인의 창의성과 성과 사이에서 균형을 잡으려면 어떻게 해야 할까요?”

핵심 답변둘을 경쟁 관계로 보지 말고 근거를 더 앞 단계로 옮기십시오. 미디어 예산을 집행하기 전에 크리에이티브 콘셉트를 사전 테스트하고, 점수를 돈을 쓴 뒤에 내리는 판결이 아니라 아이디어를 다듬는 피드백으로 활용하십시오. 그러면 과감하고 인간적인 작업이 근거를 바탕으로 제자리를 확보하고, 퍼포먼스 팀은 확신을 얻으며, 최종 결정은 브랜드를 이해하는 사람들이 내리게 됩니다.

핵심 요약

  • 창의성과 성과가 충돌하는 주된 이유는 성과 데이터가 대개 중요한 결정이 내려진 뒤에야 도착하기 때문입니다.
  • 크리에이티브 사전 테스트는 미디어 집행 전에 콘셉트를 평가하므로, 근거가 아이디어를 심판하는 데 그치지 않고 개선하는 데 쓰일 수 있습니다.
  • 크리에이티브 팀에 일찍 공유한 점수는 피드백으로 작동하지만, 론칭 후에 쓰이는 점수는 통제로 작동해 팀을 안전한 작업 쪽으로 몰아갑니다.
  • 클릭 가능성 점수는 광고에 대한 반응을 예측할 뿐 독창성이나 장기적 브랜드 구축을 예측하지는 않으므로, 결정은 여전히 크리에이티브 전문가의 판단에 달려 있습니다.
  • 수용 가능한 점수를 받은 과감한 안 하나는 지키기로 미리 합의해 두면, 사전 테스트가 가장 안전한 아이디어만 보상하는 일을 막을 수 있습니다.

모든 아이디어를 무난하게 깎아 내지 않으면서 창의성과 성과의 균형을 잡으려면 어떻게 해야 할까요? 둘을 경쟁 관계로 보지 말고 근거를 더 앞 단계로 옮기십시오. 미디어 예산이 확정되기 전에 크리에이티브를 사전 테스트하면, 데이터는 용감한 작업에 내리는 판결이 아니라 그 작업을 더 낫게 만드는 도구가 됩니다.

이 논쟁에 새로운 불이 붙었습니다. Sir John Hegarty는 Marketing Week와의 인터뷰에서 오늘날의 마케팅을 “반복적이고, 진부하고, 지루하다”고 평하며, 스프레드시트는 이해하지만 아이디어는 이해하지 못하는 “좌뇌형 사고자”들로 채워진 브랜드와 에이전시를 탓했습니다. 그가 든 근거는 “신제품 출시의 95% 정도가 실패한다”는 것이며, 데이터가 그렇게 늘었는데도 이 비율이 20년 동안 변하지 않았다고 말합니다. 증상에 대한 그의 진단은 옳습니다. 다만 한 걸음 더 나아가야 합니다. 문제는 데이터 자체가 아닙니다. 데이터가 언제 도착하고, 무엇에 쓰이느냐입니다.

창의성과 성과는 왜 정반대처럼 느껴질까요?

일이 진행되는 순서 때문입니다. 익숙한 장면을 떠올려 보십시오. 크리에이티브 팀이 세 가지 안을 발표합니다. 클라이언트의 퍼포먼스 책임자가 합리적인 질문을 던집니다. “이게 효과가 있을지 어떻게 알 수 있나요?” 아무도 모르니 가장 안전한 안이 채택됩니다. 아니면 작업이 그대로 집행되어 실제 돈으로 테스트를 받습니다.

과감한 안이 첫 주에 부진하면 집행이 중단됩니다. 팀은 뻔한 교훈을 얻고 다음에는 더 안전하게 갑니다. 이런 일이 몇 년 반복되면 Hegarty가 묘사한 업계가 만들어집니다.

이런 순서에서는 성과 데이터가 늘 중요한 결정이 내려진 뒤에야 나타납니다. 데이터는 사후 부검처럼 작동하고, 부검을 기다리면서 최고의 작업을 해내는 사람은 없습니다.

이런 일이 반복되는 이유: 통제하는 피드백과 정보를 주는 피드백

심리학자 Edward Deci와 Richard Ryan이 정립한 자기결정이론이 이를 잘 설명합니다. 사람은 세 가지를 느낄 때 최고의 성과를 냅니다. 자율성(일에 대한 어느 정도의 통제권), 유능감(일을 점점 더 잘하게 되고 있다는 느낌), 관계성(함께 일하는 사람들, 그리고 일의 수혜자들과의 유대감)입니다.

이 이론은 유용한 구분을 제시합니다. 같은 숫자라도 통제로 받아들여질 수도, 정보로 받아들여질 수도 있습니다. 돈을 쓴 뒤 작업을 평가하는 데 쓰이는 대시보드는 통제처럼 느껴지고, 사람들은 안전하게 가는 것으로 반응합니다. 팀이 아직 반영할 수 있을 때 일찍 공유된 점수는 정보처럼 느껴집니다. 작업을 만든 사람들에게서 작업을 빼앗지 않으면서도 유능감을 키워 줍니다.

오디언스 측면도 있습니다. 이 글의 바탕에 깔린 인사이트는 진정성은 완벽함의 틈새에서 자라난다는 것입니다. 아이디어를 진짜처럼 느끼게 하는 거칠고 인간적인 결은, 불안한 승인 과정에서 가장 먼저 매끄럽게 다듬어져 사라지곤 합니다. RP3 Agency의 Beth Johnson은 Forbes Agency Council 패널 기고에서 “날카로운 전략과 인간의 판단이 없다면 AI는 획일성의 쓰나미를 가속할 뿐”이라고 경고했습니다. 사전 테스트를 잘 활용하면 다소 거친 아이디어도 다듬기 과정에서 살아남는 데 필요한 근거를 얻게 됩니다.

크리에이티브 사전 테스트란 무엇이며, 무엇이 달라졌을까요?

크리에이티브 사전 테스트는 광고나 콘셉트를 집행하기 전에 평가해 성과를 예측하고, 아직 고칠 수 있을 때 약점을 찾아내는 과정입니다. 전통적으로는 패널과 포커스 그룹, 몇 주에 걸친 현장 조사, 그리고 TV 광고 예산 정도는 되어야 감당할 수 있는 비용이 필요했습니다.

AI가 이 경제성을 바꿨습니다. 이제는 사람들이 클릭할 가능성 같은 예상 성과를 기준으로 몇 주가 아니라 몇 분 만에 콘셉트를 평가할 수 있습니다. 덕분에 리서치 예산이 없던 소셜·디지털 작업, 즉 독립 에이전시가 만드는 작업 대부분에서도 사전 테스트를 활용할 수 있게 되었습니다.

한 가지 주의할 점이 있습니다. 점수는 원래 예측하도록 설계된 것만 예측합니다. 클릭 가능성 점수는 누군가 눈앞의 광고에 보일 반응을 알려 줍니다. 독창성, 장기적 브랜드 구축, 아이디어가 브랜드다운지에 대해서는 아무것도 알려 주지 않습니다. 그런 판단에는 여전히 안목 있는 사람이 필요합니다.

과감한 아이디어를 죽이지 않고 사전 테스트를 활용하려면 어떻게 해야 할까요?

  1. 점수를 매기기 전에 광고의 역할부터 합의하십시오. 이 광고의 목적이 클릭인지, 기억에 남는 것인지, 공유인지 정하십시오. 점수는 그 점수가 실제로 측정하는 역할에 대해서만 활용하십시오.
  2. 완성된 광고가 아니라 방향안을 평가하십시오. 수정 비용이 적고 아무도 최종 편집본에 정이 들지 않은 초기에 거친 콘셉트를 테스트하십시오.
  3. 크리에이티브 팀에 먼저 보여 주십시오. 클라이언트가 보기 전에 작업을 만든 사람들에게 결과를 공유하십시오. 그래야 팀의 자율성이 지켜지고, 점수가 개선을 위한 브리프가 됩니다.
  4. 점수를 진단서로 읽으십시오. 오프닝 장면, 훅, 카피처럼 콘셉트의 발목을 잡는 요소를 찾아, 아이디어 전체를 버리는 대신 그 요소를 고치십시오.
  5. 과감한 안 하나는 지키십시오. 가장 독창적인 콘셉트는 1위가 아니더라도 수용 가능한 점수 범위 안에 들면 진행한다고 미리 합의해 두십시오.
  6. 적은 비용으로 시장에서 확인하십시오. 본격적으로 확대하기 전에 유력한 안들에 미리 합의한 소액 예산을 투입하고, 실제 결과를 다시 공유해 점수가 무엇을 예측하고 무엇을 예측하지 못하는지 모두가 배우게 하십시오.

사전 테스트 전과 후, 근거는 어느 단계에 있을까요?

단계사전 테스트 미도입사전 테스트 도입
콘셉트 검토의견 중심, 목소리 큰 사람이 이김점수가 전문가의 판단을 뒷받침
클라이언트 프레젠테이션“저희를 믿어 주세요”과감한 안을 뒷받침하는 근거
미디어 집행검증되지 않은 작업을 실제 돈으로 테스트이미 평가받은 안에 예산 투입
첫 주 성과 부진과감한 아이디어 중단사전 테스트 결과와 대조한 뒤 조정
팀이 얻는 교훈다음엔 안전하게 가자어떤 요소가 효과적이며 그 이유는 무엇인지

서류상으로는 작은 변화지만 실제로는 큰 변화입니다. 근거가 심판만 할 수 있는 프로세스의 끝에서, 도움을 줄 수 있는 시작 지점으로 옮겨 갑니다.

AI는 어디서 돕고, 어디서는 빠져야 할까요?

같은 Forbes 패널은 유용한 구분을 제시합니다. Multiply의 Matt Jayson은 캠페인 세팅과 QA가 가장 자동화하기 좋은 업무라며 이렇게 말합니다. “고성장 중인 한 클라이언트의 경우, 그것만으로도 매주 눈에 보이지 않는 업무가 족히 20시간은 됩니다.” SWOON MEDIA의 Natacha Grey는 가치가 “에셋을 만드는 일에서 대규모로 더 나은 결정을 내리는 일로” 옮겨 가고 있다고 설명합니다.

이것이 올바른 분업입니다. 세팅, QA, 리사이징, 스코어링은 기계에 맡기고, 사람은 아이디어 자체에 더 많은 시간을 쓰게 하십시오. Hegarty의 지적은 여전히 유효합니다. 데이터는 아이디어에 정보를 줄 수는 있지만, 아이디어를 만들어 내지는 못합니다.

바로 여기서 스코어링 툴이 진가를 발휘합니다. Defy Monitor는 미디어 집행 전에 콘셉트의 예상 클릭 가능성을 평가하며, 그 스코어링은 실제 광고 성과로 검증되었습니다. 따라서 팀은 비용을 지불하기 전에 크리에이티브가 효과를 낼지 알 수 있습니다. 이 기능이 Defy 플랫폼의 다른 기능과 어떻게 맞물리는지도 확인해 보십시오. 어떤 아이디어를 만들 가치가 있는지에 대한 결정은 여전히 사람의 몫입니다.

과감한 아이디어를 채택하기 전에 증거를 원하는 클라이언트에게는 뭐라고 말해야 할까요?

좋다고 답하고 보여 주십시오. 증거를 요구하는 클라이언트는 창의성의 적이 아닙니다. 대개는 상사에게 같은 질문을 받게 될 마케터일 뿐입니다. 점수와 그 근거, 그리고 소규모 시장 테스트 계획을 제시하십시오. 그런 다음 숫자를 적이 아닌 우군으로 삼아, 아이디어 그 자체의 가치로 설득하십시오.

Defy Monitor · Defy MCP · Defy Agents

Defy가 돕는 방법

Defy Monitor는 미디어 예산이 확정되기 전에 에이전시에 근거를 제공하므로, 창의성과 성과에 관한 논의가 의견이 아닌 데이터에서 출발합니다.

  • 미디어 집행 전에 콘셉트의 예상 클릭 가능성을 평가합니다. 비용을 지불하기 전에 크리에이티브가 효과를 낼지 알 수 있습니다.
  • 스코어링은 실제 광고 성과로 검증되었습니다.
  • 한 카테고리 전체의 경쟁사 광고(한 번에 982개 이상)를 몇 분 만에 분석할 수 있어, 다른 모든 브랜드의 ‘안전한 선택’이 어떤 모습인지 파악할 수 있습니다.
  • 모든 AI 결론은 그 근거가 된 실제 게시물로 연결됩니다.

다음 시안 라운드에 적용해 보십시오. 일찍 평가하고, 결과는 크리에이티브 팀에 먼저 공유하고, 최종 결정은 사람에게 맡기십시오.

자주 묻는 질문

크리에이티브 사전 테스트란 무엇일까요?

크리에이티브 사전 테스트는 광고나 콘셉트를 집행하기 전에 평가해 성과를 예측하고, 아직 고칠 수 있을 때 약점을 찾아내는 과정입니다. 전통적인 방법은 패널이나 포커스 그룹을 활용하며 몇 주가 걸립니다. 이제는 AI 기반 툴이 클릭 가능성 같은 예상 성과를 기준으로 몇 분 만에 콘셉트를 평가할 수 있어, 리서치 예산이 없던 소셜·디지털 작업에서도 사전 테스트를 현실적으로 활용할 수 있게 되었습니다.

사전 테스트를 하면 크리에이티브가 더 안전하고 지루해질까요?

점수를 판결처럼 쓰고 늘 가장 높은 점수가 이긴다면 그럴 수 있습니다. 하지만 제대로 쓰면 정반대의 효과를 냅니다. 독창적인 안이 수용 가능한 점수를 받으면 이제 근거가 그 편에 서게 되므로, 불안해하는 이해관계자도 쉽게 그 안을 버리지 못합니다. 점수는 의사결정의 참고 자료이며 최종 결정은 브랜드를 이해하는 사람들이 내린다는 점을 미리 합의해 두십시오.

크리에이티브 점수로 알 수 없는 것은 무엇일까요?

예상 클릭 점수는 누군가 눈앞의 광고에 보일 반응을 측정합니다. 장기적인 브랜드 구축, 독창성, 문화적 적합성, 아이디어가 브랜드다운지는 측정하지 않습니다. 점수는 원래 만들어진 용도에만 쓰고, 그 밖의 모든 것은 크리에이티브 전문가의 판단, 브랜드에 대한 이해, 실제 시장 측정에 맡기십시오.

회의적인 크리에이티브 팀에 사전 테스트를 어떻게 도입할까요?

클라이언트가 무엇이든 보기 전에 팀에게 먼저 점수를 공유하고, 어떤 훅이나 장면, 카피가 도움이 되고 어떤 것이 방해가 되는지 알려 주는 진단 도구로 소개하십시오. 팀이 수정하고 다시 점수를 받아 보게 하십시오. 작업을 만드는 사람들이 근거의 활용 방식을 주도하면, 사전 테스트는 위에서 내려오는 평가가 아니라 더 나아지기 위한 도구로 느껴집니다.

출처

  1. 'Repetitive, cliché, boring': Sir John Hegarty on marketing's failure of creativity — Marketing Week, 2026-09-23
  2. 19 Ways Agencies Can Stay Essential As AI Automates Creative Work — Forbes (Forbes Agency Council), 2026-10-05

이 글을 쓴 이유이 글을 쓴 이유는 “창의성과 성과의 균형을 어떻게 잡을까?”가 에이전시 세계에서 가장 오래된 논쟁 중 하나이자 여전히 가장 많이 검색되는 질문 중 하나이며, 최근 Sir John Hegarty가 데이터 주도 마케팅을 강하게 비판하면서 이 논쟁이 다시 불붙었기 때문입니다.

체급을 뛰어넘을 준비가 되셨습니까?

대형 네트워크 에이전시들이 꽁꽁 감춰 온 인텔리전스 스택을 직접 확인해 보십시오. 영업 권유 없이, 편하게 대화만 나눕니다.

대화 시작하기Defy 로그인