AI 초안 수정 기준, 손대기 전에 점수표부터 만드는 순서

3줄 요약

• AI 초안은 느낌으로 고치기 전에, 미리 정해 둔 점수표로 먼저 채점해야 판단이 사람마다 흔들리지 않습니다.
• 점수표의 재료는 새로 설계하지 않아도 됩니다. 이미 쌓아 둔 결과물 중 잘된 것과 아쉬웠던 것을 짝지어 차이를 적는 데서 항목이 나옵니다.
• 통과선을 넘기지 못한 글만 다시 쓰게 하고, 점수가 높았던 부분을 발췌해 합치면 손대는 범위가 초안 전체가 아니라 일부로 줄어듭니다.

AI가 초안을 뽑아주는 순간부터는 거의 감으로 움직이게 됩니다. 어딘가 어색한데 어디가 문제인지 설명하기 어렵고, 결국 문장을 통째로 바꾸거나 처음부터 다시 받는 일이 반복됩니다. 롱폼 영상 하나를 여러 편의 숏폼 대본이나 캡션으로 반복해 재가공하는 작업일수록 이 반복은 더 자주 벌어집니다.

문제는 느낌을 판단 기준으로 쓰고 있다는 점입니다. 기준이 머릿속에만 있으면 사람이 바뀌거나 그날의 기분이 바뀔 때마다 판정도 달라집니다. 손대기 전에 판단 기준을 먼저 글로 정해 두는 순서 하나만 바꾸면 이 반복은 줄어듭니다.

AI 초안을 고칠 때마다 기준이 달라지는 이유는 무엇일까요?

기준이 "어딘가 이상하다"는 감각으로만 남아 있기 때문입니다. 그 감각을 말로 정리하지 않은 채 프롬프트만 바꾸다 보면, 결국 처음부터 다시 쓰는 쪽으로 돌아가게 됩니다.

해결은 생각보다 단순합니다. 고치기 전에 판정하는 단계를 하나 끼워 넣으면 됩니다. 느낌으로 손대는 대신 미리 정해 둔 점수표로 먼저 채점하고, 통과선을 넘긴 글만 넘기고 미달인 글만 다시 받는 식입니다. 판단이 매번 흔들리는 것은 사람 탓이 아니라 기준이 글로 적혀 있지 않기 때문입니다.

롱폼 강연이나 인터뷰 한 편을 여러 편의 숏폼 대본으로 반복해 재가공하는 작업에서는 이 문제가 더 커집니다. 같은 영상에서 뽑아낸 결과물인데도 담당자나 작업 시점이 다르면 통과 기준이 매번 달라지고, 그러면 편마다 톤과 완성도도 조금씩 어긋납니다.

이 구조에서 바뀌는 것은 작업 순서 하나뿐입니다. "이상하다"가 아니라 "몇 점이고 어느 항목이 비어 있다"로 판단 언어가 바뀌는 것입니다. 수정을 반복해도 방향이 계속 틀어진다면, 지시를 더 얹는 대신 기준 문장으로 되돌리는 법을 함께 쓸 수 있습니다.

점수표를 만들 재료는 어디서 구해야 할까요?

점수표란, 수정하기 전에 미리 정해 둔 채점 항목과 통과 기준을 글로 적어 둔 문서입니다. 새 기준을 설계하는 일부터 시작하지 않아도 됩니다. 이미 만들어 둔 결과물 중에서 잘된 것과 아쉬웠던 것을 짝지어 놓는 데서 항목이 나옵니다. 차이를 적을 수 있어야 항목이 되고, 항목이 되어야 비로소 점수가 됩니다.

원본 인터뷰에서 소개된 한 콘텐츠 제작 조직을 예로 들면, 이 조직은 AI가 쓰이기 전부터 해마다 1,500편 가까운 글을 직접 써 온 콘텐츠 자산을 갖고 있었습니다. 그 결과물을 잘 썼다고 보는 쪽과 아쉬웠다고 보는 쪽으로 나눠 학습 자료로 삼았고, 이 조직은 AI 초안의 통과선을 100점 중 80점으로 정해 두고 있습니다. 이 80점은 이 조직이 정한 내부 통과선일 뿐, 업계 공통 기준은 아닙니다. 숫자 자체보다 통과선을 하나 정해 둔다는 틀만 가져오면 됩니다.

여기서 중요한 것은 재료의 출처입니다. 점수표는 외부 가이드가 아니라 직접 써 본 결과물이 쌓여 있던 쪽에서 나왔습니다. 크리에이터라면 반응이 좋았던 영상 대본 5편과 아쉬웠던 5편을 나란히 놓고 차이를 적어보는 정도로 시작할 수 있고, 마케터라면 리드가 들어온 글과 그렇지 않은 글을 가르는 것부터 해볼 수 있습니다. 다만 이 부분은 원본에 없는 응용이라는 점을 밝혀 둡니다.

생성 버튼을 누르기 전에 무엇부터 정해야 할까요?

생성 버튼을 누르기 전에 제목과 개요, 글의 목적, 작성자와 어투까지 네 가지를 먼저 정해야 합니다. 이 값을 비워 두면 AI가 알아서 방향을 정하게 되고, 그 방향은 받을 때마다 달라집니다.

네 번째 항목인 자료 범위는 따로 짚을 필요가 있습니다. 보유한 핵심 자료만 쓸 것인지 외부 리서치로 보강할 것인지를 생성 전에 먼저 선택해 두는 것이며, 이 선택 하나가 결과물의 깊이와 방향을 크게 가릅니다. 제목과 개요를 AI에 맡기고 시작하지 않는다는 점이 핵심입니다. 작성자·어투처럼 매번 비슷하게 반복해서 지정하는 값은 규칙 한 장 문서화로 미리 적어 두면 생성 버튼을 누르기 전마다 새로 설명하지 않아도 됩니다.

두 개의 초안을 점수로 비교하면 무엇이 달라질까요?

정성적인 느낌이 숫자로 바뀌면, 100점이든 80점이든 그 점수에 도달하려면 어떤 요소가 채워져야 하는지가 글로 정의됩니다. 몇 점인지가 중요한 게 아니라, 몇 점이 되려면 무엇이 있어야 하는지가 핵심입니다.

운용 방식은 두 개의 초안을 동시에 받아 점수가 높은 쪽을 기준으로 삼는 것입니다. 통과선에 못 미치면 다른 도구로 다시 쓰게 하고, 이때 전체를 버리는 대신 점수가 높았던 부분만 발췌해 합쳐서 통과선을 넘기는 글로 만듭니다. 감으로 판단하던 것을 숫자로 바꿔 두면, 판단은 매번 같은 결로 내려집니다.

두 초안 중 하나를 고르는 것이 아니라는 점이 다릅니다. 점수가 높았던 부분 단위로 골라 합치기 때문에, 손대는 범위가 초안 전체가 아니라 일부로 줄어듭니다. 숏폼 대본을 여러 편 동시에 받을 때도 같은 방식을 쓸 수 있습니다. 한 초안은 도입부 문장이 낫고 다른 초안은 마무리 문장이 나은 경우, 둘 중 하나를 버리는 대신 도입부와 마무리를 각각 가져와 합치면 손대는 범위가 그만큼 더 줄어듭니다.

통과선을 넘긴 글에도 왜 사람이 다시 봐야 할까요?

점수표는 형식과 구조는 걸러내지만 논리 비약이나 신뢰가 떨어지는 표현까지는 걸러내지 못합니다. 그래서 통과선을 넘긴 글에도 사람이 마지막으로 한 번 더 읽는 단계가 남습니다.

통제 범위를 나눠 보면 이유가 분명해집니다. 형식은 답이 정해져 있는 영역이라 반복 생산을 AI에 맡기고, 내용은 전략이 필요한 영역이라 사람이 쥐고 있는 식입니다. 점수표를 통과했다고 바로 발행해도 괜찮은 것은 아닙니다. 생성에서 끝내지 않고, 다시 읽었을 때 논리에 비약이 있는지, 신뢰가 떨어지는 표현이 섞여 있는지를 사람이 확인해야 합니다. 채점과 검수는 서로 다른 일을 하기 때문에, 하나가 다른 하나를 대신하지 않습니다.

숏폼이나 썸네일처럼 결과물을 한꺼번에 여러 개 받는 작업에는 AI 산출물 점검 순서가 따로 필요합니다. 점수표를 통과한 글도 완성본이 아니라 다음 단계로 넘어가기 전의 초안으로 다루는 쪽이 안전합니다.

이 과정에서 아직 정해지지 않은 자리도 몇 군데 있습니다. 점수표에 들어가는 항목의 구체적인 목록, 통과선 숫자, 미달일 때 재작성을 몇 번까지 반복할지는 조직마다 직접 정해야 하는 값입니다.

크리에이터·마케터는 이 순서를 어떻게 줄여서 써볼 수 있을까요?

팀 단위의 도구 두 개나 고객사 자료 폴더가 없어도 구조 자체는 줄여서 가져올 수 있습니다. 같은 AI 도구에 초안을 두 번 받아 점수로 비교하고, 과거 콘텐츠를 잘된 것과 아쉬운 것으로 나눠 기준표를 만드는 정도면 충분합니다. 이 축약은 원본에 없는 응용이며, 직접 적용해보며 조정할 부분입니다.

마케팅 실무자에게는 이 구조가 조직 문제를 푸는 도구가 됩니다. 담당자 머릿속에만 기준이 있으면 사람이 바뀔 때마다 결과가 달라지기 마련입니다. 기준표를 문서 한 장으로 적어 두면 외주·신입·교대 운영에서도 같은 판정이 나옵니다. 대화 대신 문서로 고정해 두는 쪽이, 매번 같은 기준을 다시 설명하는 것보다 오래갑니다.

개인 크리에이터라면 치환이 필요합니다. "고객사 자료 폴더"는 과거 콘텐츠와 메모로 바뀌고, "작성자·어투 설정"은 채널 톤을 적어 둔 문단 하나로 바뀝니다. 선별 기준을 먼저 정해 두고 그 기준대로 걸러내는 방식은 글쓰기에만 한정되지 않습니다. 촬영본에서 쓸 구간을 고르는 작업에도 같은 구조가 적용됩니다. 긴 강연이나 인터뷰, 웨비나 촬영본에서 사용자가 정한 기준대로 구간을 골라 여러 개의 숏폼으로 돌려주는 ENLIT 같은 서비스도, 기준을 사람이 먼저 문장으로 정해 둔다는 전제 위에서 작동합니다.

한눈에 비교

오늘 바로 적용한다면

• 반응이 좋았던 결과물과 아쉬웠던 결과물을 나란히 놓고 차이를 적어 채점 항목을 만듭니다
• 통과선 점수를 하나 정해 두고, 못 미치면 다시 쓰게 합니다
• 생성 버튼을 누르기 전에 제목·개요·목적·작성자 어투 네 가지를 먼저 정합니다
• 미달인 초안은 전체를 버리지 않고 점수가 높았던 부분만 발췌해 합칩니다

자주 묻는 질문

AI 초안을 고칠 때 가장 먼저 확인해야 할 것은 무엇인가요?

손대기 전에 점수표가 글로 적혀 있는지부터 확인해야 합니다. "어딘가 이상하다"는 느낌만으로 고치기 시작하면 사람이나 그날의 기분에 따라 판정이 달라집니다. 채점 항목과 통과선이 문서로 남아 있어야 다음에 받을 초안도 같은 기준으로 판단할 수 있습니다.

점수표에 들어가는 항목은 어떻게 정하나요?

이미 쌓아 둔 결과물 중 잘된 것과 아쉬웠던 것을 나란히 놓고 차이를 적는 데서 항목이 나옵니다. 새로운 기준을 처음부터 설계하기보다, 반응이 좋았던 결과물과 그렇지 않았던 결과물을 가르는 지점을 말로 옮기는 쪽이 더 빠르고 실제 데이터에 기반합니다.

점수표를 통과한 글은 바로 발행해도 되나요?

아닙니다. 점수표는 형식과 구조를 걸러내지만 논리 비약이나 신뢰가 떨어지는 표현까지는 걸러내지 못합니다. 통과선을 넘긴 글도 사람이 다시 읽어 내용과 표현을 확인하는 검수 단계를 거쳐야 하며, 채점과 검수는 서로 다른 일을 합니다.