매치메이커 6인은 정말 다르게 말하는가 — 코멘트 72건 문장 대조

글 · 칼라톤 운영팀 | 2026. 8. 24. | 수치 출처: 칼라톤 시즌 데이터베이스

칼라톤 AI 커플매칭의 심사대에는 여섯 명이 앉는다. 냉철한 관찰자, 낭만 시인, 심리 분석가, 직감의 달인, 트렌드 분석가, 공감 요정. 이름만 보면 여섯 가지 다른 눈으로 커플을 본다는 설계다. 한 사람은 데이터를 보고, 한 사람은 시를 쓰고, 한 사람은 무의식을 파고들 것 같다.

정말 그런가. 공개 시즌 리포트 6편에는 각 시즌의 코멘트 하이라이트가 12건씩, 도합 72건이 실려 있다. 총 1만 8,479자. 이걸 페르소나별로 갈라 길이·어휘·종결어미를 재 봤다. 결론부터 말하면, 여섯을 가르는 가장 크고 안정적인 차이는 관점이 아니라 분량이었다. 그리고 분량을 걷어내면 여섯은 놀랄 만큼 같은 말을 하고 있었다.

먼저, 이 72건이 어떻게 뽑혔는지

해석을 시작하기 전에 표본의 성격부터 못 박아야 한다. 리포트의 ‘매치메이커 코멘트 하이라이트’는 사람이 고른 명장면이 아니다. 리포트 생성기는 그 시즌에 매치메이커들이 남긴 코멘트를 전부 모은 뒤 각 코멘트에 딸린 궁합 점수 순으로 정렬해 상위 12건만 싣는다. 최종 선택을 인코딩한 대괄호 코멘트와 15자 미만은 제외된다.

그래서 페르소나별 등장 횟수부터가 균등하지 않다. 점수를 후하게 준 매치메이커일수록 상위 12칸을 많이 차지한다.

72칸 중 냉철한 관찰자가 32칸(44.4%)을 가져갔다. 여섯 시즌 전부에 이름을 올린 유일한 페르소나이기도 하다. 반대편 끝에는 낭만 시인이 단 1건(1.4%). 여섯 시즌 중 다섯 시즌에서 하이라이트에 한 번도 오르지 못했다. 이건 “낭만 시인이 말을 안 했다”는 뜻이 아니라 “낭만 시인이 매긴 점수가 시즌 상위 12위 안에 거의 들지 못했다”는 뜻이다. 이 글의 페르소나별 표본 크기는 그 점수 후함의 부산물이다.

결과 ① — 평균 길이가 3.5배 갈린다

72건을 페르소나별로 묶어 글자 수를 쟀다.

맨 위와 맨 아래가 3.5배 차이다. 냉철한 관찰자의 가장 긴 코멘트(243자)가 트렌드 분석가의 가장 짧은 코멘트(560자)의 절반도 안 된다. 두 페르소나의 길이 분포는 아예 겹치지 않는다.

이게 한국어 표기 방식이 만든 착시일 가능성을 먼저 지웠다. 같은 리포트의 영문판에서 같은 순서의 코멘트를 뽑아 단어 수를 세니 순위가 그대로다 — 60.7단어 대 208.7단어. 한국어 글자 수를 영문 단어 수로 나눈 값도 페르소나별로 2.80~2.88 사이에 몰려 있어, 여섯 중 누구도 유독 압축적이거나 늘어지는 문체를 쓰는 게 아니다. 단순히 더 많이 쓴다.

길이가 시즌마다 튀는 것도 아니다. 냉철한 관찰자의 시즌별 평균은 138.0 · 153.8 · 174.0 · 174.0 · 186.0 · 190.5자로 여섯 시즌 내내 200자 아래에 붙어 있다. 특정 시즌의 사고가 아니라 여섯 시즌을 관통하는 습관이다.

결과 ② — 같은 장면 앞에 세워 놓고 재면 더 선명하다

페르소나마다 맡은 커플이 다르면 길이 차이는 소재 탓일 수 있다. 다행히 72건 안에는 같은 시즌·같은 라운드·같은 커플에 대해 여러 매치메이커가 남긴 코멘트가 나란히 실린 경우가 있다. 그런 그룹이 16개, 코멘트 53건이다. 완벽한 통제 조건이다 — 같은 사진, 같은 라운드, 같은 두 사람.

냉철한 관찰자는 자기가 낀 15개 그룹 중 14개에서 가장 짧은 코멘트였다. 1:1로 맞붙여도 마찬가지다. 같은 장면에서 다른 페르소나와 겹친 35번의 대결 중 33번(94.3%)에서 상대가 더 길게 썼다. 직감의 달인·트렌드 분석가와의 대결은 14전 14패다.

가장 붐빈 장면은 season-4 아홉 번째 라운드, 장태산↔최서아 커플이었다. 다섯 페르소나가 같은 골목길 데이트 사진을 두고 나란히 코멘트를 남겼다.

결과 ③ — 그런데 다섯은 거의 같은 말을 하고 있다

위 표의 첫 문장들을 다시 읽어 보면 이상한 점이 보인다. 길이는 158자에서 649자까지 네 배 넘게 벌어지는데, 문장을 이루는 재료가 겹친다. 다섯 코멘트 전문을 뜯어보면 이렇다.

한 장면의 우연이 아니다. 72건 전체에서 세 어절짜리 표현을 뽑아 세 명 이상의 페르소나가 공유한 것만 세니 59개가 나왔고, 참가자 이름과 성격 유형 표기를 뺀 순수 표현만 추려도 49개다. “설렘을 넘어선 깊은”, “의심의 여지 없는”, “다른 이성 참가자들과의”, “깊은 신뢰와 확고한”, “번의 만남을 통해”, “두 사람 모두” 같은 구절이 서로 다른 페르소나의 입에서 그대로 반복된다.

어휘 단위로 보면 더하다. 72건 중 ‘깊은’이 52건, ‘완벽한’이 43건, ‘보여줍니다’가 28건, ‘확고한’이 28건에 등장한다. 여섯 페르소나의 문장을 뒤섞어 놓고 누가 썼는지 맞히라면, 단서는 사실상 길이뿐이다.

결과 ④ — 그래도 남는 차이는 있다

분량 말고 페르소나별로 갈리는 지표를 찾아봤다. 표본이 작은 트렌드 분석가(3건)·낭만 시인(1건)은 참고치로만 읽어야 한다.

첫 줄이 이 글에서 가장 재미있는 숫자다. ‘냉철한 관찰자’의 코멘트 32건 중 31건에 ‘완벽’이라는 단어가 들어 있다. ‘완벽·최고·절대적·유일·영원·흔들림 없는·완성’ 같은 절대어를 모두 합치면 100자당 1.53회로, 여섯 중 가장 높다. 이름이 가장 냉정한 페르소나가 실제로는 가장 단정적인 어휘를 쓰는 셈이다. 짧다고 신중한 게 아니라, 짧기 때문에 문장마다 최상급이 박혀 있다.

대신 이 페르소나는 눈에 보이는 것을 적는다. 의상과 색을 짚은 비율이 46.9%로 가장 높고, 종결어미도 ‘보여줍니다’(14회) ‘증명합니다’(11회)에 몰려 있다. 문장 80개 중 25개(31.3%)가 관찰·증명형으로 끝난다. 반면 미래를 예측하는 종결(‘~것입니다’, ‘기대됩니다’)은 80문장 중 0건이다. 심리 분석가는 정반대로 48문장 중 6건(12.5%)이 전망형이고, ‘시점입니다’ ‘기대됩니다’로 문장을 닫는다.

트렌드 분석가는 세 건 모두 실제 호감도 점수를 인용했다. “태산은 서아에게 85점으로 타 여성들(28~68점) 대비 17점 이상 격차”처럼 숫자를 문장에 그대로 박아 넣는데, 그 습관이 길이의 상당 부분을 설명한다. 직감의 달인은 코멘트의 58.3%에 ‘다만 ~해야 한다’류의 과제를 붙여 여섯 중 가장 잔소리가 많다.

낭만 시인의 유일한 1건은 이름값을 하지 않는다. 544자 안에 “승우의 다른 여성 참가자 호감도(강다은 67, 임지유 17, 윤슬기 15)”라는 수치 나열이 들어 있다. 시적 은유보다 대차대조표에 가깝다. 물론 1건으로 페르소나를 판정할 수는 없다.

왜 길이만 갈렸을까 — 운영 코드가 주는 단서

이 패턴은 코드 쪽에서 어느 정도 설명된다. 매칭 자동화의 라운드 평가 프롬프트는 매치메이커에게 성격 유형·호감도 이력·직전 라운드 점수 같은 동일한 재료를 동일한 형식으로 밀어 넣고, 응답도 정해진 JSON 스키마로 받는다. 여섯이 받는 입력이 같으니 ‘동반자적 신뢰’, ‘공통 취향 레드’, ‘압도적 1순위’ 같은 재료가 그대로 여섯 개의 문장에 나타난다.

그런데 코멘트 필드에 대한 지시는 다르다. 첫 만남 궁합 분석에는 “300자 이내”라는 명시적 상한이, 여섯의 평가를 종합하는 합의 코멘트에는 “200자 이내”가 붙어 있다. 반면 하이라이트로 실리는 라운드별 매치메이커 코멘트에는 글자 수 제한이 없다. 지시문은 “간결한 분석(brief analysis)”이라고만 적고 있는데, 정작 바로 아래 응답 형식 예시에서 같은 필드를 “상세한 분석(detailed analysis)”이라고 부른다. 길이에 관해 서로 반대 방향을 가리키는 두 신호만 주어진 셈이다.

지시가 비어 있는 자리는 모델의 기본 습관이 채운다. 그래서 페르소나 설명이 바꾸지 못한 것 — 문장의 뼈대와 어휘 — 은 여섯이 공유하고, 지시가 없던 것 — 분량 — 에서 여섯이 갈렸다. 페르소나 프롬프트가 만든 차이보다 모델의 말버릇이 만든 차이가 더 컸다는 이야기다.

이를 뒷받침하는 관찰이 하나 더 있다. season-3에서만 여섯 중 셋의 모델이 다르게 돌아갔고, 그중 직감의 달인은 두 모델에 걸쳐 하이라이트를 남겼다. 같은 페르소나 설명을 받았는데도 구형 모델 3건의 평균은 440.7자, 신형 모델 9건의 평균은 311.7자다. 페르소나는 그대로인데 모델이 바뀌자 평균이 130자 가까이 움직였다.

한계 — 이 분석이 말할 수 없는 것

첫째, 표본은 공개 리포트에 실린 상위 12건씩, 총 72건이다. 여섯 시즌에서 실제로 생성된 코멘트는 라운드 10회 × 커플 조합 × 매치메이커 6인이므로 이 72건은 극히 일부다. 게다가 무작위 표본이 아니라 궁합 점수 상위 표본이라, 전부 6~9라운드의 고득점 커플에 쏠려 있다. 초반 라운드나 관계가 식은 커플에 대해 여섯이 어떻게 다르게 쓰는지는 이 자료로 알 수 없다.

둘째, 페르소나별 건수가 32건에서 1건까지 벌어진다. 트렌드 분석가(3건)와 낭만 시인(1건)의 평균값은 통계량이 아니라 사례로 읽어야 한다. 이 글이 유의성 검정을 하지 않은 이유이기도 하다. 다만 냉철한 관찰자의 ‘가장 짧다’는 결론만큼은 32건 전수와 동일 장면 15회 대결이라는 두 갈래로 확인돼, 표본 크기의 문제에서 비교적 자유롭다.

셋째, 페르소나 효과와 모델 효과를 분리할 수 없다. 여섯 페르소나에는 여섯 개의 서로 다른 모델이 1:1로 배정돼 있다. 냉철한 관찰자가 짧게 쓰는 것이 ‘냉철한 관찰자’라는 설정 때문인지, 그 자리에 앉은 모델의 기본 습성 때문인지는 같은 모델을 다른 페르소나에 앉혀 보기 전까지 가릴 수 없다. 위에 적은 직감의 달인 모델 교체 관측은 모델 쪽 기여가 있다는 정황이지, 페르소나 효과가 0이라는 증명은 아니다. 그 비교의 표본도 3건 대 9건이다.

넷째, 페르소나별 등장 횟수는 말이 많고 적음이 아니라 점수가 후하고 박함을 반영한다. 낭만 시인이 1건뿐인 것은 그 페르소나가 침묵했다는 뜻이 아니라, 매긴 점수가 시즌 상위 12위 안에 들지 못했다는 뜻이다. 매치메이커별 점수 분포 자체는 리포트에 실리지 않아 이 글에서 검증하지 못했다.

다섯째, ‘절대어 밀도’, ‘의상·색 묘사’, ‘과제·조언 언급’은 사전에 정한 단어 목록으로 센 지표다. 은유로 같은 뜻을 표현한 문장은 잡히지 않고, 다른 맥락에서 같은 단어가 쓰이면 잡힌다. 방향을 보는 지표이지 정밀 측정값이 아니다.

여섯째, 코드에서 인용한 프롬프트 조항은 저장소의 매칭 자동화 소스 기준이다. 이 소스의 코멘트 지시문은 영문 작성을 요구하는데 리포트에 실린 코멘트는 국문이 정본이라, 실제 배포본이 저장소 코드와 완전히 같다고 단정할 수는 없다. 이 절의 설명은 관측된 패턴과 코드가 맞아떨어지는 지점을 짚은 것이지, 인과의 증명이 아니다.

기록으로 남기는 이유

AI 여럿에게 서로 다른 페르소나를 입혀 한 화면에 세우는 것은 이제 흔한 연출이다. 칼라톤도 그렇게 하고 있다. 이번 대조가 보여 준 것은 그 연출이 어디까지 먹히는지에 대한 실측이다. 페르소나 설명은 여섯의 어휘와 논리 구조를 거의 바꾸지 못했다. 대신 아무도 지정하지 않은 분량이 여섯을 갈랐다.

운영자 입장에서 이건 고칠 거리다. 페르소나를 진짜로 구별되게 하고 싶다면 형용사를 더 붙이는 것보다, 각자가 반드시 짚어야 할 항목을 다르게 지정하는 편이 빠르다 — 한쪽은 사진에 보이는 것만, 한쪽은 숫자만, 한쪽은 다음 라운드의 예측만. 지금 여섯을 실제로 구별해 주는 유일한 축이 길이라면, 그건 설계가 아니라 방치의 결과에 가깝다.

보는 사람 입장에서는 실용적인 요령이 하나 생긴다. 리포트에서 코멘트를 읽을 때 가장 짧은 것 하나만 읽어도 정보 손실이 거의 없다. 나머지는 대개 같은 재료를 더 길게 늘여 놓은 것이다. 직접 확인해 볼 수도 있다. season-4 리포트의 하이라이트에서 장태산↔최서아 커플의 다섯 코멘트를 위에서 아래로 읽어 보면, 158자와 649자가 결국 같은 이야기를 하고 있다는 걸 알 수 있다.

집계 기준. 칼라톤 AI 커플매칭 공개 시즌 리포트 6편(season-3 ~ season-8, 국문판)의 ‘매치메이커 코멘트 하이라이트’ 섹션에 실린 72건(시즌당 12건)을 전수 파싱했다. 길이는 따옴표를 제외한 코멘트 본문의 문자 수(공백 포함)이며, 문장 수는 마침표 기준으로 나눈 뒤 3자 미만 조각을 제외한 값이다. 영문판 단어 수는 같은 리포트의 `-en` 판에서 같은 순서의 코멘트를 뽑아 공백 기준으로 센 값이다. ‘동일 장면 그룹’은 시즌·라운드·커플이 모두 같은 코멘트가 둘 이상 실린 경우로, 16개 그룹·53건이다. ‘절대어’는 완벽·최고·절대적·유일·영원·궁극·명실상부·더할 나위·흔들림 없·최종·완성 열한 개 표현의 출현 횟수를 코멘트 총 문자 수로 나눈 값이다. ‘의상·색 묘사’는 니트·가디건·드레스·셔츠·의상 등 의류 명사와 그레이·화이트·레드 등 색 표현, ‘과제·조언 언급’은 과제·다만·다져야·보완·루틴·해야, ‘숫자 점수 인용’은 ‘NN점’ 또는 괄호 안 이름-숫자 나열 패턴을 각각 1회 이상 포함한 코멘트 수다. 공유 표현은 세 어절 연속 문자열의 페르소나 단위 문서 빈도로 셌다. 하이라이트 선정 규칙(점수 상위 12건, 최종선택 인코딩 코멘트 및 15자 미만 제외)과 코멘트 필드의 글자 수 지시는 저장소의 리포트 생성기·매칭 자동화 소스에서 확인했다. 비율은 소수 첫째 자리에서 반올림했다.