AI가 만든 업무 요약을 확인할 때 제가 더 신경 쓰는 것은 계산 자체보다, 계산한 값과 기록에 어떤 업무 의미를 붙였는가입니다. ‘예정’이 ‘기한’이 되거나 ‘기록 없음’이 ‘미실행’이 되면, 숫자가 그대로여도 보고서가 전하는 사실은 달라집니다.
이 글은 같은 가상 브리핑 자료를 ChatGPT·Claude·Gemini에 보낸 결과를 바탕으로, 요약이 원문의 상태를 바꾸지 않았는지 읽는 방법을 정리합니다. 어느 서비스가 더 낫다는 순위가 아니라, 제출 전에 무엇을 원문과 맞춰 볼지가 중심입니다.

1. 업무 요약에서 원문의 상태를 확인하는 네 가지 기준
요약 문장을 받으면 네 가지로 나눠 읽어 보세요. 누가 무엇을 하는지, 그 기록이 언제를 기준으로 한 것인지, 그 상태를 뒷받침하는 원문 근거가 있는지, 그리고 아직 답이 없어 확인해야 할 질문이 무엇인지입니다.
이렇게 나누면 ‘완료’라는 말이 어디서 왔는지 따라갈 수 있습니다. 원문에 완료라고 적혀 있는지, 다른 기록에서 짐작한 것인지, 기준 시점 이후의 일까지 단정한 것인지가 드러납니다. 이번 실습 자료도 사례 A는 10월 9일, 사례 B는 10월 14일을 기준으로 만든 가상 기록입니다.
2. ‘기록 없음’과 ‘미실행’은 다른 상태입니다
사례 B의 B06에는 발주 승인 검토는 진행 중이고, 실제 발주는 미실행이라고 적혀 있습니다. 이때 ‘미실행’은 원문이 직접 말해 주는 사실이므로 그대로 옮겨도 됩니다.
B12는 다릅니다. 원문에는 지급 예정일을 발주 승인 후 정한다는 조건과, 지급일 및 지급 완료 기록이 없다는 내용이 있습니다. B06의 발주가 아직 실행되지 않았다는 점과 이어 읽으면 지급 전이라고 짐작할 수는 있지만, 원문이 지급 상태를 직접 적은 것은 아닙니다. 그래서 상태는 ‘지급 완료 여부 미확인’으로 두고 담당자에게 확인해야 합니다.
Gemini 4 Argon 보충시험의 첫 결과는 B12의 내용 칸에 기록이 없다고 적고도, 상태 칸에는 ‘미정 / 미실행’이라고 적었습니다. 이번 실습에서 실제로 확인된 상태 판정 오류입니다. 이후 수정 요청으로 ‘지급 완료 여부 미확인’으로 고쳐졌습니다.
3. 예정과 기한, 초안과 공개, 조건부 일정
사례 A의 A02에는 이미 보낸 12건과 별도로 3건이 10월 12일 발송 예정이라고 적혀 있습니다. 4 Argon 보충시험의 기록표는 이를 ‘10월 12일 기한’으로 표현했습니다. 날짜와 건수는 같아도 예정이 마감처럼 읽히면 일정 판단이 달라집니다. 이 표현은 후속 요청에서 ‘발송 예정’으로 복원됐습니다.
원문 자체에서 조심해 읽어야 할 항목도 있습니다. B08은 홍보 초안 작성이 끝났다는 뜻이지 공개까지 끝났다는 뜻이 아닙니다. A11의 10월 20일 출하는 12일까지 서명이 끝나야 성립하는 조건부 일정이고, 서명 여부는 원문에서 확인되지 않습니다. 이 둘은 AI가 틀린 사례가 아니라, 요약하면서 ‘완료’나 ‘확정’으로 줄이기 쉬운 원문의 확인 지점입니다.
| 근거·구분 | 가상 원문 | 해석할 때 지킬 경계 | 확인할 것·실습 관찰 |
|---|---|---|---|
| B06 · 원문 확인 기준 | 견적서 수령 완료 / 발주 승인 검토 진행 중 / 실제 발주 미실행 | 수령·승인·발주는 서로 다른 행동이다. ‘미실행’은 발주에 명시된 상태다. | 승인 검토와 실제 발주를 각각 기록한다. AI 오류가 관찰됐다는 사례가 아니다. |
| B12 · 실제 보충시험 오류 | 지급 예정일은 발주 승인 후 정함 / 지급일 및 지급 완료 기록 없음 | 기록이 없다는 사실만으로 실제 지급이 없었다고 정할 수 없다. | 4 Argon 최초 상태 ‘미정 / 미실행’ → 수정본 ‘미정 / 지급 완료 여부 미확인’. 지급 근거는 별도 확인한다. |
| A02 · 실제 보충시험 표현 변화 | 10월 12일 발송 예정 3건. 완료 12건에 포함하지 않음 | 예정일을 ‘기한’으로 바꾸면 의무적 마감으로 읽힐 수 있다. | 기록표의 ‘기한’을 후속 요청으로 ‘발송 예정’으로 복원했다. 건수·완료분 제외 조건 유지. |
| B08 · 원문 확인 기준 | 홍보 페이지 초안 작성 완료 / 미공개 | 완료된 것은 초안 작성이다. 공개 완료까지 뜻하지 않는다. | 무엇이 완료됐는지 목적어를 남긴다. AI 오류가 관찰됐다는 사례가 아니다. |
| A11 · 원문 확인 기준 | 10월 20일 출하는 10월 12일까지 서명 완료 시 가능 / 서명 완료 미확인 | 조건이 붙은 가능 일정을 확정 일정으로 쓰지 않는다. | 서명 완료 여부와 조건 충족을 확인한다. AI 오류가 관찰됐다는 사례가 아니다. |
4. 근거 ID가 있어도 승인 여부는 따로 묻습니다
근거 ID가 문장 끝에 붙어 있으면 확인된 내용처럼 보입니다. 하지만 ID가 있다는 것과 그 원문이 문장의 상태까지 뒷받침한다는 것은 다릅니다. 4 Argon 결과는 24개 ID를 모두 적었지만, B12처럼 상태가 원문과 어긋난 칸이 있었습니다.
확인 질문도 마찬가지입니다. 4 Argon의 첫 결과는 A08에서 법무 검토가 언제 끝나는지는 물었지만 승인이 끝났는지는 직접 묻지 않았습니다. B05에서는 운송비를 넣으면 예산을 넘는지는 물었지만 운송비 금액은 묻지 않았습니다. 그래서 두 질문을 ‘부분 충족’으로 보고 보완을 요청했습니다.
질문이 추가됐다고 승인이나 금액이 정해진 것은 아닙니다. 질문은 다음에 할 확인 행동이고, 답을 받기 전까지 해당 항목은 미확인으로 남겨야 합니다.
5. 같은 자료로 실제 비교한 범위
실습은 편집 과정에서 2026년 10월 16일에 진행했습니다. 실제 업체 자료 대신 가상 텍스트 사례 두 개를 만들고, 사례마다 12개씩 모두 24개 근거 항목을 붙여 세 서비스에 같은 요청을 한 번씩 보냈습니다.
ChatGPT와 Claude는 첫 응답에서 24개 항목의 내용과 조건을 모두 보존했고, 앞에서 본 원문 확인 지점도 완료나 확정으로 바꾸지 않았습니다. 두 결과 사이에서 어느 쪽이 더 정확하다고 순위를 매길 만한 차이는 찾지 못했습니다.
Gemini 3.1 Pro의 첫 응답은 요청을 수행할 수 없다는 답변이어서 내용을 평가할 수 없었고, 이를 오답이나 0점으로 바꾸지 않았습니다. 앞에서 다룬 B12와 A02 사례는 모델을 4 Argon으로 바꿔 따로 진행한 보충시험의 결과입니다.
| 서비스·당시 모델 | 받은 결과 | 이 결과로 말할 수 있는 범위 |
|---|---|---|
| ChatGPT · GPT-6 Instant Chat | 요약·기록표·확인 질문 수신, 24/24 근거 항목 보존 | 검수 범위에서 핵심 누락·근거 없는 확정은 찾지 못함. Claude보다 우수하다는 뜻 아님 |
| Claude · Opus 5.5 중간·수동 | 요약·기록표·확인 질문 수신, 24/24 근거 항목 보존 | 검수 범위에서 핵심 누락·근거 없는 확정은 찾지 못함. ChatGPT보다 우수하다는 뜻 아님 |
| Gemini · 3.1 Pro | 첫 응답에서 요청 미수행 | 내용 평가 불가. 0점·24개 오답으로 환산하지 않음 |
6. 수정 후 확인할 것과 이번 결과의 한계
수정을 요청했다면 고친 칸만 보지 말고 나머지 내용이 그대로인지도 맞춰 보세요. 4 Argon 수정본에서는 요청한 칸 외의 기록표 내용과 근거 ID가 유지됐습니다. 다만 최초 응답과 구체적인 수정 지시를 함께 준 도움받은 수정이라, 독립적인 성능 평가로 쓰지 않습니다.
숫자도 같은 관점으로 봅니다. 사례 B에서 세 견적을 더한 값은 270만원이고 전날 표지에는 260만원이 적혀 있습니다. 이 10만원 차이는 원문 기록 사이의 차이이며, 이번 응답에서 관찰된 계산 오류는 아닙니다. 표지 금액이 나온 경위와 어느 기록이 최종 승인본인지는 원문만으로 정할 수 없습니다. 예산 300만원에서 270만원을 뺀 30만원도 운송비와 부가세를 반영하기 전의 차액이므로, 최종 가용 예산으로 확정할 수 없습니다.
이번 결과는 작은 가상 텍스트 사례 두 개에서 관찰한 것입니다. 엑셀 수식이나 복잡한 계산, 긴 문서, 다른 계정·모델, 반복 실험은 시험하지 않았습니다. 서비스 전반의 우열이나 현재 제품 기능을 뜻하지도 않습니다.
Claude로 실제 보고서를 만드는 순서가 필요하면 업무 메모를 주간업무보고로 정리하는 방법을 이어서 볼 수 있습니다. ChatGPT에 업무와 결과 검토 기준을 전달하려면 첫 보고서 업무를 맡기고 결과를 확인하는 방법을 참고하세요. 두 글은 보고서를 만드는 순서이고, 이 글은 받은 결과를 제출 전에 검토하는 기준입니다.
검토 원칙의 공식 근거로, Anthropic은 그럴듯한 답변도 잘못될 수 있으므로 점검하라고 안내하며, Gemini 공식 도움말도 응답을 다시 확인하도록 안내합니다. 이 문서들은 이번 비교의 승패를 증명하는 자료가 아닙니다.
실행 조건·최초 응답·보충시험·미수신·수정 이력 전체 보기
기록 1. 실제 사용 경험에서 질문을 정했습니다
비교할 질문은 평소 쓰는 방식에서 출발했습니다. 저는 업체 브리핑용 PPT를 간추릴 때는 Claude를, 이미지를 만들 때는 Gemini를, 종합적인 검토와 판단에는 ChatGPT를 참고해 왔습니다. 최근 이미지 작업에는 ChatGPT를 쓰고 있습니다. ‘Claude가 글쓰기에 맞는다’는 것도 제 개인적인 평가일 뿐 이번 실습으로 확인한 내용은 아닙니다. 그래서 이 글에서는 글쓰기·이미지·판단을 한 점수로 묶어 우승 서비스를 고르지 않습니다.
실제 업체 자료 대신 편집자가 새로 만든 가상 브리핑 두 사례, 사례당 12개 근거 항목을 사용했습니다. A는 제안·계약 진행, B는 전시 준비입니다. 자료의 가상 기준일은 각각 10월9일과 14일이고, 실제 서비스 실습일은 2026년10월16일입니다. PPT 파일 읽기나 슬라이드 제작을 시험한 것은 아닙니다.
기록 2. 같은 요청문과 별도 판정표를 준비했습니다
두 사례를 하나의 요청에 넣고, 서비스마다 새 대화에서 첫 요청을 한 번씩 실행했습니다. Gemini 3.1 Pro의 동일 요청 재시도와 4 Argon의 새 대화 보충시험은 뒤에서 별도로 설명합니다. 원문에는 A01~A12, B01~B12를 붙였고, 정답 기준표는 결과를 받기 전 별도로 저장해 서비스에는 보내지 않았습니다. 두 자료 사례를 검토했지만 여러 번 반복한 성능평가나 독립 재현 시험은 아닙니다.
외부 검색·연결 앱·이전 대화의 정보를 사용하지 말고 이 자료만 검토하세요.
각 사례의 핵심 요약은 5문장 이내로 작성하세요.
기록표: 항목 / 확인된 내용 / 상태 / 원문 근거 ID.
숫자·분모·단위·포함/제외·조건·담당자·기한을 보존하세요.
결정 전 확인할 질문에 근거 ID를 붙이세요.
계산값은 원문 값과 구분하고, 상충 기록의 최종본을 임의로 정하지 마세요.위는 실제 공통 요청의 발췌입니다. 전체 요청문과 가상 자료는 내부 검토 기록으로 보관했습니다. ChatGPT에는 채팅 본문으로 표시됐고, Claude는 같은 붙여넣기를 ‘붙여넣은 텍스트.txt’로 자동 표시했습니다. 입력 내용은 같게 제공했지만 서비스의 입력 표시 방식까지 같다고 설명하지 않습니다.
| 서비스 | 유료 플랜 표시 | 모델·모드 표시 | 실행 상태 |
|---|---|---|---|
| ChatGPT | Pro | GPT-6 · Instant · Chat | 첫 응답 완료 |
| Claude | Pro | Opus 5.5 · 중간 · 수동 | 첫 응답 완료 |
| Gemini | Google AI Pro | 3.1 Pro · Pro 모드 | 첫 응답은 요청 미수행 |
| Gemini 별도 보충시험 | Google AI Pro | 4 Argon · Argon 모드 | 분석 결과 수신 · 모델 변경 조건 |
Gemini는 처음 열린 다른 계정에서 유료 구독을 확인하지 못했지만, 작성자가 유료 이용 계정으로 전환한 뒤 Google One의 현재 요금제 Google AI Pro와 모델 선택기의 3.1 Pro를 확인하고 실행했습니다. 결제·플랜·모델은 변경하지 않았습니다. 세 서비스의 모델과 추론 모드는 같지 않습니다.
계정의 개인화·메모리 설정을 바꾸지 않았습니다. 요청에서 원문만 쓰도록 제한했지만 계정별 영향이 완전히 제거된 통제 실험이라고 주장하지 않습니다. 응답의 화면 표기 이상으로 숨은 모델 버전이나 내부 처리를 추정하지 않았습니다.
기록 3. 요약에서 줄인 내용과 실제 누락을 나눴습니다
요약은 사례별 5문장 이내로 요청했으므로 모든 사실을 요약에 넣는 것이 기준은 아닙니다. 요약·기록표·확인 질문 전체에서 원문의 의미와 조건이 보존되는지를 항목별로 봤습니다. 근거 ID가 적혀 있는 것과 그 ID의 내용이 맞는 것도 별도로 확인했습니다.
| 기준 | ChatGPT | Claude | Gemini |
|---|---|---|---|
| 원문 근거 항목 내용·조건 보존 | 24/24 확인 | 24/24 확인 | 요청 미수행 · 평가 불가 |
| 각 항목의 근거 ID 확인 | 24/24 | 24/24 | 요청 미수행 · 평가 불가 |
| 없는 사실을 확정한 사례 | 검수 범위 0건 | 검수 범위 0건 | 답변 내용 평가 불가 |
| 진행·예정·미확인을 완료로 왜곡 | 검수 범위 0건 | 검수 범위 0건 | 답변 내용 평가 불가 |
| 사전에 정한 확인 질문 범주 | A 6/6 · B 6/6 | A 6/6 · B 6/6 | 답변 내용 평가 불가 |
Gemini의 첫 응답은 “저는 언어 모델일 뿐이라 그것에 필요한 정보나 능력이 없어서 도와드릴 수가 없습니다.”였습니다. 분석표나 확인 질문이 없어 내용 정확도를 평가할 수 없었습니다. 이를 24개 모두 틀렸다는 점수로 바꾸지 않았습니다. 왜 이 응답이 나왔는지는 확인하지 못했으며, 일반적인 Gemini의 능력 제한으로 단정하지 않습니다.
최초 응답을 보존한 뒤 요청문·모델을 바꾸지 않고 화면의 ‘다시 시도’를 한 번 실행했습니다. 재시도 중 대화 화면이 일시적으로 비어 저장 대화를 다시 열고 새로고침했고, 재열람에서도 같은 미수행 문구가 표시됐습니다. 추가 분석 결과는 확보하지 못했습니다. 이 후속 관찰은 첫 응답 비교와 분리하며, 두 번의 독립 실험이나 일반적인 실패율로 계산하지 않습니다.
24개는 원문의 근거 항목 수이고, 질문 12개 범주는 편집자의 검수 기준입니다. 서비스가 실제 쓴 질문 수나 공인 정확도 점수가 아닙니다. 응답마다 추가로 던진 질문도 있습니다. 확인한 두 결과에서 핵심 누락이나 근거 없는 확정은 찾지 못했으며, 두 결과를 두고 어느 모델이 더 정확하다고 서열화할 차이는 확인하지 못했습니다.
기록 4. 270만원을 계산해도 최종 견적은 정할 수 없습니다
| 근거 | 원문·별도 계산 기준 | ChatGPT 실제 결과 | Claude 실제 결과 |
|---|---|---|---|
| A02~A04 | 발송 완료12·회신7·계약3, 발송 예정3 제외 | 수치·분모·미확정 회신 보존 | 수치·분모·예정분 제외 보존 |
| A05~A06 | 견적 공급가240만원, 부가세·미정 출장비 제외, 입금/매출 아님 | 견적액과 입금·매출 구분 | 견적액과 입금·매출 구분 |
| A07·A11 | 시연15일/16일 충돌, 출하20일은12일까지 서명 조건 | 날짜 충돌·서명 미확인 유지 | 날짜 충돌·조건부 일정 유지 |
| B03~B05 | 120+90+60=270만원, 표지260과10차이. 최종본·운송비 미확인 | 270을 재계산값으로 구분, 최종본 보류 | 270을 계산값으로 구분, 최종본 보류 |
| B02·B03·B05 | 300−270=30만원은 공급가 단순차, 최종 여유예산 아님 | 부가세·운송비 미반영 한계 명시 | 270기준30·260기준40을 참고값으로 병기 |
| B06·B08·B12 | 견적 수령완료/발주 검토중·미실행/홍보초안·미공개/지급일 미정 | 각 상태를 별도 기록 | 각 상태를 별도 기록 |
두 응답 모두 견적 세 항목을 더한 270만원과 전날 메모의 260만원을 함께 남겼습니다. 계산이 맞는 것과 어느 금액이 최종 승인본인지 아는 것은 다릅니다. 운송비가 미정이고 부가세도 빠져 있으므로 30만원을 실제로 더 쓸 수 있는 돈이라고 정하면 안 됩니다.
관찰된 표현 차이도 있습니다. ChatGPT는 발송 대비 계약 확정률 25%와 회신 대비 약42.86%처럼 분모를 나눠 보여줬습니다. Claude는 270만원 기준 차액30만원과 표지260만원 기준 차액40만원을 나란히 제시했습니다. 둘 다 계산의 전제를 적었습니다. 이런 설명 방식은 독자의 검토 취향과 연결할 수 있지만, 시간 절약이나 전반적 우수성으로 바로 환산하지 않았습니다.
기록 5. 확인 질문은 답변이 아니라 다음 행동입니다
시연일 확정, 출장비, 법무 승인, 도면 승인 담당자, 서명과 출하 조건, 다음 브리핑 날짜가 사례A의 필수 확인 범주였습니다. 사례B는 견적 충돌·최종본, 운송비, 발주 승인/실행, 행사일, 운송 담당/기한, 지급 일정/상태였습니다. 두 응답은 이 범주를 모두 질문으로 남겼습니다. 원문에 없는 담당자나 날짜를 질문하는 것은 그 값을 사실로 만들어 채우는 것과 다릅니다.
예를 들어 Claude의 실제 질문은 “법무 검토 승인은 언제, 누가 완료하나요?”(A08), ChatGPT의 실제 질문은 “법무 검토 완료 및 승인 여부는?”(A08)였습니다. 앞 문장은 다음 일정·주체를 묻고, 뒤 문장은 상태를 확인합니다. 어느 쪽이든 답을 받기 전에는 승인 완료로 기록하면 안 됩니다.
보충시험: 4 Argon은 답했지만 상태와 질문을 다시 확인해야 했습니다
작성자 요청으로 Gemini의 모델을 3.1 Pro에서 4 Argon으로 바꾸고 새 대화에 같은 가상 자료·같은 요청문을 보냈습니다. 정답표나 이전 응답은 보내지 않았습니다. 보충시험의 전송 원문도 공통 요청과 공백 차이를 제외하면 같았습니다. 이번에는 두 사례의 요약·기록표·확인 질문·계산값이 생성됐습니다. 최초 3.1 Pro의 결과를 성공으로 바꿔 기록하지 않으며, 모델이 바뀐 이 결과를 첫 응답 비교표에 섞지 않았습니다.
| 기준 | 확인한 결과 | 원문 근거 |
|---|---|---|
| 근거 항목·ID | 24개 ID와 해당 정보가 기록됨. 상태까지 온전히 일치한 것은 23개이며 B12는 주의 필요 | A01~A12 · B01~B12 |
| 상태 왜곡 | 지급 완료 기록이 없음을 ‘미실행’으로 적은 상태 판정 1건 | B12 |
| 확인 질문 범주 | A 5개 충분·1개 부분, B 5개 충분·1개 부분. 부분은 누락과 구분 | A08 · B05 |
| 계산과 상충 기록 | 270만원/260만원·차이10만원, 단순 차액30만원/40만원을 구분. 평균견적80만원은 계산값·개별금액 아님을 명시 | B02~B05 · A04~A05 |
B12의 실제 기록표는 내용 칸에 “현재 지급일 및 지급 완료 기록 없음”을 남기면서 상태 칸에는 “미정 / 미실행”이라고 적었습니다. 원문이 확인해 주는 것은 기록 부재입니다. 이 상태를 ‘지급 완료 여부 미확인’으로 읽어야 하며, 원본 응답은 고치지 않고 검수 의견을 따로 남겼습니다. B06의 실제 발주 ‘미실행’과 B12의 지급 ‘기록 없음’도 구분해야 합니다.
질문에서는 A08의 법무 검토 완료 예정 시점을 물었지만 승인 완료 여부를 직접 묻지는 않았습니다. B05도 운송비를 포함하면 예산을 초과하는지 물었으나, 아직 모르는 운송비 금액을 직접 확인하는 질문은 부족했습니다. 각각 관련 질문이 있으므로 완전히 빠졌다고 하지 않고 ‘부분’으로 분류했습니다. “법무 승인 완료 기록이 있나요?”와 “별도 운송비는 얼마이며 견적에 포함됐나요?”는 편집자가 제안한 보완 질문이며, 최초 검수 당시에는 서비스에 전송하지 않은 편집자 보완 예시였습니다. 이후 이 세 부분의 수정을 실제로 추가 요청했으며, 아래 접힌 기록에서 결과 확보 여부를 구분합니다.
또 A02의 ‘10월12일 발송 예정’을 기록표에서 ‘10월12일 기한’이라고 표현한 부분은 예정일을 확정 마감처럼 읽지 않도록 주의해야 합니다. 문장과 상태의 이런 차이는 전체 ID가 빠짐없이 있어도 남을 수 있습니다. 이 작은 보충시험만으로 Gemini의 모델별 일반 성능이나 어느 서비스의 우위를 결론 내리지 않습니다.
수정 요청·미수신·A02 표현을 바로잡은 과정 보기
추가 수정 실습: 새 대화에서 상태 한 칸과 질문 두 개를 보완했습니다
먼저 같은 4 Argon 대화에 추가 요청했지만, 전체 수정본 요청 두 차례와 세 변경 부분만 요청한 한 차례 모두 생성 표시 뒤 요청이 사라져 수정 응답을 확보하지 못했습니다. 이 경과와 당시의 미완료 판정은 별도 기록으로 남겼습니다. 원인은 확인되지 않았습니다.
이후 작성자가 요청한 새 4 Argon 대화에 기존 가상 원문과 최초 응답 본문을 함께 제공하고, B12 상태 한 칸과 확인 질문 두 개만 수정하도록 요청했습니다. 정답표·다른 서비스 응답은 보내지 않았습니다. 이번에는 전체 수정 응답을 받았습니다. 원문만 제공한 최초 시험과 달리 최초 응답과 구체적인 수정 지시를 함께 준 도움을 받은 수정 실습이며, 독립적인 첫 응답 성능이나 재현 성공률로 계산하지 않습니다.
| 대상 | 최초 응답 | 수정 결과 |
|---|---|---|
| B12 상태 | 미정 / 미실행 | 미정 / 지급 완료 여부 미확인 |
| A08 확인 질문 | 법무 검토 완료 예정 시점을 질문 · 승인 여부는 부분 충족 | 법무 승인 완료 여부와 승인 완료 기록 유무를 묻는 질문 1개 추가 |
| B05 확인 질문 | 운송비 포함 시 예산 초과 여부를 질문 · 금액 확인은 부분 충족 | 별도 운송비의 정확한 금액과 기존 세 견적 미포함 여부를 묻는 질문 1개 추가 |
새 응답의 실제 질문은 “10월 9일 12:00에 검토 요청한 계약서 법무 검토의 법무 승인 완료 여부와 승인 완료 기록이 존재합니까? [A08]”, “현재 미정인 별도 운송비의 정확한 금액은 얼마이며, 기존 세 견적(장비·인쇄·설치)에 포함되지 않는 것이 맞습니까? [B05]”였습니다. 승인이나 운송비 금액을 새로운 사실로 채우지 않았습니다. 운송비 미포함은 원문에 있는 조건을 재확인하는 질문입니다.
최초 응답과 수정 응답의 두 기록표를 셀별로 대조했습니다. 머리글을 포함한 108개 셀 중 B12 상태 한 칸만 바뀌고 나머지 107개 셀은 같았습니다. 기존 요약·확인 질문·계산 등 36개 문단도 공백 차이를 제외한 본문 문자열이 모두 남아 있었습니다. 24개 근거 ID, 숫자·분모·단위·조건·담당자·날짜·계산식을 보존했습니다. 화면의 제목·목록 모양은 달라졌으므로 문서 서식까지 동일하다는 뜻은 아닙니다.
이번 세 수정 대상에서는 핵심 오류를 찾지 못했고, 사전 질문 범주도 A 6개·B 6개를 확인할 수 있게 됐습니다. 최초 응답의 B12 오류 1건과 질문 두 범주의 부분 충족 기록은 그대로 유지합니다. 이 수정본에는 A02의 ‘발송 예정’을 ‘기한’으로 적은 표현이 남아 있어, 다음 후속 요청에서 따로 바로잡았습니다.
A02 후속 수정: 예정일을 확정 기한으로 바꾸지 않았는지 확인했습니다
직전 수정본의 A02 추가 발송 내용 한 칸만 “3건 (발송 완료 12건에 미포함, 10월 12일 기한)”에서 “3건 (발송 완료 12건에 미포함, 10월 12일 발송 예정)”으로 고치도록 같은 4 Argon 대화에 요청했고, 실제 전체 수정 응답을 받았습니다. 날짜나 건수를 바꾼 것이 아니라 원문의 예정 상태를 복원한 것입니다.
직전 수정본과 표 108개 셀을 비교한 결과 A02 내용 한 칸만 바뀌고 나머지 107개 셀은 동일했습니다. 기존 요약·질문·계산 36개 문단과 추가했던 A08·B05 질문 2개도 모두 보존됐습니다. B12의 ‘미정 / 지급 완료 여부 미확인’과 모든 근거 ID를 유지했습니다. 확인된 보완점은 이 후속 수정까지 처리됐으며, 최초 응답의 오류와 이전 미수신 이력은 소급해 바꾸지 않았습니다.
이 결과는 구체적인 지시를 준 수정 실습의 검증 범위에서 핵심 오류를 찾지 못했다는 뜻입니다. 가상 자료의 날짜·상태가 실제 업무 사실로 확인됐거나 서비스 전체의 정확성이 보장됐다는 뜻은 아닙니다.
기록 6. 현재 결과로 말할 수 있는 범위를 지킵니다
이번에 완료한 두 서비스의 작은 텍스트 사례에서는 내용 보존·추정·확인 질문 기준에서 결정적인 우열을 찾지 못했습니다. Gemini 3.1 Pro 첫 응답의 요청 미수행과 4 Argon 보충시험의 내용·질문 보완점은 별도의 관찰입니다. 두 서비스의 내용 정확성과 한 서비스의 요청 미수행을 합쳐 단일 순위나 정확도 점수를 만들지 않았습니다. 실제 PPT 입력, 디자인, 이미지 품질, 검색 조사, 긴 문서·다른 계정·다른 모델·반복 실험, 사용 시간이나 비용 절감은 시험하지 않았습니다. 유료 이용 자체가 정확성을 보장한다는 결론도 아닙니다.
자주 묻는 질문
표현이 자연스러우면 더 정확한가요?
이번에는 표현의 선호와 원문 사실 보존을 나눠 봤습니다. 읽기 편해도 승인·예정·금액 포함 범위가 달라졌다면 그대로 제출할 수 없습니다.
원문 ID가 있으면 검수가 끝난 건가요?
아닙니다. ID가 존재하는지와 그 근거가 문장의 내용·상태를 실제로 뒷받침하는지는 따로 대조해야 합니다.
유료로 쓰면 같은 요청에 항상 결과가 나오나요?
이번에는 모두 유료 이용 환경을 확인했지만 Gemini 3.1 Pro 첫 응답에서는 분석 결과를 받지 못했습니다. 4 Argon 보충시험은 결과를 받았지만 상태와 확인 질문의 보완점이 있었습니다. 구독 여부 확인과 실제 작업 완료 확인은 별개였습니다. 이 관찰을 모든 요청·모델에 일반화하지는 않습니다.






