PDF 요약 기능이 실제로 날짜·금액·퍼센트·표와 여러 페이지에 흩어진 조건을 얼마나 잘 보존하는지 확인하기 위해 4페이지짜리 가상 업무 보고서를 직접 만들고 ChatGPT 웹에서 테스트했습니다.
이번 테스트 PDF에서는 첫 응답이 미리 확정한 기준값 21개를 모두 포함했고 중요한 누락이나 원문에 없는 사실 추가를 확인하지 못했습니다. 그러나 이 결과는 텍스트를 추출할 수 있는 짧은 PDF 한 건에 한정됩니다. 스캔 PDF, 복잡한 차트, 병합 셀, 수십 페이지 문서까지 정확하다는 뜻은 아닙니다.
실험 핵심
- ChatGPT 응답을 보기 전에 기준 답안과 핵심값을 먼저 잠갔습니다.
- 실제 회사·고객·직원 정보가 없는 가상 PDF를 사용했습니다.
- 원문·표·기준 답안과 첫 응답을 항목별로 비교했습니다.
- 첫 응답이 충분해 오류를 만들기 위한 후속 질문은 하지 않았습니다.
- 테스트 PDF 자체는 WordPress에 공개 업로드하지 않았습니다.
직접 만든 4페이지 PDF로 실제 테스트
테스트일은 2026년 9월 17일입니다. ChatGPT 웹의 새 대화에 test-report.pdf를 실제 첨부했습니다. PDF는 4페이지, 108,032바이트이며 모든 페이지에서 텍스트 추출이 가능했습니다. 보존된 원본 PDF의 SHA-256은 d449dac7c8c7ccdf579c7dae262c188c80a5595a74e62f7b162d678d1d602fe1입니다.
문서 제목은 ‘가상 프로젝트 오로라 운영 보고서’입니다. 내부 업무 포털의 조건부 제한 출시를 다루는 가상 보고서이며 다음처럼 핵심정보를 서로 다른 페이지에 나눴습니다.
- 1페이지: 보고 기간, 작성일, 목적, 담당 역할
- 2페이지: QA 검토·최종 보고 일정과 공급 자료 예외 조건
- 3페이지: 세 항목의 배정액·사용액·잔액 표와 집행률
- 4페이지: 시범 참여 결과, 중대 결함, 조건부 출시 결론
실제 개인정보는 쓰지 않았고 운영 책임자·QA 책임자·디자인 책임자 같은 가상 역할만 사용했습니다.
ChatGPT보다 먼저 확정한 정답 기준값
응답을 본 뒤 기준을 맞춰 쓰는 일을 막기 위해 ChatGPT 응답 생성 전에 사람 기준 요약과 검증 대상 21개를 파일로 확정했습니다. 주요 기준값은 다음과 같습니다.
| 검증 항목 | PDF 원문 기준값 | 위치 |
|---|---|---|
| 보고 기간·작성일 | 9월 1~15일·9월 16일 | 1페이지 |
| QA 검토 | 9월 18일 | 2페이지 |
| 최종 보고 | 9월 20일 오후 3시 | 2페이지 |
| 공급 자료 | 9월 19일 오전 도착 예정, 정오까지 미확인 시 교육자료 배포 보류 | 2페이지 |
| 예산 | 200만원 배정·173만원 사용·27만원 잔액·86.5% 집행 | 3페이지 |
| 시범 운영 | 40명 중 34명 완료·85% | 4페이지 |
| 중대 결함 | 3건 발견·2건 해결·1건 잔여 | 4페이지 |
| 최종 결론 | 결함 해결과 공급 자료 확인을 모두 만족하면 9월 23일 출시, 하나라도 미충족하면 9월 30일 연기 | 4페이지 |
실제 첫 프롬프트
이 PDF를 요약해줘.
핵심 결론, 중요한 숫자, 일정, 표에서 확인되는 내용을 구분해서 정리해줘.
PDF에 없는 값은 추정하지 말아줘.
프롬프트에는 정답을 암시하는 숫자를 넣지 않았습니다. 대신 결론·수치·일정·표를 구분하고 추정하지 말라는 출력 조건만 지정했습니다. 질문을 단계적으로 좁히는 방법은 ChatGPT 질문 잘하는 법 실험도 함께 참고할 수 있습니다.
실제 첫 응답에서 확인한 내용
ChatGPT는 9월 23일을 확정 출시일이 아니라 두 조건이 붙은 목표일로 정리했습니다. 남은 결함 1건을 9월 19일 정오까지 해결하고 외부 공급 자료 도착을 확인해야 하며, 하나라도 충족되지 않으면 9월 30일로 연기된다는 결론을 보존했습니다.
또한 보고 기간과 작성일, 시범 참여자 40명·완료자 34명·완료율 85%, 결함 3건·해결 2건·잔여 1건, 총예산 200만원·사용액 173만원·잔액 27만원·집행률 86.5%를 별도 표로 정리했습니다.
| 예산표 항목 | 배정액 | 사용액 | 잔액 | 담당 |
|---|---|---|---|---|
| UI 시제품 | 125만원 | 110만원 | 15만원 | 디자인 책임자 |
| 접근성 검토 | 45만원 | 42만원 | 3만원 | QA 책임자 |
| 교육자료 | 30만원 | 21만원 | 9만원 | 운영 책임자 |
| 합계 | 200만원 | 173만원 | 27만원 | 운영 책임자 |
일정도 QA 검토 9월 18일, 공급 자료 9월 19일 오전 도착 예정, 확인 기준과 결함 해결 기한 9월 19일 정오, 최종 보고 9월 20일 오후 3시, 조건부 출시 9월 23일, 연기일 9월 30일로 구분했습니다. 오전 도착이 ‘예정’일 뿐 확정 결과가 아니라는 주의와 정오까지 미확인 시 교육자료 배포를 보류한다는 예외도 포함했습니다.
원문과 첫 응답 비교 결과
| 검사 범위 | 결과 | 판정 |
|---|---|---|
| 핵심 결론 | 두 출시 조건과 연기 조건 보존 | 일치 |
| 날짜·시간 | 기준값 7개 포함 | 일치 |
| 금액·퍼센트 | 총액·세부 표·집행률·완료율 포함 | 일치 |
| 담당 역할 | 운영·QA·디자인 책임자 포함 | 일치 |
| 페이지 간 정보 | 2페이지 조건을 4페이지 결론과 연결 | 일치 |
| 중요 정보 누락 | 21개 검증 대상에서 확인되지 않음 | 없음 |
| 원문에 없는 사실 | 확인되지 않음 | 없음 |
응답은 UI 시제품이 사용액과 잔액이 가장 큰 항목이라고 덧붙였습니다. 이는 원문 표의 세 행을 직접 비교하면 확인되는 파생 결과이므로 임의 정보 생성으로 분류하지 않았습니다.
보존된 증거와 재현 한계
당시 사용한 원본 PDF, 응답 생성 전에 잠근 기준 파일, 실제 첫 응답 원문, 21개 항목 비교표가 현재도 보존돼 있습니다. 보존 파일을 다시 대조한 결과는 MATCH 21, PARTIAL 0, MISS 0, OUTSIDE_SOURCE 0이며, 검증 범위는 조건부 결론·날짜·시간·금액·퍼센트·담당 역할·표의 세부 값·페이지 간 조건 연결입니다.
다만 원본 PDF와 응답 로그는 이 공개 글에서 내려받을 수 없습니다. 따라서 외부 독자가 파일을 직접 다시 업로드해 같은 응답을 재현하거나 21개 판정을 원자료부터 완전히 독립 검증할 수는 없습니다. 이 글은 보존 증거를 재대조한 결과와 그 한계를 함께 공개하며, 다른 PDF나 반복 실행의 정확도로 일반화하지 않습니다.
과장하지 말아야 할 결론
이번 테스트 PDF에서는 핵심값이 모두 맞았습니다. 이것이 다른 PDF의 정확도를 보장하지는 않습니다. 이번 문서는 텍스트가 선명하고 표가 단순하며 4페이지로 짧았습니다.
후속 질문은 하지 않았습니다
첫 응답에서 기준값 누락이나 모호한 조건이 발견되면 같은 대화에서 원문 재대조와 페이지 표시를 요청할 계획이었습니다. 그러나 21개 검증 대상이 모두 포함됐고 추가 사실도 확인되지 않아 억지로 오류를 만들거나 답을 바꾸기 위한 후속 질문은 하지 않았습니다.
실제 문서에서 빠진 값이 있다면 “방금 요약에서 빠진 중요한 숫자나 조건이 있는지 PDF 원문과 다시 대조하고 각 항목의 페이지를 적어 줘”처럼 한 번 더 요청한 뒤, 첫 답변과 수정 답변을 따로 비교하는 편이 좋습니다.
PDF를 실제로 올리고 요약하는 순서
- 개인정보와 기밀을 제거한 사본을 준비합니다.
- 새 대화를 열고 입력창의 첨부 버튼에서 PDF를 선택합니다.
- 파일 카드와 이름이 표시될 때까지 기다립니다.
- 문서 목적, 필요한 항목, 출력 형식, 추정 금지 조건을 함께 입력합니다.
- 첫 응답을 받으면 숫자·날짜·고유명사·표·결론을 원문에서 직접 대조합니다.
- 누락이 있을 때만 페이지와 근거를 요구하는 후속 질문을 합니다.
처음 사용하는 경우에는 기본 화면과 조작부터 확인해도 좋습니다.
사람이 반드시 다시 확인할 항목
- 조건부 표현: 확정, 예정, 가정, 예외를 서로 바꾸지 않았는지
- 날짜와 시간: 오전·정오·오후, 마감일과 시행일을 구분했는지
- 금액과 단위: 원·만원·퍼센트와 합계가 맞는지
- 표: 열과 행이 어긋나거나 합계·잔액이 잘못 연결되지 않았는지
- 담당자와 고유명사: 역할이나 이름을 서로 바꾸지 않았는지
- 페이지 간 연결: 앞쪽의 예외 조건이 뒤쪽 결론에 반영됐는지
- 빠진 정보: 요약이 매끄럽더라도 중요한 단서나 반대 조건이 생략되지 않았는지
스캔 PDF와 긴 문서의 제한
이번 실험에서는 텍스트 기반 PDF만 검증했고 스캔 PDF OCR은 테스트하지 않았습니다. OpenAI는 이미지 기반 표, 스캔 파일, 복잡한 시각 배치에서 정확한 값 추출이 안정적이지 않을 수 있다고 안내합니다.[4]
또한 업로드에 성공해도 문서가 너무 크거나 복잡하거나 이미지가 많으면 전체 분석이 불완전할 수 있습니다.[4] 긴 PDF라면 목차를 먼저 확인하고 장 또는 페이지 범위별로 나눈 뒤 마지막에 통합 요약을 요청하세요.
OpenAI 안내 기준으로 PDF 안의 이미지·그래프·도표까지 텍스트와 함께 읽는 Visual Retrieval은 현재 ChatGPT Enterprise 전용입니다.[3] 그 밖의 플랜과 문서 파일은 텍스트 기반 검색이므로 이미지 정보가 반영되지 않을 수 있습니다.[1]
현재 공식 지원 범위와 변동 가능한 제한
OpenAI 공식 도움말은 PDF를 지원되는 일반 문서 형식에 포함합니다.[2] 파일 업로드는 Free 및 유료 플랜에서 제공되지만 플랜별 사용량과 계정 설정의 영향을 받습니다.[1]
2026년 9월 17일 확인 당시 공식 FAQ는 파일당 512MB, 텍스트·문서 파일당 200만 토큰 상한을 안내합니다.[1] 이 수치와 업로드 횟수는 바뀔 수 있으므로 실제 사용 전 최신 FAQ와 내 화면의 안내를 다시 확인해야 합니다.
개인정보와 민감한 PDF 주의
주민등록번호, 계좌번호, 서명, 고객 명단, 의료정보, 비공개 계약 조건, 회사 내부 자료는 가능하면 올리지 않는 것이 안전합니다. 꼭 필요하면 이름과 식별값을 가리고 분석에 필요하지 않은 페이지를 제거한 사본을 사용하세요. 조직 문서는 회사의 보안 정책과 승인된 AI 사용 환경을 먼저 따라야 합니다.
이미지나 문서 내용을 검증하는 기본 원리는 실제 사진·OCR 분석 비교에서도 확인할 수 있습니다.
이번 실험의 결론
이번 4페이지 테스트 PDF에서는 ChatGPT 첫 응답이 핵심 결론, 날짜, 시간, 금액, 퍼센트, 담당 역할, 표 값, 페이지 사이의 예외 조건을 모두 보존했습니다. 중요한 누락과 원문에 없는 정보 추가도 확인되지 않았습니다.
하지만 신뢰할 수 있는 PDF 요약 방법의 핵심은 “잘 요약해 줘”라는 요청보다 응답 전에 기준값을 만들고, 결과를 원문과 다시 대조하는 과정입니다. 실제 업무에서는 조건부 문장, 숫자, 표, 각주, 개인정보를 사람이 마지막으로 확인해야 합니다.