성능과 정확도

ScanToExcel 내부 평가에서 6개 문서 유형의 테스트 문서 3000개에 대한 가중 F1은 98.0%였습니다.

평가일 2026-05-05

내 문서에 이 결과가 의미하는 것

이 결과는 명시된 날짜에 평가한 문서와 필드를 설명합니다. 개별 결과는 문서 품질, 구조, 내용에 따라 달라집니다. 내보낸 데이터는 사용 전에 확인해 주세요.

문서 유형, 테스트 문서 수, 필드 단위 F1, 평가 필드 전체 일치
문서 유형	테스트 문서 수	필드 단위 F1	평가 필드 전체 일치
청구서	600	99.5%	96.2%
표 이미지	200	99.2%	95.9%
신용카드 명세서	500	98.8%	95.7%
은행 거래내역서	650	98.7%	95.2%
영수증	600	97.3%	93.9%
급여명세서	450	94.6%	92.1%

전체 테스트 문서 중 94.8%에서 평가 대상 필드가 모두 정답과 일치했습니다.

개발 중 별도 세트를 평가용으로 남겨 두었습니다. 표는 이 세트와 기본 세트의 F1 결과를 비교합니다. 차이만으로 그 원인을 판단할 수는 없습니다.

괄호 안은 표본 수입니다. 차이는 퍼센트포인트가 아닌 소수 단위 F1로 표시합니다.
문서 유형	기본 세트	보류 세트	F1 차이
청구서	99.5% (n=600)	97.8% (n=150)	−0.017
표 이미지	99.2% (n=200)	96.7% (n=50)	−0.025
신용카드 명세서	98.8% (n=500)	99.9% (n=130)	+0.011
은행 거래내역서	98.7% (n=650)	99.8% (n=160)	+0.011
영수증	97.3% (n=600)	98.6% (n=150)	+0.013
급여명세서	94.6% (n=450)	95.3% (n=110)	+0.007

단일 스레드 실행으로 문서를 하나씩 처리하며 업로드부터 출력 준비 완료까지 전체 시간을 측정했습니다. p50은 중앙값, p95는 95백분위수이며 최댓값이 아닙니다.

평가 세트는 공개 데이터셋과 샘플, 라이선스를 받거나 구매한 문서, 특수 사례용 합성 문서를 결합했습니다. 사용자 업로드는 평가 세트에 포함하지 않습니다.

사람이 확인한 기준 답안과 출력을 필드별로 비교합니다. 일치하는 필드, 잘못 반환된 값, 누락된 값이 보고된 점수에 반영됩니다.

아래는 평가에서 점수를 매긴 필드이며 모든 표준 출력에 포함되는 열 목록은 아닙니다.

청구서 (필드 16개): 발행일, 결제 기한, 통화, 판매자 정보, 고객 정보, 세부 항목, 소계, 세금, 세금 포함 여부, 세금 행, 항목별 세금 필드, 합계, 원천징수액.
표 이미지 (필드 5개): 머리글 행, 머리글 셀, 행 식별, 행 유형, 행 셀.
신용카드 명세서 (필드 20개): 카드 네트워크, 명의자, 명세 기간, 결제일, 최소 결제액, 신용 한도, 사용 가능 한도, 구매·결제·수수료·이자 요약, 기초·기말 잔액, 거래, 기장일, 거래 유형, 거래 금액, 통화.
은행 거래내역서 (필드 16개): 계좌 명의자, 계좌 통화, 명세 기간, 기초·기말 잔액, 지급 이자, 부과 수수료, 거래, 기장일, 거래 유형, 거래 금액, 누적 잔액, 입금 합계, 출금 합계.
영수증 (필드 11개): 날짜, 통화, 판매자, 세부 항목, 소계, 세금, 세금 행별 내역, 팁, 합계, 결제 정보.
급여명세서 (필드 40개): 직원, 고용주, 국가, 통화, 급여 기간, 기본 급여 단가와 단위, 연봉, 이번 기간 실수령액, 연누계 요약 합계(총급여, 세금, 순급여), 행별 급여·세금·공제·고용주 부담금(각각 시간, 단가, 이번 기간 금액, 연누계 포함).