VRD-IU — 문서 레이아웃 정보 추출

← AI Engineer

한눈에 보기

Research

복잡한 PDF를 영역별로 나누고 글자 정보와 좌표를 추출해 문서의 구조와 의미를 복원했습니다.

내 역할

연구·개발

기간

2024

문제와 목표

문서의 텍스트만 추출하면 표·도형·영역 관계가 사라지므로 위치 정보와 레이아웃을 함께 다뤄야 했습니다.


시스템 구조

주요 요청·처리·저장 경계를 공개 가능한 수준에서 정리했습니다.

  1. 페이지를 의미 영역으로 검출하고 영역별 텍스트·좌표를 추출
  2. 레이아웃 모델 결과를 후처리해 문서 순서와 누락을 보정

핵심 기여

  • YOLOv8·YOLOv10·RT-DETR·LayoutLMv3 조합 실험
  • 누락 영역과 좌표 순서 오류를 보정하는 후처리 개발
  • 대회 데이터셋 평가와 결과 분석

결과와 근거

  • IJCAI 2024 VRD-IU Track A·B 1위
  • 문서 정보 추출을 모델 성능만이 아닌 후처리·검증 구조로 확장

사용 기술

PythonPyTorchYOLOv8YOLOv10RT-DETRLayoutLMv3OCR