Overview

본 문서는 멀티 LLM 기반 논문 분석 및 요약 워크플로우의 구조, 구성 모듈, 평가 방식, 실험 결과, 한계 및 개선 방안에 관해 설명합니다.

Workflow

Preprocessing

• PDF Parser가 논문 PDF를 입력받아 텍스트로 변환
• 변환된 텍스트에서 Section Extractor가 처리하여 주요 섹션을 추출
• 추출한 섹션을 Summarization, Analysis Team에게 전달

Summarization Team

• Aspect-based Summarizer
  • 추출된 섹션에서 문제의식(Challenge), 접근법(Approach), 결과(Outcome)에 대한 측면별 요약 생성
• Summary Evaluator
  • 측면별 요약을 평가하고, 기준 미달 시 다시 요약 요청 (Recall)
• Comprehensive Summarizer
  • 평가를 통과한 측면별 요약을 바탕으로 3단락 구조의 종합 요약 생성

Analysis Team

• Citation Sentence Extractor
  • 추출된 섹션에서 인용 포함 문장을 탐지 및 추출
• Citation Context Analyzer
  • 추출된 인용 문장의 맥락 분석 및 관련 문헌 제목 추출
• Proposal Generator
  • 인용 정보를 기반으로 연구 제안서 생성

Evaluation

• Report Evaluator
  • Summarization Team의 종합 요약과 Analysis Team의 연구 제안서로 구성한 최종 보고서에 대한 평가 수행

Modules