Earticle

초록

영어

This study investigates the concept, architecture, and implementation strategies of AI-based document preprocessing technologies, which are becoming increasingly critical amid the rapid expansion of unstructured data. Emphasizing their role in enhancing the performance of advanced AI systems — particularly Large Language Model (LLM) and Retrieval-Augmented Generation (RAG) architectures — this study quantitatively analyzes how preprocessing affects response accuracy, processing efficiency, and contextual understanding. By exploring core technologies such as Optical Character Recognition (OCR), Natural Language Processing (NLP), data anonymization, and LLM-assisted document structuring, the study classifies use cases and verifies the practical effectiveness of these technologies across the finance and public sectors. The findings indicate that preprocessing is not merely a preparatory step but a critical component in optimizing end-to-end AI performance, highlighting its status as a foundational enabler for AI transformation strategies. Furthermore, the study underscores the importance of national-level support — including R&D investment, data standardization, privacy safeguards, and public-private-academic collaboration — to ensure the sustainable adoption and broad diffusion of these technologies.

한국어

본 연구는 비정형 데이터의 급증과 함께 중요성이 부각되고 있는 AI 기반 문서 전처리 기술의 개념과 구조, 적용 방안에 대해 분석하고, 다양한 사례를 통해 기술적 시사점과 정책적 대응 전략을 제시한다. 특히 거대 언어 모델 (LLM) 및 검색 강화 생성(RAG)과 같은 최신 AI 전환에서 전처리 기술이 응답 정확도, 처리 속도, 문맥 이해력에 미치는 영향을 정량적으로 분석하였다. 이를 위해 광학 문자 인식(OCR), 자연어 처리(NLP), 데이터 비식별화, LLM 기반 구조 화 기술 등 핵심 기술을 중심으로 사례를 분류하고, 금융 및 공공 분야의 실제 적용 사례를 통해 전처리 기술의 현장성과 실효성을 검증하였다. 분석 결과, 전처리 기술은 단순한 사전 작업을 넘어 전체 AI 전환의 성능 향상에 직접적으로 기여 하며, 향후 AI 전환 전략의 핵심 기반 기술로 기능할 수 있음을 확인하였다. 또한 R&D 투자, 데이터 표준화, 개인정보 보호, 산학연 협력 등 정책적 지원체계 마련이 병행될 때, 해당 기술의 지속 가능성과 산업적 확산 가능성이 극대화될 수 있음을 제안하였다.

목차

요약
Abstract
Ⅰ. 서론
Ⅱ. 비정형 데이터의 개요와 기술적 기반
1. 비정형 데이터 개념
2. AI 학습 데이터의 생성 주기
3. 주요 AI 처리 기술
Ⅲ. 비정형 데이터 처리 동향 및 사례
1. 해외 기술 현황
2. 국내 기술 현황
Ⅳ. 기술·정책 제안
1. 기술적 제안
2. 정책적 제안
Ⅴ. 결론
References

키워드

저자

• 안필용 [ Pil-Yong Ahn | 정회원, 온더라이브 부사장 ] 제1저자
• 이충형 [ Choong-Hyong Lee | 정회원, 남서울대학교 메타융합경영학과 부교수 ] 교신저자

참고문헌

발행기관

간행물

표지보기 관심저널 등록

• 간행물명

  한국인터넷방송통신학회 논문지 [The Journal of the Institute of Internet, Broadcasting and Communication]

• 간기

  격월간

• pISSN

  2289-0238

• eISSN

  2289-0246

• 수록기간

  2001~2025

• 십진분류

  KDC 326 DDC 380