인공지능(AI) 기업 크라우드웍스가 자사의 AI 데이터 전처리 솔루션 '알피 널리지 컴파일러(Alpy Knowledge Compiler'에 적용된 핵심 기술인 '문서 복잡도 분석 기반 문서 자동화 처리 기술'에 관한 특허를 출원했다고 22일 밝혔다.
크라우드웍스는 검색증강생성(RAG) 기반의 AI 에이전트 개발에 필수적인 비정형 데이터 전처리 과정의 문제를 해결하고자 이번 기술을 개발했다.
이번에 출원한 기술은 처리할 문서의 복잡도를 정량적으로 분석해 클래스(Class)를 4단계로 분류한다. 구조가 단순한 수준의 문서는 자동화 전처리를 우선 적용하고, 구조가 복잡해 오류 발생 가능성이 높은 문서는 전문가 파싱을 병행해 맥락과 판단을 반영해 전처리할 수 있는 기준을 제시한다. 데이터 전처리 자동화 시 오류 발생 가능성을 예측하고 투입 인력과 예산, 일정 등을 효율적으로 관리할 수 있다.
이 기술은 크라우드웍스가 자체 개발한 AI 데이터 전처리 솔루션 '알피 날리지 컴파일러'에 적용되고 있다. Word, PPTX, PDF, Excel 외에도 한국 기업에서 주로 사용하는 HWP, HWPX 문서 변환도 지원하며 복잡한 테이블 내 테이블, 차트 등 다양한 문서 요소까지 정확히 인식한다.
또 테이블, 차트, 이미지 등의 시각 요소에 대해서도 거대언어모델(LLM)을 활용해 AI가 이해할 수 있도록 메타데이터를 생성해 비정형 데이터의 효과적 전처리를 지원하며, 비전언어모델(VLM)을 이용해 문서를 처리하는 기능도 준비하고 있다.
김우승 크라우드웍스 대표는 “문서 복잡도 분석을 통해 AI 데이터 전처리의 효율성을 높인 것은 국내외 업계 최초 사례로, 이번 특허 출원을 통해 AI 데이터 전문성을 바탕으로 차별화된 경쟁력을 다시 한번 입증했다”며 “알피 날리지 컴파일러는 이미 데이터 전처리 방식을 고민하던 많은 기업들로부터 문의가 이어지고 있다”고 전했다.
김명희 기자 noprint@etnews.com
