LLMWhisperer: 복잡한 문서를 구조화된 텍스트로 변환하는 문서 파싱 도구
LLMWhisperer란 무엇인가요?
LLMWhisperer는 복잡한 문서를 LLM 형식으로 파싱할 수 있는 도구로, 문서에서 텍스트, URL, 메타데이터와 같은 심층 정보를 효율적으로 추출하여 명확한 구조화된 형식으로 출력합니다. PDF 및 이미지를 포함한 다양한 형식을 지원하며, 이름, 주소와 같은 중요한 정보를 자동으로 추출할 수도 있습니다. 하루에 100페이지의 문서를 무료로 처리할 수 있습니다.
또한 온라인 테스트 환경을 제공하고, API와 JS/Python 개발 키트를 제공하여 Next.js, Node.js, 데이터베이스와 같은 널리 사용되는 기술과 쉽게 연동할 수 있습니다. 이를 통해 이미지 입력 처리 비용을 상당히 절약할 수 있으며, 특히 인보이스, 신분증, 경비 보고서와 같은 시나리오에 적합합니다.

LLMWhisperer 기능 특징
문서 레이아웃 유지: LLMWhisperer의 레이아웃 유지 모드는 표, 단락, 다단 레이아웃 등을 포함하여 문서의 원본 구조를 그대로 보존할 수 있어, 추출된 데이터가 원본 문서와 일치하도록 보장합니다.
자동 모드 전환: 이 도구는 문서 유형을 자동으로 식별하여 텍스트 모드와 OCR 모드 사이를 전환할 수 있습니다. 문서가 스캔 이미지이거나 필기 내용인 경우 자동으로 OCR 모드로 전환됩니다.
폼 요소 인식: LLMWhisperer는 PDF 폼의 체크박스와 라디오 버튼을 인식하여 그 값을 원본 텍스트 형식으로 표시하므로, LLM이 쉽게 이해할 수 있습니다.
자동 압축: 문서를 처리할 때 LLMWhisperer는 불필요한 토큰을 자동으로 압축하여 처리 시간과 비용을 줄이면서도 핵심 정보를 유지합니다.
다국어 지원: LLMWhisperer는 300개 이상의 언어를 지원하여, 비라틴 문자 스크립트(예: 아랍어, 중국어, 일본어 등)를 포함한 다국어 문서를 처리할 수 있습니다.
다양한 문서 형식 지원: PDF, 이미지(JPEG, PNG 등), MS Office 파일(Word, Excel, PowerPoint), OpenDocument 형식(ODT, ODP, ODS) 및 일반 텍스트 파일(TXT)을 지원합니다.
LLMWhisperer 사용 방법
API 통합: LLMWhisperer는 API 인터페이스를 제공하여 기존 시스템에 통합할 수 있으며, 문서의 자동화된 사전 처리를 구현할 수 있습니다.
클라이언트 라이브러리: 사용자는 LLM Whisperer의 클라이언트 라이브러리(예: Python의 llmwhisperer-client)를 설치하여 그 기능을 호출할 수 있습니다.
온라인 테스트: LLMWhisperer는 온라인 Playground 환경을 제공하여, 사용자가 가입이나 소프트웨어 설치 없이 문서를 업로드하여 실시간으로 테스트할 수 있습니다.
최적화 능력
자동 모드 전환: 문서를 처리할 때 텍스트 모드의 추출 출력이 충분하지 않으면 OCR 모드로 자동 전환됩니다.
자동 압축: 레이아웃을 유지하면서 출력에 가치가 없는 마크업을 압축하여 LLM의 처리 시간과 비용을 줄입니다.
사전 처리 제어: API를 통해 중값 필터링, 가우시안 블러 등의 매개변수를 조정하여 스캔 이미지의 사전 처리를 제어할 수 있습니다.
공식 사이트:https://unstract.com/llmwhisperer/
대본 기획 도우미▸
AI 앱
AI 뉴스 