PDF 전처리 해보기
·
AI/LangGraph
👋 들어가기 전 인프런 제이쓴님의 강의 코드를 분석하며, 개념을 정리해보자.🏁 학습할 내용필요한 의존성새로운 개념꿀팁📦의존성 1. pypdf랭체인에서 기본적으로 제공하는 PDF 로더가 포함된 패키지pdf안에 이미지 데이터를 읽지 못하는 단점 존재 2. zeroxllm을 활용하여 ocr을 돌려 문서를 인식하는 패키지다양한 llm 지원markdown 형태로 output💡 ocr이란??Optical Character Recognitio의 약자이미지(사진, 스캔 문서) 속에 들어있는 글자를 컴퓨터가 읽을 수 있는 텍스트 데이터로 추출하는 기술 3. UnstructedMarkdownLoader랭체인에서 제공하는 MarkdownLoaderPDF와 다르게 별도로 split을 해줘야함정확한 컨텍스트가 전달되지 ..