[NLP] R.A.G ๊ธฐ๋ฒ
ยท
NLP(์์ฐ์ด์ฒ๋ฆฌ)
RAG(Retrieval-Augmented Generation) Retrieval (๊ฒ์)Augmented (์ฆ๊ฐ)Generation (์์ฑ) RAG ํ๋ก์ธ์ค 1. ์ ์ฒ๋ฆฌ ์์
LOAD (๋ฌธ์ ๋ก๋) Document Loader ๋ฌธ์๋ก๋ ์ ํ์ ๊ณ ๋ ค์ฌํญ ํ
์คํธ๋ฅผ ์ํ ๊ทธ๋๋ก ์ ๊ฐ์ ธ์ค๋๊ฐ ?ํ๊ธ ์ธ์ฝ๋ฉ ํน์๋ฌธ์ ์ฒ๋ฆฌ ๋ฉํ๋ฐ์ดํฐ(metadata)์ ์ข
๋ฅ๋ ์ด๋ค ๊ฒ๋ค์ด ์๋๊ฐ? page_content : ๋ฌธ์ ๋ด์ฉ ํ์ด์ง ๋ฒํธ(page) ํ, ์ฐจํธ , ๋ฌธ์์ coordinates(์ขํ), ์์ฑ(Title , Table, Image, Text) ์ฌ์ฉ์์ ์ง๋ฌธ์ ๋ํ ์ถ์ฒ๋ฅผ ํ๊ธฐํด์ผํ๋ ์ํฉ์ด ์ฌ ๋๋ "์๋"๋ฅผ ์ค์์ ํ๊ธฐ ๋ณด๋ค๋ "๋ฉํ ๋ฐ์ดํฐ"๋ฅผ ๋ ์ค์์ํ๋ ๊ฒ์ด ์ณ์ ์ ํ์ผ ์ ์๋ค. ๋ฌธ์๋ฅผ ์ฝ๋ ..