RAG ์ธ๋ค์ผํ ๋ฆฌ์คํธํ [ํ๋ ์ด๋ฐ์ดํฐ SK๋คํธ์์ค Family AI ์บ ํ 13๊ธฐ] - 12์ฃผ์ฐจ ํ๊ณ (6์ 2์ฃผ์ฐจ) ์ด๋ฒ์ฃผ ๊ณต๋ถ ํ ๊ฒ ์ค์ ์ฌ๋ฐ๊ณ ์ ์๋ฏธํ๋๊ฑด LCEL chain ์ด๋ค. 1. ๊ถ๊ธ์ฆ : ๊ธฐ์กด์ ๋ฐฐ์ ๋ ๋จธ์ ๋ฌ๋์ pipeline๊ณผ ๋น์ทํ๋ฐ LLM์์์ chain์ ๋ฌด์์ด ๋ค๋ฅธ๊ฐ? ์์ ์ ํ๋์ process๋ก ๋ง๋ค์ด์ ์ฐ๊ฒฐ, ๋ฌถ์ด์ ์ฒ๋ฆฌํ๋ ๊ตฌ์กฐ๋ ๊ฐ๋ค๊ณ ์๊ฐํ๋ค. 1) ๋จธ์ ๋ฌ๋์์์ pipeline : (1) ๋จธ์ ๋ฌ๋์ pipeline ํน์ง :์์นํ ๋ฐ์ดํฐ ์ค์ฌ์ค์ผ์ผ๋ง, ๋ชจ๋ธ ๋ฑ ๊ฐ ๋จ๊ณ๊ฐ ๊ณ ์ ๋์ด์์์ฃผ๋ก ๋จธ์ ๋ฌ๋ (์ ์ฒ๋ฆฌ -> ๋ชจ๋ธ ํ์ต -> ์์ธก) ์ ๊ณผ์ ์ ์๋ํ ํ๋ ๋ฐ ์ฌ์ฉ์ ๋ ฅ๊ฐ๊ณผ ์ถ๋ ฅ๊ฐ์ด ์ ํด์ง ํ์์ ๊ฐ์ง. (2) ์) scikit-learn์์์ pipeline, huggingface์ pipeline์ ์ฒ๋ฆฌ ์์ ํ์ดํ๋ผ์ธ : ๋ณํ๊ธฐ(Transformer) ๋ค๋ก๋ง ๊ตฌ์ฑ ์ ์ฒด ํ๋ก์ธ์ค.. ๋๋ณด๊ธฐ ์ด์ 1 ๋ค์