๋ณธ๋ฌธ ๋ฐ”๋กœ๊ฐ€๊ธฐ

RAG

[ํ”Œ๋ ˆ์ด๋ฐ์ดํ„ฐ SK๋„คํŠธ์›์Šค Family AI ์บ ํ”„ 13๊ธฐ] - 12์ฃผ์ฐจ ํšŒ๊ณ  (6์›” 2์ฃผ์ฐจ) ์ด๋ฒˆ์ฃผ ๊ณต๋ถ€ ํ•œ ๊ฒƒ ์ค‘์— ์žฌ๋ฐŒ๊ณ  ์œ ์˜๋ฏธํ–ˆ๋˜๊ฑด LCEL chain ์ด๋‹ค. 1. ๊ถ๊ธˆ์ฆ : ๊ธฐ์กด์— ๋ฐฐ์› ๋˜ ๋จธ์‹ ๋Ÿฌ๋‹์˜ pipeline๊ณผ ๋น„์Šทํ•œ๋ฐ LLM์—์„œ์˜ chain์€ ๋ฌด์—‡์ด ๋‹ค๋ฅธ๊ฐ€? ์ž‘์—…์„ ํ•˜๋‚˜์˜ process๋กœ ๋งŒ๋“ค์–ด์„œ ์—ฐ๊ฒฐ, ๋ฌถ์–ด์„œ ์ฒ˜๋ฆฌํ•˜๋Š” ๊ตฌ์กฐ๋Š” ๊ฐ™๋‹ค๊ณ  ์ƒ๊ฐํ–ˆ๋‹ค. 1) ๋จธ์‹ ๋Ÿฌ๋‹์—์„œ์˜ pipeline : (1) ๋จธ์‹ ๋Ÿฌ๋‹์˜ pipeline ํŠน์ง• :์ˆ˜์น˜ํ˜• ๋ฐ์ดํ„ฐ ์ค‘์‹ฌ์Šค์ผ€์ผ๋ง, ๋ชจ๋ธ ๋“ฑ ๊ฐ ๋‹จ๊ณ„๊ฐ€ ๊ณ ์ •๋˜์–ด์žˆ์Œ์ฃผ๋กœ ๋จธ์‹ ๋Ÿฌ๋‹ (์ „์ฒ˜๋ฆฌ -> ๋ชจ๋ธ ํ•™์Šต -> ์˜ˆ์ธก) ์ „ ๊ณผ์ •์„ ์ž๋™ํ™” ํ•˜๋Š” ๋ฐ ์‚ฌ์šฉ์ž…๋ ฅ๊ฐ’๊ณผ ์ถœ๋ ฅ๊ฐ’์ด ์ •ํ•ด์ง„ ํ˜•์‹์„ ๊ฐ€์ง. (2) ์˜ˆ) scikit-learn์—์„œ์˜ pipeline, huggingface์˜ pipeline์ „์ฒ˜๋ฆฌ ์ž‘์—… ํŒŒ์ดํ”„๋ผ์ธ : ๋ณ€ํ™˜๊ธฐ(Transformer) ๋“ค๋กœ๋งŒ ๊ตฌ์„ฑ ์ „์ฒด ํ”„๋กœ์„ธ์Šค.. ๋”๋ณด๊ธฐ