ํ ๋ฃจ์๋ค์ด์ (Hallucination)์ด๋? ์ธ๊ณต์ง๋ฅ์ด ์ฌ์ค์ด ์๋ ๋ด์ฉ์ ๋ง์น ์ฌ์ค์ธ ๊ฒ์ฒ๋ผ ๊ทธ๋ด๋ฏํ๊ฒ ์์ฑํ๋ ํ๊ฐ ํ์์ ๋งํฉ๋๋ค.
์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ์ '์ฌ์ ํ์ต(Pre-trained)'๋ ๋ฐ์ดํฐ์ ์์กดํฉ๋๋ค. ํ์ตํ์ง ์์ ์๋ก์ด ์ ๋ณด์ ๋ํด ์ง๋ฌธ๋ฐ์ผ๋ฉด, ๋น์นธ์ผ๋ก ๋๋ ๋์ ํ๋ฅ ์ ์ผ๋ก ๊ฐ์ฅ ๊ฐ๋ฅ์ฑ์ด ๋์ ๋ด์ฉ์ ๊พธ๋ฉฐ๋ด์ด ๋ต๋ณํ๊ธฐ ๋๋ฌธ์ ์ด๋ฌํ ์ค๋ฅ๊ฐ ๋ฐ์ํฉ๋๋ค. ์ด๋ ์ํ ๋ฌธ์ ์์ ๋ชจ๋ฅด๋ ๋ด์ฉ์ ๋ฌด์์ ์ฐ์ด์ ์ ๋ต์ ๋งํ๋ ค๊ณ ์๋ํ๋ ๊ณผ์ ๊ณผ ์ ์ฌํฉ๋๋ค. ## ๊ฒ์ ์ฆ๊ฐ ์์ฑ(RAG)์ ๋ฑ์ฅ๊ณผ ์งํ ํ ๋ฃจ์๋ค์ด์ ๋ฌธ์ ๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด ์ธ๋ถ ๋ฐ์ดํฐ๋ฅผ ์ฐธ์กฐํ๋ '๊ฒ์ ์ฆ๊ฐ ์์ฑ(RAG, Retrieval-Augmented Generation)' ๊ธฐ์ ์ด ๋์ ๋์์ต๋๋ค. * ์ด๊ธฐ ๋จ๊ณ: PDF, ํ ์คํธ ํ์ผ ๋ฑ ์ธ๋ถ ๋ฌธ์๋ฅผ ์ธ๊ณต์ง๋ฅ์ ์ ๋ ฅํ์ฌ ํด๋น ๋ฌธ์๋ฅผ ๊ธฐ๋ฐ์ผ๋ก ๋ต๋ณ์ ์์ฑํ๋๋ก ์ ๋ํฉ๋๋ค. * ๋ฒกํฐ(Vector)์ ํจํด ์ธ์: ์ ํํ ํค์๋ ๋งค์นญ์ด ์๋, ์ ๋ณด์ '๋งฅ๋ฝ'๊ณผ 'ํจํด'์ ํ์ ํฉ๋๋ค. ์๋ฅผ ๋ค์ด '๋ฌผ'๊ณผ '์ปคํผ'๋ผ๋ ๋จ์ด๊ฐ ๋ค๋ฅด๋๋ผ๋ '์ก์ฒด'์ 'ํ๋ผ์คํฑ ์ฉ๊ธฐ'๋ผ๋ ๊ณตํต ์์ฑ์ ๊ธฐ๋ฐ์ผ๋ก ์ฐ๊ด์ฑ์ ์ฐพ์๋ด์ด ์ง์์ ๊ฒ์ํฉ๋๋ค. * ์ง์ ๊ทธ๋ํ(Knowledge Graph)์ ํ์ฉ: ํํธํ๋ ๋ฌธ์ ์กฐ๊ฐ๋ค์ ๋์ด, ์ ๋ณด์ ์ ๋ณด๋ฅผ ์ ์ผ๋ก ์ฐ๊ฒฐํ์ฌ ๋ฐ์ดํฐ ๊ฐ์ ์จ๊ฒจ์ง ์๋ฏธ์ ๋งฅ๋ฝ๊น์ง ํ์ ํ๋ ๋จ๊ณ๋ก ๋ฐ์ ํ์ต๋๋ค. ์ต์๋์ธ(Obsidian)๊ณผ ๊ฐ์ ํด์ ํ์ฉํด ๊ฐ์ธ์ ๊ฒฝํ๊ณผ ์ง์์ ๊ทธ๋ํ ๊ตฌ์กฐ๋ก ์ฐ๊ฒฐํ๋ฉด, ์ธ๊ณต์ง๋ฅ์ด ํจ์ฌ ๋ ํฐ ๊ทธ๋ฆผ์์ ํต์ฐฐ์ ์ ๊ณตํ ์ ์์ต๋๋ค. ## ์ธ๊ณต์ง๋ฅ ์์ด์ ํธ์ ๋ฉํ์ธ์ง ๋จ์ํ ๊ฒ์ ๊ฒฐ๊ณผ๋ฅผ ๋์ดํ๋ RAG๋ฅผ ๋์ด, ์ด์ ๋ ์ค์ค๋ก ์ฌ๊ณ ํ๊ณ ํ๋ํ๋ '์ธ๊ณต์ง๋ฅ ์์ด์ ํธ(AI Agent)' ์๋๊ฐ ๋๋ํ๊ณ ์์ต๋๋ค.์ธ๊ณต์ง๋ฅ ์์ด์ ํธ๋? ์ค์ค๋ก ์ ๋ต์ ์๋ฆฝํ๊ณ (Planning), ์ง์์ด ์ถฉ๋ถํ์ง ํ๋จํ๋ฉฐ(๋ฉํ์ธ์ง), ๊ฒฐ๊ณผ๋ฅผ ๊ฒ์ฆํ๊ณ , ๋ถ์กฑํ ์ ๋ณด๋ ์ธํฐ๋ท์์ ์ง์ ์ฐพ์ ์คํํ๋ ๋ฅ๋์ ์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ์ ๋๋ค.
์์ด์ ํธ๋ ์ ๋ณด๋ฅผ ์ฐพ๋ ๊ฒ์ ๊ทธ์น์ง ์๊ณ , ๊ฒฐ๊ณผ๋ฌผ์ ์ค์ค๋ก ํ๊ฐํ๊ณ ์์ ํ๋ ๊ณผ์ ์ ๊ฑฐ์ณ ์ค์ ์๋น์ค ๊ตฌํ์ ๊ฐ๊น์ด ๊ฒฐ๊ณผ๊ฐ์ ๋์ถํฉ๋๋ค. ## ๋ชจ๋ธ ๋ถ๊ดด(Model Collapse)์ ๋๋ง์ ๋ฐ์ดํฐ์ ์ค์์ฑ ์๋ง์ ์ฌ๋๋ค์ด ๋์ผํ ์ธ๊ณต์ง๋ฅ ๋ชจ๋ธ์ ์ฌ์ฉํ๋ฉด์ ์ฌ๊ฐํ ๋ฌธ์ ๋ ๋ฐ์ํ๊ณ ์์ต๋๋ค. ๋ฐ๋ก '๋ชจ๋ธ ๋ถ๊ดด' ํ์์ ๋๋ค. * ๋ชจ๋ธ ๋ถ๊ดด(Model Collapse)๋? ์ธ๊ณต์ง๋ฅ์ด ์์ฑํ 'ํฉ์ฑ ๋ฐ์ดํฐ'๋ฅผ ๋ค์ ์ธ๊ณต์ง๋ฅ์ด ๋ฐ๋ณต ํ์ตํ๋ฉด์, ๊ณ ์ ํ ์ ๋ณด๊ฐ ํฌ์๋๊ณ ๊ฒฐ๊ณผ๋ฌผ์ด ํ๊ท ํ๋์ด ๋ฅ๋ ฅ์ด ํดํํ๋ ํ์์ ๋๋ค. * ํ๊ท ์ผ๋ก์ ํ๊ท: ๋์ค์ ์ธ ์ ํธ๋(์ข์์ ๋ฑ)๋ฅผ ๋ฐ์ํ๋ ์ธ๊ณต์ง๋ฅ์ ๊ฐํํ์ต(RLHF) ๊ตฌ์กฐ๋ ์์ ํ๊ณ ํ๋ฒํ ๋ต๋ณ์ ์ ํธํ๊ฒ ๋ง๋ญ๋๋ค. ๊ฒฐ๊ณผ์ ์ผ๋ก ์ธ๊ณต์ง๋ฅ์ด ์์ฑํ๋ ์ฝํ ์ธ ๋ ์ ์ ์ฐฝ์์ฑ์ ์๊ณ ํ์ผํ๋ฉ๋๋ค. ๋ฐ๋ผ์ ๋ฏธ๋์๋ ๋ฒ์ฉ์ ์ธ ๋ฐ์ดํฐ๊ฐ ์๋, '๋๋ง์ด ๊ฐ์ง ๊ณ ์ ํ ๊ฒฝํ, ์ค์, ์ผ๊ธฐ, ๋ฐ์ดํฐ'๊ฐ ๊ฐ์ฅ ๊ทํ ์์ฐ์ด ๋ฉ๋๋ค. ๋ชจ๋๊ฐ ๊ฐ์ ์ธ๊ณต์ง๋ฅ์ ์ฌ์ฉํ๋ ์๋์ ๋์ฒด ๋ถ๊ฐ๋ฅํ ๊ฒฝ์๋ ฅ์ ๊ฐ์ถ๋ ค๋ฉด, ๋๋ง์ ์ง์์ ๊ตฌ์กฐํํ๊ณ ์ด๋ฅผ ์ธ๊ณต์ง๋ฅ์ ๊ฒฐํฉํ์ฌ ํ์ต์ํค๋ ๋ ธ๋ ฅ์ด ๋ฐ๋์ ํ์ํฉ๋๋ค.