LLM
Large Language Model
방대한 텍스트 데이터를 사전 학습하여 인간과 유사하게 언어를 이해하고 생성하는 딥러닝 신경망 모델
외부 문서 저장소나 웹에서 최신 자료를 검색한 후 이를 LLM 프롬프트에 주입해 정확한 답변을 생성하는 기법입니다. 정의와 상세 설명을 통해 기술적 원리를 이해하고, 비즈니스에 미치는 영향과 실무 적용 방법, 구현 시 고려할 주의사항을 관련 용어와 함께 확인하세요.
Retrieval-Augmented Generation
RAG(검색 증강 생성)는 LLM이 자체 학습 지식만으로 답하는 대신, 질문이 들어올 때마다 외부 문서 저장소나 웹에서 관련 자료를 실시간으로 검색해 온 뒤 그 내용을 프롬프트에 함께 주입해 답변을 생성하는 기법이다. 이 방식은 모델의 지식 컷오프 이후 최신 정보나 회사 내부 비공개 문서처럼 애초에 학습되지 않은 데이터도 정확하게 반영할 수 있게 해 할루시네이션(환각)을 크게 줄여준다. RAG 시스템의 성능은 결국 얼마나 관련성 높은 문서를 정확히 찾아오느냐(검색·리랭킹 품질)에 좌우되므로, 청킹 전략과 임베딩 모델 선택이 전체 답변 품질을 좌우하는 핵심 변수다.
AI 모델의 할루시네이션을 방지하고 최신 사내 지식을 실시간으로 답변에 반영
검색기의 청킹 및 리랭킹 품질이 전체 생성 답변의 정확도를 결정함
Large Language Model
방대한 텍스트 데이터를 사전 학습하여 인간과 유사하게 언어를 이해하고 생성하는 딥러닝 신경망 모델
Embedding
단어나 문장 문서의 의미를 다차원 수치 벡터 공간의 좌표로 변환해 유사도를 계산할 수 있게 만드는 기술
Knowledge Cutoff
사전 학습된 언어 모델이 학습 데이터를 수집하고 학습을 완료한 기준 시점
Chunking
RAG 구축 시 방대한 원본 문서를 검색과 임베딩에 최적화된 적절한 크기의 의미 단위 조각으로 분할하는 전처리
Prompt
AI 언어 모델에게 원하는 답변이나 작업 수행을 이끌어내기 위해 입력하는 명령문 맥락 텍스트
Hallucination
AI 언어 모델이 사실이 아닌 거짓 정보나 출처를 마치 사실인 것처럼 그럴듯하게 지어내는 환각 현상