LLM 뜻부터 RAG·멀티모달까지: AI 핵심 개념 한 번에 정리

AI를 처음 접하는 사람도, 이미 여러 AI 도구를 활용해본 사람도 “LLM”이라는 단어는 한 번쯤 들어봤을 것입니다. 하지만 막상 LLM이 정확히 무엇인지, 왜 ‘Large’라는 단어가 붙는지, 그리고 RAG·멀티모달·로컬 LLM 같은 용어들이 어떤 의미인지 제대로 이해하기는 쉽지 않습니다. 이 글은 그런 분들을 위해 준비한 LLM 완전 해부 가이드입니다. LLM의 뜻과 어원 같은 기본 개념부터 실제 AI 시스템에서 반드시 등장하는 Retriever, RAG 구조, 오픈소스 모델, 로컬 실행 방식, 최신 SOTA LLM까지 모두 한 번에 정리했습니다. 단순한 개념 설명을 넘어, 왜 이런 기술들이 주목받는지, 어떤 흐름으로 발전하고 있는지, 그리고 앞으로 우리의 일상과 업무가 어떻게 변화할지까지 자연스럽게 이해할 수 있도록 구성되어 있습니다. AI 시대를 제대로 이해하고 활용하고 싶은 분들에게 이 글은 가장 쉽고 흥미로운 출발점이 될 것입니다.

LLM 뜻과 어원 — 왜 “Large Language Model”일까?

LM은 Large Language Model, 즉 “대규모 언어 모델”이라는 뜻을 가진 인공지능 모델입니다. 이름 그대로 ‘거대한 언어 모델’이라는 의미인데, 여기서 Large(대규모)라는 단어가 붙은 이유가 매우 중요합니다.

“Large”는 왜 붙었을까?

원래 언어 모델(Language Model)은 오래전부터 존재했습니다. 문장의 확률을 계산하거나 다음 단어를 예측하는 단순한 모델들도 모두 언어 모델이었죠. 그러나 GPT 계열 모델처럼 **수십억~수천억 개 파라미터(parameter)**를 가진 초대형 신경망이 등장하면서 기존 언어 모델과 구분하기 위해 자연스럽게 “Large Language Model”이라는 표현이 생겨났습니다. 즉, 학습 데이터량도 크고, 파라미터 수도 엄청나게 크기 때문에 Large(대규모)라는 이름이 붙은 것입니다.

LLM 어원 정리

대규모 데이터로 학습된 초대형 언어 인공지능 모델”을 의미합니다.

단어의미설명
Large대규모모델 크기, 데이터 크기, 파라미터 규모가 매우 크다는 뜻
Language언어모델이 다루는 대상이 “자연어”라는 의미
Model모델딥러닝 기반의 학습된 지능 시스템

LLM과 함께 자주 등장하는 단어들: 개념을 한 번에 정리하기

LLM을 이해하려면 관련 용어들을 함께 알아야 전체 그림이 완성됩니다. 특히 최근에는 RAG, 로컬 LLM, 멀티모달, 오픈소스, SOTA 같은 개념이 필수로 등장합니다. 아래 표에 핵심 설명을 먼저 담고 이후 각 개념을 자세히 풀어서 설명합니다.

용어설명
AI LLM인공지능 기반 대규모 언어 모델ChatGPT 같은 모델 전반을 의미
Retriever / Retrieval검색기(검색 단계)외부 데이터에서 필요한 정보를 찾아 LLM에 제공
RAGRetrieval-Augmented Generation검색 + 생성 결합 방식
로컬 LLM(Local LLM)개인 PC에서 직접 돌리는 LLM프라이버시 강화·비용 절감 가능
멀티모달 LLM텍스트+이미지+음성 등 여러 모달 처리GPT-4o, Gemini, Claude 3.5 등
오픈소스 LLM공개된 모델Llama, Mistral, Qwen 등
SOTA LLM최첨단(최고 수준) LLMState-of-the-Art의 줄임말
로스쿨 LLM(법학 LLM)Master of LawsAI LLM과 전혀 다른 의미(법학 석사)

핵심 개념 상세 설명

AI LLM 뜻 — ChatGPT 같은 모델을 총칭하는 말

(사진출처: brunch.co.kr)

AI LLM은 말 그대로 AI로 만든 대규모 언어 모델을 의미합니다. ChatGPT, Claude, Gemini, Llama, Mistral 등 텍스트로 대화하고 분석하는 대부분의 생성형 AI 모델을 통틀어 “AI LLM”이라고 부릅니다.

특징

  • 언어 생성 능력이 강력함
  • 문맥 추론 능력 보유
  • 다양한 작업(요약, 번역, 글쓰기, 분석, 질의응답)에 활용
  • 멀티모달 기능이 확장되면 이미지·음성까지 처리 가능

Retriever LLM 뜻 — 검색을 통한 ‘정확도 보완 장치’

LLM은 학습된 정보로 텍스트를 생성하기 때문에 최신 정보나 파일·문서 속 구체적인 내용을 직접 알지 못합니다. 그래서 등장한 개념이 Retriever(리트리버)입니다. Retriever는 쉽게 말하면 “LLM에게 필요한 정보를 직접 가져다주는 검색 도우미”입니다.

  • LLM: 생성 담당
  • Retriever: 외부 정보 검색 담당

이 둘이 합쳐지면 훨씬 정확하고 맥락 있는 답변을 만들 수 있습니다.

RAG 뜻 — Retrieval-Augmented Generation

RAG는 LLM 분야에서 가장 많이 등장하는 용어 중 하나입니다. 검색(Retrieval) + 생성(Generation)을 결합한 기술이죠.

  • RAG의 기본 원리 : 사용자가 질문하고 Retriever가 외부 문서에서 관련 정보 검색, LLM이 검색 결과를 기반으로 답변 생성합니다. 
  • RAG LLM 장점 : 최신 정보 반영 가능, 기업 문서나 내부 DB의 내용도 검색 가능, 환각(Hallucination) 감소, 정확성과 신뢰성이 크게 향상입니다.

기업들이 자체 LLM 시스템을 만드는 이유의 80%가 RAG 때문이라고 말할 정도입니다.

로컬 LLM — 내 컴퓨터에서 돌아가는 나만의 AI

로컬 LLM(Local LLM)은 인터넷 기반의 클라우드 LLM과 달리 개인의 PC, 노트북, 서버에서 직접 실행하는 LLM을 말합니다. 예를들어 GPT를 쓰지 않고도 오픈소스 모델을 내 PC에서 돌리기, 개인정보·회사 자료를 외부로 보내지 않고 내부에서만 활용이 있습니다. 특징으로는 아래와 같습니다.

  • 프라이버시와 보안 강화
  • 비용 절감
  • 오프라인 환경에서도 실행 가능
  • 모델 크기에 따라 성능 차이 발생

최근에는 MacBook, 고성능 PC에서 Llama, Mistral, Qwen 모델을 로컬로 돌리는 사례가 늘고 있습니다.

멀티모달 LLM — 텍스트만 보는 시대는 끝났다

멀티모달(Multimodal)은 여러 종류의 입력을 동시에 이해하는 AI를 의미합니다. 예를들어 텍스트, 이미지, 음성, 비디오, 센서 데이터 등이 있습니다. 기존의 LLM이 텍스트 중심이었다면, 새로운 모델들은 텍스트 + 이미지 + 음성을 모두 이해합니다. 대표 멀티모달 LLM은 아래를 참고해주세요.

  • GPT-4o
  • Gemini
  • Claude 3.5 Sonnet
  • Llama 3.2 Vision
  • Qwen2-VL

멀티모달 기능이 강화되면서 “AI와 진짜로 대화한다”라는 경험이 가능해지고 있습니다.

오픈소스 LLM — 누구나 사용할 수 있는 모델

오픈소스 LLM은 모델 자체가 공개되어 누구나 활용·수정할 수 있는 LLM입니다. 대표 모델로는 Meta Llama 시리즈, Mistral, Qwen, Phi, Gemma가 있습니다. 장점으로는 무료 또는 매우 저렴하다는것이고 커스터마이징 가능합니다. 또한 로컬 실행 가능하고 기업의 프라이빗 데이터와 결합하기 좋습니다.

SOTA LLM 뜻 — 가장 강력한 모델을 부르는 말

SOTA는 State Of The Art(최첨단)의 약자입니다. 따라서 SOTA LLM은 “현존 최고 성능의 LLM”이라는 뜻입니다.

매달 바뀔 정도로 경쟁이 치열하며 예를 들어 특정 달에는 GPT가 SOTA였다가, 다음 달에는 Claude나 Gemini가 SOTA가 되기도 합니다.

LLM(법학) — 로스쿨에서 말하는 LLM과 완전히 다름!

LLM은 AI 분야의 약자이기도 하지만, 법학 분야에서는 전혀 다른 의미로 쓰입니다.

법학 LLM Master of Laws(법학 석사)은  미국 로스쿨에서 1년 과정 외국 변호사들이 미국 법을 공부하는 코스로 AI 분야의 LLM과 완전히 다른 개념이기 때문에 문맥에 따라 구별해야 합니다.

마무리 글

LLM은 단순히 텍스트를 생성하는 기술을 넘어서, 이제는 정보를 이해하고 분석하며 사람과 자연스럽게 소통하는 지능형 플랫폼으로 발전하고 있습니다. 오늘날 우리가 자주 듣는 RAG, 멀티모달, 로컬 LLM, 오픈소스 모델 같은 용어들은 단순한 기술 트렌드가 아니라, 앞으로의 AI 활용 방식 자체를 근본적으로 바꿔나갈 중요한 요소들입니다. LLM을 잘 이해하면 AI 서비스를 단순히 ‘사용하는 사람’이 아니라, 원하는 방식으로 직접 ‘활용하고 설계하는 사람’이 될 수 있습니다. 기술이 어렵게 느껴졌다면, 이번 글을 통해 핵심 흐름과 개념이 더 명확히 정리되었기를 바랍니다. 앞으로도 LLM은 더 똑똑해지고, 더 빠르게 발전하며, 더 많은 영역을 아우르게 될 것입니다. AI의 중심에 있는 기술을 제대로 이해한 지금, 여러분의 업무·학습·창작 방식도 새로운 전환점을 맞이하게 될 것입니다.

댓글 남기기