문서 검색

대규모 언어 모델은 인공지능 챗봇 기술을 가능하게 하는 핵심 요소이다. 기존의 특정 작업에 특화된 지도 학습 모델과 달리, 방대한 데이터 세트에서 학습된 여러 신경망 계층으로 구성된 파운데이션 모델의 성격을 띤다. 딥 러닝 기술을 사용하여 자연어 처리(NLP) 및 자연어 이해(NLU) 작업을 수행하며, 인간이 기술과 상호 작용하는 방식에 큰 변화를 가져왔다.

대형언어모델(LLM)은 수많은 파라미터(보통 수십억 웨이트 이상)를 보유한 인공 신경망으로 구성되는 언어 모델이다. 자기 지도 학습이나 반자기지도 학습을 사용하여 레이블링되지 않은 상당한 양의 텍스트로 훈련된다. LLM은 2018년 즈음에 모습을 드러냈으며 다양한 작업을 수행하기 위해 사용된다. 이전의 특정 작업에 특화된 지도 학습 모델의 훈련 패러다임에서 벗어나 자연어 처리 연구의 초점이…

10조 파라미터 모델은 인공지능의 지능을 결정하는 매개변수(Parameter)의 총합이 10조 개에 이르는 초거대 모델을 의미한다. 2020년대 중반 기술 기업들이 1조 파라미터 규모의 모델을 잇달아 공개함에 따라, 10조 규모는 인공지능 성능 고도화의 다음 단계이자 인간 수준의 추론 능력을 갖추기 위한 기술적 목표로 평가받는다. 이러한 모델은 방대한 데이터를 학습하여 텍스트, 이미지, 비…

대형 언어 모델(Large Language Model, LLM)은 수많은 파라미터를 보유한 인공 신경망으로 구성되는 언어 모델이다. 일반적으로 수십억 개 이상의 웨이트를 가지며, 레이블링되지 않은 방대한 양의 텍스트 데이터를 자기 지도 학습이나 반자기지도학습 방식으로 훈련한다. 2018년경부터 본격적으로 등장하였으며, 특정 작업에 특화된 기존의 지도 학습 패러다임에서 벗어나 자연어 처리 연…

거대언어모델(Large Language Model, LLM)은 수많은 매개변수(Parameter)를 보유한 인공 신경망 기반의 언어 모델이다. 방대한 양의 데이터 세트를 학습하여 콘텐츠를 인식, 요약, 번역, 예측 및 생성하는 기능을 수행한다. 2017년 발표된 트랜스포머(Transformer) 아키텍처를 주요 기반으로 하며, 2018년경부터 본격적으로 등장하여 자연어 처리 연구의 중심이…

인기 있는 오픈소스 인공지능 프로젝트 범주에는 대형 언어 모델, 기계 번역 도구 및 챗봇이 포함된다. Meta는 LLaMA 시리즈를 오픈소스로 공개하여 누구나 AI 모델을 사용하고 맞춤 설정할 수 있게 했다. OpenAI는 GPT-OSS 모델을 1,200억 파라미터와 200억 파라미터로 제공하며, 추론, 코딩, 에이전트 작업을 지원한다. NVIDIA는 Nemotron 제품군을 통해 개방형…

트랜스포머는 인공지능의 패러다임을 바꾼 '파운데이션 모델(Foundation Model)'로 평가받는다. 초기에는 기계 번역과 같은 자연어 처리(NLP) 분야에서 혁신을 일으켰으나, 현재는 다양한 영역으로 확장되었다. 컴퓨터 비전 및 음성 인식: 이미지 분석(비전 트랜스포머)과 실시간 음성 번역 지원 생명 과학: DNA 유전자 사슬과 단백질 아미노산 구조 이해를 통한 신약 디자인 가속화 산…

글로벌 IT 기업들은 각자의 멀티모달 파운데이션 모델을 개발하여 경쟁력을 확보하고 있다. 모델명 개발사 주요 특징 엑사원(EXAONE) 4.5 LG AI연구원 텍스트와 이미지를 동시에 이해하는 비전-언어 모델(VLM)로, 산업 현장의 복합 문서 추론에 강점 Gemini 3 Google 추론, 코딩, 멀티모달 이해에 최적화된 모델 GPT-4o OpenAI 음성 및 시각적 입력을 실시간으로 처…

대규모 유전체 데이터를 학습한 인공지능 모델이 암 분석의 효율성을 높이고 있다. 인공지능은 복잡한 유전체 데이터를 해석하여 암의 특성을 예측하며, 분석 시간을 단축시킨다. 특히 '설명 가능한 AI' 기술은 분석 결과의 근거를 제시함으로써 연구자가 데이터 해석 결과를 신뢰할 수 있도록 돕는다. 국내에서는 약 2,882건의 암 전장 유전체 데이터를 학습시킨 AI 파운데이션 모델이 개발되기도 하…

최근 휴머노이드 로봇은 단순한 동작 반복을 넘어 '로봇 파운데이션 모델'을 통해 지능화되고 있다. 대규모 시각-행동 데이터를 기반으로 학습하며, 강화학습과 모방학습이 널리 활용된다. 특히 GPU 기반의 병렬 시뮬레이션 환경(예: NVIDIA Isaac Sim)에서 합성 데이터를 사용하여 학습 속도를 가속화한다. 이를 통해 로봇은 언어, 시각, 촉각 정보를 통합적으로 처리하고 예측하기 어려운…

애플은 자체 파운데이션 모델 개발과 더불어 외부 AI 기업들과의 전략적 제휴를 진행하고 있다. 오픈AI의 챗GPT를 시리에 도입한 것을 시작으로, 구글의 제미니(Gemini) 모델 도입을 위한 협약을 체결하였다. 또한 앤트로픽(Anthropic)의 클로드(Claude) 모델 사용도 검토 중인 것으로 알려졌다. 이는 통합 시리 모델 개발의 기술적 난도를 극복하고 사용자에게 다양한 AI 선택지…

파운데이션 모델(Foundation Model)은 광범위한 데이터에 대해 훈련되어 다양한 사용 사례에 적용할 수 있는 기계 학습 모델이다. 이는 범용 기술의 성격을 띠며, 대형 언어 모델(LLM)과 같은 생성형 인공지능이 대표적인 예시이다. 이러한 모델을 구축하는 것은 리소스 집약적인 작업으로, 기본 데이터 확보와 컴퓨팅 비용에 수억 달러가 소요되기도 한다. 파운데이션 모델은 특정 용도에…