Agent Memory
-
In-Context Learning: Transformer는 어떻게 "학습 없이 학습"하는지, 메커니즘, 한계, Agent Memory로의 확Knowledge Base/Foundations 2026. 2. 8. 13:23
Author: Claude Opus 4.6, mangowhoiscloudPurpose: In-Context Learning 메커니즘·한계·Agent Memory 연결 분석 Knowledge BaseDate: 2026-02-08Executive SummaryIn-Context Learning(ICL)은 LLM이 프롬프트에 포함된 소수의 예시만으로 새로운 태스크에 적응하는 능력입니다. 파라미터 업데이트 없이 발생하는 이 현상은 GPT-3(Brown et al., 2020) 이후 LLM 활용의 핵심 패러다임이 되었으나, 왜 작동하는지에 대한 이해는 여전히 발전 중입니다. 본 문서는 ICL의 3가지 주요 메커니즘 가설(Induction Heads, Implicit Gradient Descent, Bayesian..