AI 2026.05.03 · 11 min
Advanced Efficient Ml Deep Dive · 5
모델 압축의 4축은 어떻게 하나의 철학으로 수렴하는가
Low-rank factorization의 Eckart-Young 정리부터 LoRA의 intrinsic rank 가설, Tucker 분해, Hybrid recipe까지 — 학습된 가중치의 redundancy를 제거하는 통일된 관점을 추적한다.
tag
#tensor-decomposition
총 2개의 글
AI 2026.04.28 · 13 min
Advanced Linear Algebra Deep Dive · 6
텐서란 무엇인가 — 좌표를 넘어선 다중선형 대상
다차원 배열이라는 직관에서 벗어나 다중선형 사상으로 텐서를 재정의하고, Kronecker 곱·einsum·분해·신경망 가중치까지 하나의 언어로 통합한다.