Kalman Delta Networks: Uncertainty-aware Associative Memory
논문 링크 칼만 필터로 다시 쓴 선형 어텐션: Kalman Delta Networks한 줄 요약 (TL;DR)선형 어텐션(linear attention)의 고정 크기 recurrent memory 갱신을 선형-가우시안 상태공간 모델 로 재해석하고, 최 …
13분
KV Cache
Long Context
Efficient Inference
SSM
Attention Optimization
Kalman Filter