Diffusion 모델은 주파수 영역에선 자기회귀(auto-regression)모델과 같다.

이미지

셀프어텐션은 푸리에 변환이다, FFTNet !

이미지

DCT 푸리에 파인튜닝

이미지

ViT(비전 트랜스포머)용 푸리에 파인튜닝 논문 팟캐스트

이미지

LoRA 보다 수백배 효과적인 푸리에 파인튜닝

이미지

Grokking 의 소개와 원리.

이미지