본문 바로가기

AI Compiler framework

AICF 챕터 구조 ( 의미론 기준 분류 )

Linear Operators

  • GEMM
  • BiasAdd
  • ResidualAdd

Keyward

  • 선형성
  • 결합 가능성
  • fusion 친화적

 

Reductions & Statistics

  • ReduceSum / Mean
  • Variance
  • LayerNorm core

Keyward

  • 결합법칙 붕괴
  • 오차 모델이 정의의 일부

 

Normalization & Reparameterization

  • LayerNorm
  • RMSNorm
  • Softmax

Keyward

  • 분포 재정의
  • 안정화가 의미의 일부

 

Stateful Operators (Optimization)

  • SGD
  • Adam
  • EMA

keyward

  • 상태 전이 시스템
  • alias 정책 = 의미 계약

 

Attention Family

  • QK^T
  • Softmax
  • Pv

의미 키워드

  • 구조적 분해
  • 수치 안정성과 정확도의 결합