Spectra-Global

有人用 FFT 砍掉大模型微调一半显存 — 这是真优化还是宣传

Reddit 社区一个叫 Spectra-Global 的开发者声称，用 FFT 替换 AdamW 优化器，把大模型微调的显存砍掉近一半，代价是每步训练变慢。未经同行评审，可信度待定。