arXiv AI· Alireza Moayedikia·· 1 天前评分46
Dimension-Free Buffer Bounds for Compressed-Momentum Error Feedback
摘要
误差反馈分析通过压缩常数 $r/p$ 限制内存缓冲区——这是对 $p$ 维频谱最佳秩 $r$ 接近的压缩结果,其在速率中持续存在。我们证明该结果并不必须出现。当压缩动量重新注入预压缩累积器时,先前压缩动量 $β_1 M_{t-1}$ 作为投影中的可接受竞争者存在,缓冲区满足 $ orm{E_t} _F oldsymbol{ extless} (1 - β_1) orm{G_t} _F + γ orm{E_{t-1}} _F$,不涉及维度 $m,n$ 和秩 $r$。
推荐理由
请对照arXiv AI原文,核对完整说明及适用条件。
本站只提供摘要与原文入口。完整内容请阅读原文。
来源:arXiv AI · arxiv.org