梯度下降太耗算力太慢，能不能设计个模型用来预测出参数的调整量，达到加速训练的目的？

新闻&观点 社区热帖
,
1

看到你拿这个idea和NERF对比，我一开始没感觉，后来仔细想想真的被提问者的intuition惊艳到了。但是我又继续想了想，发现这个类比确实非常优雅，非常美，但不太valid。不过这个idea本身是没问题的，而且已经被DeepMind做过啦~

这是一个从 https://www.zhihu.com/question/603468895/answer/3059187375 下的原始话题分离的讨论话题