为什么做传统优化的人，没有发明Adam？包袱太重，反而适应不了新时代，太把自己以前知道的东西当回事，看不清当前什么重要。同样的，传统做ML的人，还抱着bias-variance trade-off，computational learning theory，generalization bound，Bayesian来审视今天的一切，估计也迟早要被时代淘汰。
发布于 广东
yaolubrain
为什么做传统优化的人，没有发明Adam？包袱太重，反而适应不了新时代，太把自己以前知道的东西当回事，看不清当前什么重要。同样的，传统做ML的人，还抱着bias-variance trade-off，computational learning theory，generalization bound，Bayesian来审视今天的一切，估计也迟早要被时代淘汰。