machine-learning - 用外行的话来说，LossFunction 和 OptimizationAlgorithm 有什么区别？

Question

我得到的部分是训练网络就是通过优化算法找到正确的权重，决定如何更新权重，直到获得正确预测所需的权重出现。

因此，主要问题的百万美元问题是：

(1.)如果optimization algorithms更新权重，对网络loss functions的权重有什么影响？

(2.)loss functions仅特定于神经网络的输出层？deeplearning4j（我在框架中看到的大多数示例都在输出层实现它）。

PS： 我真的很想以最简单的方式了解这两者之间的基本区别。我不是在寻找任何复杂的东西或一些数学爆炸。

标签： machine-learningneural-network

Answer 1

optimization algorithm试图找到的minimum。loss function在哪些方面weights是理想的。