计算梯度下降法计算极值

资 源 简 介

计算梯度下降法计算极值，只能找到局部最小点。可以通过调整步长实现全局最小

详 情 说 明

计算梯度下降法计算极值时，只能找到局部最小点。但是，如果我们采取一些策略，就可以在更大的范围内找到全局最小值。其中一种策略是学习率衰减，也就是逐步降低步长，以便在接近全局最小值时更加精细地搜索。另一种策略是使用随机梯度下降法，在搜索过程中随机挑选样本，从而更好地探索搜索空间。无论采取哪种策略，我们都可以在保持计算效率的同时找到全局最小值。