对误差反向传播训练算法而言,如何有效提高训练速度?
来源:动视网
责编:小OO
时间:2024-11-28 13:26:11
对误差反向传播训练算法而言,如何有效提高训练速度?
1、通过全局自适应技术修改全局参数,即对每个可调参数格局学习情况用同样的学习速率改变。2、通过局部学习自适应来对每个可调节参数采用独自的学习速率,对每个权录取最优学习速率。3、采用新的激活函数来加快收敛速度。
导读1、通过全局自适应技术修改全局参数,即对每个可调参数格局学习情况用同样的学习速率改变。2、通过局部学习自适应来对每个可调节参数采用独自的学习速率,对每个权录取最优学习速率。3、采用新的激活函数来加快收敛速度。

可通过四个方面来提高训练速度如下:
1、通过全局自适应技术修改全局参数,即对每个可调参数格局学习情况用同样的学习速率改变。
2、通过局部学习自适应来对每个可调节参数采用独自的学习速率,对每个权录取最优学习速率。
3、采用新的激活函数来加快收敛速度。
对误差反向传播训练算法而言,如何有效提高训练速度?
1、通过全局自适应技术修改全局参数,即对每个可调参数格局学习情况用同样的学习速率改变。2、通过局部学习自适应来对每个可调节参数采用独自的学习速率,对每个权录取最优学习速率。3、采用新的激活函数来加快收敛速度。