bp神經網絡好學嗎

來源:魅力女性吧 1.6W
bp神經網絡好學嗎

不太好學!BP算法的學習速度很慢,其原因主要有:

由於BP算法本質上為梯度下降法,而它所要優化的目標函數又非常複雜,因此,必然會出現“鋸齒形現象”,這使得BP算法低效

存在麻痺現象,由於優化的目標函數很複雜,它必然會在神經元輸出接近0或1的情況下,出現一些平坦區,在這些區域內,權值誤差改變很小,使訓練過程幾乎停頓

為了使網絡執行BP算法,不能用傳統的一維搜索法求每次迭代的步長,而必須把步長的更新規則預先賦予網絡,這種方法將引起算法低效。

神經網絡發展到現在已經形成一套比較系統的架構,每一種算法其實框架都已經定型,同樣bo網絡也一樣,學習起來沒有什麼困難,邊學邊跑實例都可以完全學會的。

熱門標籤