Öğrenme Oranı (Learning Rate)


Öğrenme Oranı

ogrenme_orani3.png

Öğrenme oranı, zamanın azalan bir fonksiyonudur. Öğrenme Oranı zamanın lineer bir fonksiyonudur ve zaman t ile ters orantılı bir fonksiyondur.

Doğrusal alfa fonksiyonu (a) başlangıç ​​değerinden öğrenme esnasında doğrusal olarak sıfıra düşerken, ters alfa fonksiyonu (b) başlangıç ​​değerinden hızla azalır

ogrenmeorani2.gif

Alfa değerleri,

formul_alfa.png

Doğrusal olay için ve

formul_alfa2.png

 

Uygun bir başlangıç öğrenme oranı ve öğrenme hızı fonksiyonu için uygun bir form seçmek, sonucu önemli derecede etkileyebilir.

 

  •  α  çok küçük ise: yavaş yakınsama
  •  α  çok büyükse:  her yinelemede azalma olmaz ve dolayısıyla yakınsamayabilir

 

 

Designed by Freepik

Bir Cevap Yazın

Aşağıya bilgilerinizi girin veya oturum açmak için bir simgeye tıklayın:

WordPress.com Logosu

WordPress.com hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap /  Değiştir )

Twitter resmi

Twitter hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap /  Değiştir )

Facebook fotoğrafı

Facebook hesabınızı kullanarak yorum yapıyorsunuz. Çıkış  Yap /  Değiştir )

Connecting to %s