Hosszú munkamemóriájú Neurális Hálózat Kerassal — 2. rész

Az előző részben megnéztük a Keras alapjait. Majd megformáztuk a megfigyeléseinket a keras.layers.LSTM() elvárásainak megfelelően, mind „stateless” mind „stateful” formában. A mai részben megnézzük, hogy tanítjuk ezeket a modelleket és össze fogjuk hasonlítani az eredményüket. Stateful modell Kezdjük a stateful modellel. Először is hozzunk létre egy stateful Keras modellt. Ehhez két réteget kell definiálunk: a … Hosszú munkamemóriájú Neurális Hálózat Kerassal — 2. rész olvasásának folytatása →

Hosszú munkamemóriájú Neurális Hálózat Kerassal — 1. rész

Nem olyan régen szó volt a Hosszú munkamemóriájú Neurális Hálózatokról. Mai bejegyzésünkben egy gyakorlati példa megvalósítását fogjuk megnézni. Ehhez a Keras keretrendszert használjuk. Keras Mivel a blogon korábban nem volt szó a Kerasról, így érdemes talán egy kis áttekintéssel kezdeni. A Keras nem egy önálló könyvtár gépi tanulásra, hanem leginkább egy felhasználói felület más megvalósításokhoz. … Hosszú munkamemóriájú Neurális Hálózat Kerassal — 1. rész olvasásának folytatása →

Ismétlődő Neurális Hálózat

Nem olyan régen volt szó a Mesterséges Neurális Hálózatok legegyszerűbb fajtájáról a Feed Forward típusról. A mai posztban egy ennél összetettebb megoldást fogunk megvizsgálni: a Ismétlődő Neurális Hálózat1 (INH) típust. Amíg a FF egyedi megfigyelések vizsgálatára alkalmas, addig INH sorozatokra alkalmazható. A Feed Forward típus esetén lényegében független és azonos eloszlású véletlenszerű megfigyelésekkel tanítjuk a … Ismétlődő Neurális Hálózat olvasásának folytatása →

A Hosszú Munkamemóriájú Neurális Hálózat

Nem olyan régen szó volt a Mesterséges Neurális Hálózatok egy sorozatokra kifejlesztett változatáról, az Ismétlődő Neurális Hálózatról. Amint említettük, ez a típus hatványozottan szenved az Eltűnő Gradiens Problémától. Ennek a nehézségnek a megoldására született meg a "Hosszú Munkamemóriájú" (HMM, angolul: Long short-term memory) Neurális Hálózat. Mai bejegyzésünkben ezt megvizsgáljuk meg. A HMM mai formája 1997 … A Hosszú Munkamemóriájú Neurális Hálózat olvasásának folytatása →