REAL

Tanulási ráta módszer full-batch gradiens tanulásra

Asadi, Soodabeh Dezaki and Vogel, Manfred (2020) Tanulási ráta módszer full-batch gradiens tanulásra. Műszaki Tudományos Közlemények (13). pp. 174-177. ISSN 2393-1280

[img]
Preview
Text
MTK13-33-Asadi.pdf

Download (327kB) | Preview

Abstract

Cikkünkben egy olyan tanulásiráta-módszert mutatunk be gradienstanulásra, amely kizárólag elsőrendű információkat használ fel. Ezen módszer esetében nem szükséges a tanulási ráta manuális beállítása. Az algoritmust alkalmaztuk egy nulláról felépített lineáris neurális hálóra full-batch gradiens-módszer esetén, mikor a gradienst a teljes adathalmazra kiszámoljuk egy paraméter-aktualizálási lépésben. A módszert egy közepes méretű, szállásinformációkkal kapcsolatos adathalmazon teszteltük, a kapott eredményeket pedig összevetettük a Keras-beli Adam algoritmus által szolgáltatottakkal egy szekvenciális neurális háló esetén. Az eredmények azt mutatják, hogy az Adam algoritmushoz képest a mi módszerünk sokkal kevesebb epoch alatt megtalálja a minimumot.

Item Type: Article
Subjects: T Technology / alkalmazott, műszaki tudományok > T2 Technology (General) / műszaki tudományok általában
SWORD Depositor: MTMT SWORD
Depositing User: Zsolt Baráth
Date Deposited: 04 Oct 2022 14:21
Last Modified: 04 Oct 2022 14:21
URI: http://real.mtak.hu/id/eprint/151034

Actions (login required)

Edit Item Edit Item