VGSL experimentations
Une série d'expérimentations pour comprendre comment maitriser les spécifications VGSL et l'articulation avec la paramétrage du learning rate.
http://kraken.re/vgsl.html#vgsl
Observations:
- le paramétrage du learning rate seul n'a pas beaucoup d'impact dans le cas d'un apprentissage "from scratch" basé sur l'architecture neuronale par défaut de Kraken, on peut donc conserver le paramètre par défaut dans ce cas.
- il est nécessaire d'abaisser le learning rate avec l'architecture fournie par Daniel
- 4100 lignes d'une même main d'écriture (100 pages peu denses) ne suffisent pas à entraîner un modèle performant
Edited by Alix Chagué