Charles Explorer logo
🇨🇿

Curriculum Learning a Minibatch Bucketing v Neuronovém Počítačovém Překladu

Publikace na Matematicko-fyzikální fakulta |
2017

Abstrakt

Prozkoumali jsme vliv řazení vět pro online trénování neuronových sítí pro počítačová překlad. Práce má dvě části: řazení stejných příkladů v rámci minibatche a postupné zvyšování složitosti trénovacích dat (tzv.

Curriculum learning). Výsledkem práce je, že homogenita minibatchí nemá na trénování velký vliv zato curriculum lepších větších výsledků.