Systém Idiap NMT pro multimodální překladovou úlohu WAT 2019

Abstrakt

Tento článek popisuje podání Idiap pro WAT 2019 pro anglicko-hindský vícemodální překladatelský úkol. Použili jsme nejmodernější model Transformeru a jako dodatečný zdroj dat jsme použili anglicko-hindský paralelní korpus IITB.

Z různých skladeb multimodálního úkolu jsme se zúčastnili skladby "Text-Only" pro hodnocení a testovací sady. Naše podání je mezi konkurenty špičkové jak z hlediska automatického, tak manuálního hodnocení.

Na základě automatických skóre předčí naše pouze textové podání i systémy, které v úkolu "multimodální překlad" zohledňují vizuální informace.

Klíčová slova

• systém
• idiap
• multimodální
• překladovou
• úlohu
• 2019