Google NMT (Neural Machine Translation)

Google Neural Machine Translation (GNMT) ist ein neuronales Übersetzungssystem, das von Google entwickelt wurde und seit November 2016 in Google Translate verwendet wird. GNMT verwendet ein künstliches neuronales Netzwerk, um die Flüssigkeit und Genauigkeit von Übersetzungen zu verbessern.

Architektur

Das GNMT-System besteht aus zwei Hauptblöcken: einem Encoder und einem Decoder, beide mit einer LSTM-Architektur (Long Short-Term Memory) und acht 1024-breiten Schichten. Ein einfaches, einlagiges, 1024-breites Feedforward-Attention-Mechanismus verbindet die beiden Blöcke. Das System hat insgesamt etwa 160 Millionen Parameter.

Funktionsweise

GNMT verbessert die Übersetzungsqualität, indem es Millionen von Beispielen für Sprachübersetzungen lernt. Das System lernt über Zeit, um natürlichere und bessere Übersetzungen zu erstellen. GNMT übersetzt ganze Sätze auf einmal, anstatt sie Stück für Stück zu übersetzen. Das System kann auch interlinguale Maschinenübersetzungen durchführen, indem es die Semantik des Satzes codiert, anstatt phrase-basierte Übersetzungen zu memorieren.

Geschichte

Das Google Brain-Projekt wurde 2011 im "geheimen Google X-Forschungslabor" gegründet. Im November 2016 wurde GNMT vorgestellt und seitdem wird es in Google Translate verwendet. Die Ausbildung von GNMT war ein großer Aufwand und erforderte etwa 100 PFLOP/s*Tag an Rechenleistung.

Vorteile

GNMT bietet einige Vorteile gegenüber traditionellen statistischen Übersetzungsmethoden. Es kann ganze Sätze auf einmal übersetzen, was zu natürlicheren und besseren Übersetzungen führt. Das System kann auch interlinguale Maschinenübersetzungen durchführen und ist in der Lage, seltene Wörter zu übersetzen.

Einsatz

GNMT wird in Google Translate verwendet und unterstützt mehr als 100 Sprachen. Das System wird kontinuierlich verbessert und erweitert, um die Übersetzungsqualität zu verbessern.

Quellen

• [1] Wikipedia: Google Neural Machine Translation
• [2] Research.google: Google's Neural Machine Translation System: Bridging the Gap between Human and Machine Translation
• [3] arXiv: Google's Neural Machine Translation System: Bridging the Gap between Human and Machine Translation