Функция визуального перевода мобильного приложения Google Translate получила поддержку еще 20 новых языков. Теперь система может при помощи камеры на лету переводить надписи на 27 языках даже без подключения к интернету.
Использовать такое количества языков для визуального распознавания и перевода надписей без подключения к мобильной сети удалось благодаря технологиям глубокого обучения. Для этого специалисты Google тренировали искусственную нейронную сеть на изображении букв и цифр, которые в различной степени намеренно искажали. После этого разработчики «ослабили» сложность нейронной сети, занимающейся распознаванием букв. Например, нейронная сеть не будет распознавать перевернутые набок надписи или совсем искаженные буквы.
После того, как нейронная сеть распознала буквы, приложение составляет из них слово и проверяет его через загруженные в память телефона словари. При этом учитывается визуальная схожесть символов, поэтому приложение, например, при распознавании последовательности символов «5uper» проверит в словаре не только его, но и «Super».
К ранее доступным английскому, испанскому, итальянскому, немецкому, португальскому, русскому и французскому языкам добавились болгарский, венгерский, датский, индонезийский, каталанский, литовский, нидерландский, норвежский, польский, румынский, словацкий, турецкий, украинский, филиппинский, финский, хорватский, чешский и шведский. Также доступен односторонний перевод с английского на тайский и хинди.
