Нейросеть от «Сбера» научили генерировать тексты на 61 языке мира

Входящая в экосистему СберБанка, компания SberDevices сообщила о создании многоязычной версии нейросети GPT-3 — нейросеть, именуемая mGPT может создавать тексты на различных языках мира. Всего поддерживается 61 язык, в список которых входят в том числе языки народов России и стран СНГ.

По словам представителей пресслужбы, mGPT — это уникальная генеративная модель, которая поддерживает такое значительное количество языков. нейросеть доступна в двух вариантах: базовой, с 1,3 миллиарда параметров, опубликованной в открытом доступе в облачном хранилище «СберДиск», и расширенной, с 13 миллиардами параметров, которая скоро станет доступна на платформе машинного обучения ML Space от SberCloud.

Причем эта модель может использоваться как просто для создания текста, так и для решения различных задач в области обработки естественного языка на одном из поддерживаемых языков путём дообучения или в составе нескольких моделей. 

Например, можно научить автоматизированную систему отвечать на вопросы, определять эмоциональную окраску текста, извлекать из текста имена, фамилии, названия компаний и тому подобное. Модель может также использоваться как компонент различных речевых технологий — например, для улучшения качества распознавания речи, генерации сценариев диалоговых систем и так далее.

Чтобы понять масштабность приведем перечень поддерживаемых языков, доступный в модели mGPT: азербайджанский, английский, арабский, армянский, африкаанс, баскский, башкирский, белорусский, бенгали, бирманский, болгарский, бурятский, венгерский, вьетнамский, голландский, греческий, грузинский, датский, иврит, индонезийский, испанский, итальянский, йоруба, казахский, калмыцкий, киргизский, китайский, корейский, латышский, литовский, малайский, малаялам, маратхи, молдавский, монгольский, немецкий, осетинский, персидский, польский, португальский, румынский, русский, суахили, таджикский, тайский, тамильский, татарский, телугу, тувинский, турецкий, туркменский, узбекский, украинский, урду, финский, французский, хинди, чувашский, шведский, якутский, японский.