Яндекс выложил в открытый доступ YaLM 100B – нейросеть для генерации и обработки текстов

Яндекс выложил в открытый доступ нейросеть для генерации и обработки текстов на русском и английском языках ЯЛМ 100Б. Сейчас это крупнейшая GPT-подобная нейронная сеть, которая была опубликована в открытом доступе.

YaLM 100B содержит 100 миллиардов параметров. Нейронную сеть можно использовать для решения задач, связанных с обработкой естественного языка.

Языковые модели из семейства ЯЛМ определяют принцип построения текста и порождают новые на основе законов языкознания и своего познания мира. Например, они умеют придумывать идеи для рекламных кампаний, создавать описания продуктов и видеоролики. С их помощью можно генерировать любые тексты (стихи, ответы, поздравления и так далее), а также классифицировать их, например, по стилю речи, — говорится в сообщении Яндекса.

Нейросеть YaLM используется более чем в 20 проектах Яндекса, включая Поиск и голосовой помощник Алиса.

За время обучения ЯЛМ 100Б обработал около 2 ТБ текстов из открытых наборов данных и интернета на английском и русском языках.

Модель распространяется под публичной лицензией Apache 2.0 и доступна на GitHub для разработчиков и исследователей по всему миру.

Напомним, ранее Яндекс открыл компаниям доступ к сервису для борьбы с ботами и спамом.

Источник: пресс-служба Яндекса.