NVIDIA разрабатывает Nemotron 4 — открытую ИИ-модель на триллион параметров

NVIDIA разрабатывает новое семейство открытых моделей Nemotron 4, которое должно конкурировать с ведущими открытыми системами в мире. Старшая версия получит не менее одного триллиона параметров. Дату выпуска компания не назвала, финальное обучение еще не завершено. Модель может быть готова поздней осенью. В NVIDIA не подтвердили детали публикации, сославшись на прежние заявления о работе над Nemotron 4.

Кари Бриски, вице-президент по генеративному ИИ
Компания инвестирует в Nemotron, поскольку считает доступные передовые открытые модели необходимыми для каждой компании и страны: они укрепляют безопасность, ускоряют инновации и дают основу, на которую можно опираться от поколения к поколению.

NVIDIA входит в число немногих крупных американских компаний, которые выпускают открытые модели. Интерес к ним вырос в этом году на фоне увеличения расходов на ИИ и появления недорогих китайских моделей, приближающихся по возможностям к системам OpenAI и Anthropic. Дополнительное внимание к теме привлекла серия раскрытых взломов с участием автономных ИИ-агентов — у открытых моделей нет ограничений на использование в сфере кибербезопасности. В июле компания создала коалицию с другими участниками рынка для разработки и совместного использования инструментов безопасности ИИ. NVIDIA также подписала вместе с Microsoft и другими технологическими компаниями открытое письмо в поддержку моделей с открытыми весами.

В тот же день NVIDIA представила Nemotron 3.5 Lightning — модель для код-ревью, работы с инструментами, мониторинга оповещений безопасности и ответов на вопросы по биллингу. Также вышла NeMo Switchyard — открытая библиотека маршрутизации, которая автоматически направляет задачи к наиболее подходящим моделям.

Источник: The Information