Маск заявил, что Colossus2 одновременно обучает 7 моделей, а максимальное число параметров достигает 10 триллионов.

Согласно мониторингу 1M AI News, основатель SpaceX и xAI Маск опубликовал на X пост, в котором говорится, что супервычислительный кластер Colossus 2 компании SpaceXAI в настоящее время одновременно обучает 7 моделей:

1. Imagine V2 — следующее поколение модели для генерации изображений и видео
2. 2 варианта модели с моделью в 1 триллион параметров
3. 2 варианта модели с моделью в 1,5 триллиона параметров
4. модель с 6 триллионами параметров
5. модель с 10 триллионами параметров

Он добавил комментарий «Еще есть кое-что, что нужно догнать» (Some catching up to do). Ранее несколько СМИ сообщали, что следующая флагманская модель xAI Grok 5 по масштабам составляет около 6 триллионов параметров — приведенные в списке 6T этому соответствуют. Модель с 10 триллионами параметров ранее не появлялась в публичных сообщениях.

В своем посте Маск использовал обозначение «SpaceXAI» для объединенной после слияния сущности SpaceX и xAI. Обе компании завершили слияние в феврале этого года, а оценка после слияния составила около 1,25 триллиона долларов США. Colossus 2 был запущен 17 января — это первый в мире AI-тренировочный кластер уровня гигафлопс (гигава), и планируется, что в этом месяце он будет обновлен до 1,5GW.