- «Они производятся, перерывов не было».... (1198)
- Цири в «Ведьмаке 4» заговорит новым голосом... (1423)
- «Москвич» больше не топ: отечественный... (1020)
- Toyota RAV4 в России снова можно купить по... (1022)
- За обнаруженные уязвимости в «VK Видео»... (1294)
- Новинка Huawei с запасом хода более 1500 км... (1108)
- В Россию привезли самый необычный «Гелик»:... (954)
- Следующий Chery Tiggo с новым дизайном... (887)
- Всё ближе к старту: на Байконуре заправили... (839)
- Россия заняла третье место в мире по... (764)
- В России вышли роботы-пылесосы Trouver E20... (898)
- 147-сильный седан от суббренда Chery стал... (715)
- Россиянам предлагают Jetour Dashing со... (775)
- Полноприводный Geely Atlas Pro продают в... (697)
- Покупатели Chery Tiggo 8 Pro в России могут... (737)
- Нелинейная RPG от ведущих разработчиков The... (822)
С момента установки первой стойки крупнейшего в мире ИИ-суперкомпьютера Colossus до начала работ прошло всего 19 дней. Сетевое оборудование Nvidia Ethernet ускоряет работу
Дата: 2024-10-29 06:40
Nvidia объявила о том, что суперкомпьютерный кластер Colossus компании xAI, состоящий из 100 000 графических процессоров Nvidia Hopper Tensor Core в Мемфисе, штат Теннесси, достиг такого огромного масштаба благодаря использованию сетевой платформы Nvidia Spectrum-X Ethernet, которая разработана для обеспечения высочайшей производительности для многопользовательских гипермасштабируемых фабрик ИИ с использованием стандартизированного Ethernet для сети удаленного прямого доступа к памяти (RDMA).
Colossus, крупнейший в мире суперкомпьютер с искусственным интеллектом, используется для обучения семейства крупных языковых моделей Grok компании xAI, а чат-боты предлагаются в качестве функции для подписчиков X Premium. xAI находится в процессе удвоения размера Colossus до общего числа 200 000 графических процессоров Nvidia Hopper.
Изображение MuskxAI и Nvidia построили вспомогательное оборудование и современный суперкомпьютер всего за 122 дня, вместо типичного срока для систем такого размера, который может занять от нескольких месяцев до нескольких лет. С момента, когда была установлена первая стойка, до начала обучения прошло 19 дней.
При обучении чрезвычайно большой модели Grok суперкомпьютер Colossus достигает беспрецедентной производительности сети. На всех трех уровнях сетевой структуры система испытала нулевую задержку приложений или потерю пакетов из-за столкновений потоков. Она сохранила 95% пропускной способности данных, обеспечиваемой контролем перегрузки Spectrum-X. Такого уровня производительности невозможно достичь при масштабировании с помощью стандартного Ethernet, который создает тысячи коллизий потоков, обеспечивая при этом лишь 60% пропускной способности данных.
Изображение Musk«xAI построила самый большой и мощный суперкомпьютер в мире, — заявил представитель xAI. — Графические процессоры Nvidia Hopper и Spectrum-X позволяют нам раздвинуть границы обучения моделей ИИ в огромных масштабах, создавая сверхбыструю и оптимизированную фабрику ИИ на основе стандарта Ethernet».
Ранее глава Nvidia назвал Илона Маска сверхчеловеком, комментируя скорость создания суперкомпьютера Colossus.
Подробнее на iXBT
Предыдущие новости
В России сильно поменялись цены на Exeed
Две модели Exeed подорожали в России, о чем рассказали специалисты сайта «Цена Авто». Кроссовер Exeed RX в исполнении Platinum стал дороже на 60 тысяч рублей. Теперь цена данной версии составляет 4 960 000 рублей. Фото Exeed Кроссовер Exeed LX в комплектации Prestige Plus стал дороже на целых 370 тысяч рублей (+12,0%) и оценивается уже в 3 460 000 рублей. А рестайлинговый LX...
Oting будет поставлять в Россию Nissan Qashqai
Российское представительство китайской компании Sinomach Automobile, которая официально поставляет в Россию машины под брендом Oting, собирается заняться параллельным импортом. Раздел «Параллельный импорт» появился на официальном сайте марки Oting, о чем пишет Журнал Авто.ру. В РФ собираются привезти кроссовер Nissan Qashqai второго поколения. Фото Nissan Сегодня в Китае...
В Россию привезли большую партию Nissan X-Trail нового поколения
В Россию привезли большую партию автомобилей Nissan X-Trail нового поколения, о чем сообщает издание Quto. Крупный автосалон предлагает партию машин Nissan X-Trail китайской сборки, который выпущены на мощностях совместного предприятия Dongfeng-Nissan. Цена составляет 4,2 млн рублей, при этом еще летом за такие машины просили 3 млн рублей. Фото Quto Как отмечает Quto,...
Илон Маск впервые заговорил об имплантате Neuralink, который устранит боли в спине и шее, улучшит качество сна
Илон Маск говорит, что Neuralink должна отдать приоритет созданию имплантата для устранения боли в спине и шее. Я все больше убеждаюсь, что Neuralink следует отдать приоритет созданию имплантата, который может устранить боль в спине и шее. Это значительно улучшит счастье людей во время бодрствования, а также улучшит качество сна. Neuralink Изображение Midjourney Neuralink...