NVIDIA направила огромные вычислительные мощности на поддержку DeepSeek V4

3001
0
Добавить в Google News
NVIDIA направила огромные вычислительные мощности на поддержку DeepSeek V4

Выход DeepSeek V4 стал заметным апгрейдом в мире ИИ — разработчики серьёзно переработали архитектуру, сократив нагрузку на вычисления и память. И, похоже, железо уже догоняет амбиции модели.

Обновлённая версия требует всего 27% вычислений на один токен по сравнению с прошлым поколением, а использование KV-кэша сократилось до 10% даже при контексте в миллион токенов. Вместе с этим представили две версии модели: Pro с размером до 1,6 триллиона параметров и более лёгкую Flash на 284 миллиарда.

На старте NVIDIA заявила о полной поддержке DeepSeek V4 на архитектуре Blackwell. По их данным, новые GPU уже способны обеспечивать около 3500 токенов в секунду на одну карту, хотя это лишь начальные показатели, которые будут расти по мере оптимизации.

Ключевую роль играет использование квантования FP4, позволяющего снижать задержки и уменьшать нагрузку на память. В связке с оптимизированными CUDA-ядрами и продвинутой параллелизацией это даёт заметный прирост производительности.

Интересно, что поддержку аналогичных инструкций получат и будущие чипы Huawei Ascend 950, ожидаемые в 2026 году. Это означает, что DeepSeek V4 сможет эффективно работать не только на западных GPU, но и на китайских решениях, усиливая конкуренцию на рынке ИИ.

Комментировать
Другие публикации по теме
ИИ Claude сдал полиции женщину, готовящую убийство
ИИ Claude сдал полиции женщину, готовящую убийство
Жительница Флориды использовала Claude как личный дневник, но одна из записей привлекла внимание системы безопасности. Женщина написала о намерении устроить стрельбу в офисе шерифа, после чего сообщение проверил сотрудник Anthropic.
Вчера в 14:25
465
5
Форум
Искусственный интеллект изменит мир навсегда до того, как инвесторы прекратят вливать триллионы в него
Искусственный интеллект изменит мир навсегда до того, как инвесторы прекратят вливать триллионы в него
Масштабы финансовых вливаний в развитие искусственного интеллекта значительно превосходят затраты времен прошлых технологических революций, включая эпохи активного строительства железных дорог и расцвета доткомов.
Вчера в 11:12
338
2
Форум
Взлом Hugging Face, скандалы с утечками и суды: как OpenAI теряет ключевых специалистов на фоне расследований ФТК
Взлом Hugging Face, скандалы с утечками и суды: как OpenAI теряет ключевых специалистов на фоне расследований ФТК
Руководство OpenAI столкнулось с новым кадровым кризисом: компанию покинул Дэвид Робинсон, возглавлявший команду Safety Systems и отвечавший за вопросы безопасности искусственного интеллекта.
4 октября в 19:00
453
1
Форум