🌟 NVIDIA выпустила Nemotron 3.5 Bolt E4B Спустя чуть больше недели после релиза, когда вместе с мультимодальной Nemotron 3.5 Super VL вышла её сжатая версия Bolt на 74 млрд параметров, NVIDIA, как и обещала, опубликовала веса совсем компактной модели для периферийных устройств. Происхождение у новинки другое, чем у старшего Bolt. Если тот получился сжатием Super VL, то E4B собран на Gemma 4 E4B от Google, которую NVIDIA дообучила с подкреплением под следование инструкциям, многошаговый вызов инструментов и диалоги. В модели 8 млрд параметров, из которых на токен работают 4 млрд, контекст 64 тысячи токенов, поддерживается 35 языков. Квантование до 4 бит сжимает её примерно до 4 ГБ потребления памяти, рассуждения включаются и выключаются, а их длину можно ограничить ради скорости. Рассчитана модель на видеокарты GeForce RTX, платы Jetson и мини-компьютеры Spark. 🟡Тесты На RTX 5070 первый токен появляется через 548 мс, дальше идёт 133 токена в секунду. На плате Jetson Orin Nano те же замеры дают 5,8 секунды до первого токена и 15,5 токена в секунду, так что обещанная отзывчивость сильно зависит от железа. По замерам NVIDIA, Bolt E4B в среднем на 40% лучше предыдущей Nemotron 3 Nano 4B и тратит до 80% меньше токенов на ответ. Модель обходит родительскую Gemma 4 E4B почти везде, но Qwen3.5 4B остаётся сильнее в работе с инструментами, 61,7 против 52,3 на Tau2-Bench, и в длинном контексте, 95,4 против 85,8 на RULER. Вместе с весами в BF16 и GGUF, опубликованы отдельные вспомогательные модели-черновики по методу DFlash, которые предлагают сразу несколько следующих токенов, а основная модель их проверяет, что по словам NVIDIA даёт до 21% прироста скорости. Поддержку уже завезли в llama.cpp, Ollama, LM Studio, vLLM и SGLang.
NVIDIA发布Nemotron 3.5 Bolt E4B
🌟 NVIDIA 发布 Nemotron 3.5 Bolt E4B 发布一周多一点后,当其具有 740 亿个参数的 Bolt 压缩版本与多模态 Nemotron 3.5 Super VL 一起发布时,NVIDIA 正如所承诺的那样,发布了用于外围设备的非常紧凑模型的权重。
AI 摘要:要点
- 🌟 NVIDIA 发布 Nemotron 3.5 Bolt E4B 发布一周多一点后,当其具有 740 亿个参数的 Bolt 压缩版本与多模态 Nemotron 3.5 Super VL 一起发布时,NVIDIA 正如所承诺的那样,发布了用于外围设备的非常紧凑模型的权重。
NVIDIA发布Nemotron 3.5 Bolt E4B
相关文章
“言多于行”:哈萨克斯坦数字化背后的真正原因是什么?
💬“言多于行”:哈萨克斯坦数字化背后的真正原因是什么?哈萨克斯坦正在积极实施人工智能,推出数字平台和超级计算机。但你怎么知道技术是否真的让人们的生活变得更轻松呢?在 Aziz Shuzheev 的新博客中......
一直谈论数字化已经不够了。真正改变了什么?
在我看来,最近的总统讲话中有一句话比许多有关技术的响亮言论更值得关注。国家元首表示,在数字化方面我们仍然“言多于行”。这句话很短。但对于我们所有的数字...
ENCircumventing the Computational Hardness of Computational Arbitrage
arXiv:2610.40831v1 Announce Type: new Abstract: AI model marketplaces host providers with heterogeneous costs and capabilities. These differences create an opportunity for computational arbitrage (Olmedo et al., 2026), in which an intermediary purchases inference from a…
ENBeyond Plausible Prediction: Safety Sufficiency in Web World Models
arXiv:2610.40798v1 Announce Type: new Abstract: Web world models increasingly predict the consequences of candidate actions before agents act, yet a plausible predicted future does not necessarily support the correct safety decision. In a matched human evaluation of 3,000…
