DeepSeek перенесла DeepGEMM на Huawei Ascend и выжала из железа 99,8%
DeepSeek перенесла DeepGEMM на Huawei Ascend и выжала из железа 99,8%.
- 01.DeepSeek перенесла DeepGEMM на Huawei Ascend и выжала из железа 99,8%.
⚡️ DeepSeek перенесла DeepGEMM на Huawei Ascend и выжала из железа 99,8% DeepSeek выложила DeepGEMM-Ascend, порт своей библиотеки матричных ядер на NPU Huawei Ascend 950. API остался тем же, что у оригинального DeepGEMM, а сами ядра переписаны под особенности Ascend. Поддерживаются GEMM в FP4, FP8 и BF16, grouped GEMM для MoE, MQA logits и слитые операторы MegaMoE. Плотный GEMM почти упирается в теоретический потолок: FP4 даёт 1701 TFLOPS (98,3% от пика), FP8 861 TFLOPS (99,5%), BF16 431 TFLOPS (99,8%). Внутри JIT-компиляция, конвейеризация на корутинах и тонкая обёртка над матричными инструкциями Ascend. Нужны CANN 9.20, torch_npu и Python 3.10+. Лицензия MIT. https://github.com/deepseek-ai/DeepGEMM-Ascend @ai_machinelearning_big_data
Связанные материалы
Все материалы →ИИ научился говорить почти как человек: компания создателя Twitter представила Dessa
🎙️ ИИ научился говорить почти как человек: компания создателя Twitter представила Dessa Компания Block, сооснователем которой является Джек Дорси, представила голосовую ИИ-модель Dessa. Разработчики утверждают, что она способна вести настолько естественный разговор, что ее…
Apple представила новый iPad mini с OLED-экраном и чипом A20 Pro
Компания Apple представила новое поколение планшета iPad mini. Устройство оснащено 8,5-дюймовым OLED-дисплеем, процессором A20 Pro и защитой от воды и пыли по стандарту IP67. По словам производителя, новая модель справляется с задачами искусственного интеллекта лучше предыдущего поколения…
Швеция ограничила доступ к ChatGPT и Claude на рабочих компьютерах правительства
С 26 октября сотрудники аппарата правительства Швеции не могут пользоваться браузерными версиями ChatGPT и Claude на служебных компьютерах. Власти опасаются, что работа с не согласованными государством ИИ-сервисами может привести к утечке конфиденциальных данных, передает…