Дообучение LLM в 2 раза быстрее при на 70% меньшем расходе VRAM: хватит и одной видеокарты.
Transformer Engine
A library for accelerating Transformer models on NVIDIA GPUs, including using 8-bit and 4-bit floating point (FP8 and FP4) precision on Hopper, Ada and Blackwell GPUs, to provide better performance with lower memory util
- Категория
- 🏋️ Обучение, дообучение и MLOps
- Репозиторий
- NVIDIA/TransformerEngine
- Звёзды
- ★ 3 585
- Форки
- 865
- Язык
- Python
- Лицензия
- Apache-2.0
- Последнее обновление
- 2026-10-16
- Переходы
- 0
PyTorch
Похожие проекты
Единое и эффективное дообучение более 100 LLM с веб-интерфейсом без кода; самый популярный в Китае инструмент дообучения.
Единый вычислительный движок для ИИ: распределённое обучение, подбор параметров, инференс и сервинг.
机器学习与 GenAI 生命周期管理平台，含追踪与评测。
🧠 Train a 64M-parameter LLM from scratch in just 2h!
微软的深度学习优化库，让分布式训练与推理简单高效。