Affinez des LLM deux fois plus vite avec 70 % de VRAM en moins : un seul GPU suffit pour entraîner.
Transformer Engine
A library for accelerating Transformer models on NVIDIA GPUs, including using 8-bit and 4-bit floating point (FP8 and FP4) precision on Hopper, Ada and Blackwell GPUs, to provide better performance with lower memory util
- Dépôt
- NVIDIA/TransformerEngine
- Étoiles
- ★ 3 585
- Forks
- 865
- Langage
- Python
- Licence
- Apache-2.0
- Dernière mise à jour
- 2026-10-16
- Visites
- 0
PyTorch
Projets similaires
Fine-tuning unifié et efficace de plus de 100 LLM avec une interface web sans code ; l’outil de fine-tuning le plus populaire en Chine.
Moteur de calcul IA unifié pour l’entraînement distribué, le réglage, l’inférence et le serving.
机器学习与 GenAI 生命周期管理平台，含追踪与评测。
🧠 Train a 64M-parameter LLM from scratch in just 2h!
DeepSpeed is a deep learning optimization library that makes distributed training and inference easy, efficient, and effective.