Сквозная платформа машинного обучения от Google с развитой экосистемой.
Tokenizers
极速的现代分词器实现。
- Категория
- ⚙️ Библиотеки глубокого обучения
- Репозиторий
- huggingface/tokenizers
- Звёзды
- ★ 11 181
- Форки
- 1 227
- Язык
- Rust
- Лицензия
- Apache-2.0
- Последнее обновление
- 2026-10-15
- Переходы
- 0
Токенизация
Похожие проекты
Единый интерфейс к десяткам тысяч предобученных моделей для текста, изображений, аудио и мультимодальных задач.
Фреймворк глубокого обучения с динамическими вычислительными графами — основной выбор и в науке, и в индустрии.
Классическая библиотека машинного обучения для Python: простая и эффективная.
多后端（JAX / TF / PyTorch）的深度学习 API。
最简单快速的中型 GPT 训练与微调仓库。