[NeurIPS'24 Spotlight, ICLR'25, ICML'25] To speed up Long-context LLMs' inference, approximate and dynamic sparse calculate the attention, which reduces inference latency by up to 10x for pre-filling on an A100 while mai
AI オープンソース
GitHub 上の注目すべき AI オープンソースを厳選：大規模モデル、エージェント、RAG、ローカルデプロイ、画像・音声…現在 1047 件を掲載。
Cloudflare、Vercel、Netlify などに無料でデプロイできるプロジェクトをお探しですか？ 無料デプロイ厳選 をご覧ください
すべて 1047🧠 大規模言語モデル 26🤖 AI エージェント 164🧩 アプリ開発プラットフォーム 23📚 RAG とナレッジベース 46💬 チャット UI とクライアント 41🖥️ ローカル推論とデプロイ 87👨💻 AI コーディング 99🛠️ 開発フレームワークと SDK 47🔌 MCP とツールエコシステム 34🎨 画像生成 25🎬 動画生成 17🎙️ 音声とオーディオ 44👁️ コンピュータビジョン 28📄 ドキュメント解析とスクレイピング 24🗄️ ベクトルデータベース 25🏋️ 学習・ファインチューニングと MLOps 75🧪 評価・可観測性・安全性 81🚪 API ゲートウェイとプロキシ 12🔎 検索とディープリサーチ 15⚙️ ディープラーニング基盤ライブラリ 56🏷️ データとアノテーション 31🔬 業界・研究向け AI 34⚡ 効率化ツール 13
Readymade evaluators for your LLM apps
🥤 RAGLite is a Python toolkit for Retrieval-Augmented Generation (RAG) with DuckDB or PostgreSQL
Enterprise-grade landing zone for AI agent applications on Azure. Deploy the secure infrastructure, the agent app, or both — built on Microsoft Foundry and Microsoft Agent Framework, with Zero-Trust networking, observabi
NVTabular is a feature engineering and preprocessing library for tabular data designed to quickly and easily manipulate terabyte scale datasets used to train deep learning based recommender systems.
a self-hosted webui for 30+ generative ai
An autoML framework & toolkit for machine learning on graphs.
Weave is a toolkit for developing AI-powered applications, built by Weights & Biases.
Open-source autonomous AI penetration testing. 50 specialist agents across web, API, cloud, Active Directory, Kubernetes, CI/CD and AI/LLM (OWASP LLM Top 10). Runs on a local LLM behind a Privacy Gateway. Integrates with
The nnsight package enables interpreting and manipulating the internals of deep learned models.
Modular Reinforcement Learning (RL) library (implemented in PyTorch, JAX, and NVIDIA Warp) with support for Gymnasium/Gym, NVIDIA Isaac Lab, MuJoCo Playground and other environments
A security scanner for your LLM agentic workflows
A FastAPI service for semantic text search using precomputed embeddings and advanced similarity measures, with built-in support for various file types through textract.
Active learning for systematic reviews
RAFT contains fundamental widely-used algorithms and primitives for machine learning and information retrieval. The algorithms are CUDA-accelerated and form building blocks for more easily writing high performance applic
Kubernetes AI Toolchain Operator