大模型微调速度提升 2 倍、显存减少 70%,单卡也能训练。
Soup
Fine-tune LLMs from one YAML. Layer streaming trains an 8B model on a 4 GB laptop GPU.
- 仓库
- MakazhanAlpamys/Soup
- Stars
- ★ 8,593
- Forks
- 1,382
- 语言
- Python
- 许可证
- Apache-2.0
- 最近更新
- 2026-10-12
- 访问次数
- 0
LLM本地部署
同类项目
统一高效微调 100+ 大模型,零代码 Web 界面,国内最流行的微调工具。
统一的 AI 计算引擎,用于分布式训练、调参、推理与服务。
机器学习与 GenAI 生命周期管理平台,含追踪与评测。
🧠 Train a 64M-parameter LLM from scratch in just 2h!
DeepSpeed is a deep learning optimization library that makes distributed training and inference easy, efficient, and effective.