12 mirrors 1578989292
8
BentoML 是 AI 应用程序开发人员的平台,提供工具和基础架构来简化整个 AI 产品开发生命周期
Python
1年多前
6854763 mindspore 1604325217
5
MindSpore的vLLM插件,支持基于vLLM框架部署MindSpore模型的推理服务。
Python
2天前
12 mirrors 1578989292
4
vLLM 是一个快速且易于使用的 LLM 推理和服务库
Python
1年多前
12 mirrors 1578989292
2
‌KTransformers‌是由清华大学的KVCache.AI团队与趋境科技联合发布的开源项目
Python
19天前
12 mirrors 1578989292
1
SGLang 是一个针对大语言模型和视觉语言模型的快速服务框架
Python
26天前
12 mirrors 1578989292
1
DeepGEMM 是一个专为简洁高效的 FP8 通用矩阵乘法(GEMM)设计的库
Python
19天前

搜索帮助