返回搜索GitHub

开发者工具 / 自托管应用 / Local AI

mlx-openai-server

在 Apple Silicon 上提供 OpenAI 兼容接口的 MLX 模型服务器

质量分92
337 Stars
2026-05-18T18:16:18Z
unknown
medium

中文速读

mlx-openai-server:在 Apple Silicon 上提供 OpenAI 兼容接口的 MLX 模型服务器。适合:使用 Mac/Apple Silicon 本地跑模型的开发者;需要把本地模型接入 OpenAI SDK 的团队。不适合:没有 Apple Silicon 环境的人;需要托管云服务的人。核心功能包括:OpenAI 兼容 API、MLX 推理、FastAPI 服务。快速试用:README 提供安装或快速开始步骤,可按项目说明做小规模试用。部署难度:medium。在当前信息下值得进入候选清单。

适合

  • 使用 Mac/Apple Silicon 本地跑模型的开发者
  • 需要把本地模型接入 OpenAI SDK 的团队

不适合

  • 没有 Apple Silicon 环境的人
  • 需要托管云服务的人

选型答案

mlx-openai-server 适合什么场景?使用 Mac/Apple Silicon 本地跑模型的开发者;需要把本地模型接入 OpenAI SDK 的团队
mlx-openai-server 的试用和部署门槛如何?已发现 4 个试用、文档或演示入口,可从页面的“快速试用”区域打开。 当前难度标记为“中等难度”,许可证记录为“unknown”。
选择 mlx-openai-server 时要注意什么?没有 Apple Silicon 环境的人;需要托管云服务的人
数据来源和更新时间GitHub 仓库 cubist38/mlx-openai-server,最近记录的推送时间为 2026-05-18T18:16:18Z

标签

Local AI自托管应用Pythonapple-siliconcontinuous-batchingfastapifluximage-generation