local-model-infra

最佳 LocalAI 替代品

LocalAI 提供自托管的 OpenAI 兼容 API,让应用以最小改动切换到本地模型。

访问 LocalAI

工具详情

基础信息

属性详情
发布时间2023
发布公司LocalAI
发布国家国际社区
国家/区域限制自托管 / 本地

价格

属性详情
计费模式open-source
免费档
起步价$0/mo
方案 1Open Source: Free
方案 2Gallery / extras: Optional paid models

功能清单

功能详情
操作系统平台Linux / Docker(macOS 与 Windows 可用容器)https://localai.io/installation/
模型管理界面
本地推理
OpenAI 兼容 API
GPU 加速
代码向量化
多模型支持
Docker 支持
开源https://github.com/mudler/LocalAI
可自托管
隐私模式
团队协作
使用场景自托管 OpenAI 兼容 API 网关,对接本地/私有模型

优缺点

优点

  • 以 OpenAI API 兼容为一等目标
  • 支持多种模型后端
  • 适合把云 API 替换为本地

缺点

  • 搭建比 Ollama 更重
  • 性能随后端变化
  • 消费级桌面体验不如 LM Studio

免责声明:非金融或投资建议,仅供开发者工具对比与教育用途。信息可能变更,购买前请以厂商官网为准。