当前位置: 首页 > article >正文

API统一管控平台:new-api、one-api、Grok2API、Quotio、UniAPI、Sub2API、OpenAI Router

之前写过类似文章请参考LLM系列之API聚合平台OpenRouter、TogetherAI、LiteLLM。本文继续汇总几个开源API统一管控平台。one-api官网开源GitHub30.1K Star5.8K Fork平台旨在解决多API并行模式的问题接口差异大代码重复且脆弱每个平台的API协议、参数格式、认证方式、错误码甚至响应结构都不尽相同。开发者需为每个平台单独编写适配层一旦某家平台升级接口多处代码需同步修改极易出错。API Key分散管理安全风险高开发人员各自持有不同平台的Token密钥硬编码在代码或配置文件中容易泄露。无法统一控制用量、权限和生命周期离职员工仍可能保留访问权限。调试与测试成本高切换模型需修改代码或配置无法快速对比不同模型效果。缺乏统一日志、监控和计费视图难以评估各平台性价比。上线后难以灵活调度无法根据成本、性能或可用性动态切换后端模型。某个平台限流或故障时缺乏自动降级或故障转移机制。开源大模型API聚合网关通过提供标准化的OpenAI兼容接口屏蔽底层平台差异实现一次接入多端兼容。浏览器打开http://localhost:3000开始体验输入用户名密码root/123456。优势完全屏蔽各平台的技术差异所有后端模型均通过统一的/v1/chat/completions接口被调用请求/响应格式严格遵循OpenAI API规范前端或业务代码无需感知后端是GPT、Qwen、Llama3。自动处理各平台特有的字段映射如max_tokens、max_output_tokens、认证头、错误码转换等细节。集中管理所有平台的Token与权限所有第三方平台的API Key仅由one-api后台管理员配置普通开发者无需接触原始密钥为每个开发者或应用分配独立的访问令牌具备使用额度限制按Token数或请求次数可用模型白名单如仅允许调用qwen-turboIP白名单、速率限制、QPS控制支持密钥轮换、禁用、审计日志大幅提升安全性与合规性。提升开发效率与系统灵活性快速切换模型只需在请求中更改model字段即可对比不同模型效果无需改代码。支持自定义模型别名如将gpt-4映射到qwen-max实现无缝迁移。本地模型无缝集成通过Ollama、FastChat等提供OpenAI兼容接口可将私有模型纳入统一调度体系。增强生产环境的可靠性与可观测性多渠道负载均衡为同一模型配置多个供应商如多个OpenAI账号自动分摊请求。故障自动转移当首选渠道失败如配额耗尽、网络超时自动尝试备用渠道。完整请求日志与用量统计记录每次调用的模型、耗时、Token消耗、费用估算便于成本分析与优化。Web管理界面可视化管理用户、渠道、模型、配额降低运维门槛。配置文件示例ai:openai:api-key:xxxbase-url:http://ip:3000/chat:options:model:qwen3-maxembedding:options:model:text-embedding-3-largedimensions:1024new-api官网开源GitHub19.2K Star3.7K ForkLLM API Key统一管理平台把各种LLM Provider的API入口、Key、渠道、配额、模型映射、审计统一管理对外提供稳定的兼容接口对内做鉴权、分发、路由、限流、日志脱敏、密钥加密存储、监控与成本控制。让客户端保持稳定接口把复杂度留在网关层解决。问题多Provider分裂OpenAI、Anthropic、Gemini、本地模型……接口差异带来维护成本Key管理混乱密钥散落在各服务里轮换、权限、审计都很难配额与成本不可控没有统一的限流、计费与监控超支和滥用很常见模型命名不统一同名不同能力、不同名同能力客户端适配非常痛苦稳定性问题单一渠道故障会直接影响业务需要路由与容灾功能渠道与Key管理Distribution面向团队/多租户的常见能力管理多个渠道不同Provider/不同Key组做分发、配额与访问控制降低Key滥用、泄露等风险模型映射与兼容层Model Mapping解耦前端命名和后端路由支持模型映射/重命名更容易做灰度、替换与统一接入路由与稳定性负载均衡/容灾面向生产实践的关键能力支持负载均衡与故障切换思路按项目说明为准多家Provider做成稳定服务出口亮点网关/控制面思路成熟把权限、配额、路由、模型管理集中处理客户端更简单更适合团队化使用多租户与分发能力不仅是反代而是平台层可部署可自建提供Docker等部署方式适合内网/自托管场景Grok2API官网生产就绪的开源GitHub3.9K Star1.4K ForkFastAPI服务为Grok提供兼容OpenAI的API接口。将Grok的基于Web的API转换为标准化的REST API具备全面的令牌管理、自动负载均衡和多后端存储支持。特性兼容OpenAI的API标准/v1/chat/completions端点参数完全对齐多模态支持聊天、图像生成/编辑、视频生成和视频放大令牌池管理跨多个令牌的自动负载均衡、健康监控和故障转移自动令牌刷新可配置间隔的计划令牌刷新多存储后端支持本地(TOML/JSON)、Redis、MySQL和PG管理面板用于令牌管理、配置和监控的基于Web的UI流式与非流式所有模型类型均支持两种响应模式NSFW模式支持无限制内容生成的开关需要代理设置Docker部署支持多Worker的容器化部署模型支持grok-3、grok-3-fast、grok-4、grok-4-mini、grok-4-fast、grok-4-heavy、grok-4.1、grok-4-thinking、grok-imagine-1.0、grok-imagine-1.0-video部署git clone https://github.com/chenyme/grok2api docker compose up -d uv sync uv run main.py浏览器打开http://localhost:8000/admin登录密码grok2api。暴露端点POST /v1/chat/completions POST /v1/images/generationsQuotio官网专门为解决多API Key账号管理痛点而生的开源GitHub3.9K Star244 Fork工具显示各个AI账号的剩余额度。功能在本地启动一个代理服务只需要把编程工具的Base URL指向代理服务地址检测到当前使用的Key爆出Rate Limit或余额不足的错误时自动切换到下一个可用的Key重试请求。在后台默默调度资源。API路由器通过配置规则可灵活地分配策略让不重要请求走便宜的API通道核心逻辑走高质量通道。Sub2API功能强大的开源GitHub3.4K Star597 ForkAI API网关平台旨在解决AI订阅服务的统一接入、配额分发和成本管理问题。体验地址用户名密码adminsub2api.com/admin123。允许将多个上游AI服务的订阅接入平台然后通过平台生成统一的API Key分发给不同的用户。当用户使用这些Key调用AI服务时Sub2API负责处理鉴权、计费、负载均衡和请求转发。这一切都在一个统一的管理后台中清晰可见让复杂的订阅管理变得简单高效。核心功能多账号管理支持多种类型的上游账号包括OAuth认证和传统的API Key模式API Key分发为不同的用户生成和管理独立的API Key并设置不同的权限和额度精确计费用量追踪精确到Token级别成本计算一目了然智能调度当有多个可用账号时系统能智能选择并支持粘性会话以保证对话的连续性并发控制可对用户和上游账号设置并发请求限制防止滥用速率限制可灵活配置请求速率和Token速率保障服务稳定管理后台提供现代化Web界面用于实时监控和管理所有资源。技术栈后端Go 1.25.7、Gin、Ent前端Vue 3.4、Vite 5、TailwindCSS安装curl-sSLhttps://raw.githubusercontent.com/Wei-Shaw/sub2api/main/deploy/install.sh|sudobashsudosystemctl start sub2apisudosystemctlenablesub2api# 升级docker-compose.ymldocker-compose-fdocker-compose.local.yml pull# 源码gitclone https://github.com/Wei-Shaw/sub2api.gitcdsub2api# 2. 编译前端cdfrontendpnpminstallpnpmrun build# 3. 编译后端嵌入前端cd../backend go build-tagsembed-osub2api ./cmd/server# 4. 配置并运行cp../deploy/config.example.yaml ./config.yamlnanoconfig.yaml ./sub2api解读编译后端时使用-tags embed参数会将前端静态资源打包进二进制文件实现单文件部署。使用模式环境变量RUN_MODEsimpleUniAPIChrome搜索UniAPI可找到好几个不同的项目uniapi.aiuniapi.top文档托管在GitHubGitHub上也能搜到好几个不同的项目yym686861.2K Star152 Forkzhangtyzzz87 Star34 Fork项目已归档已部署在VercelLiuLucian30 Star6 Forkzhangtyzzz功能列表支持OpenAI及兼容OpenAI协议的服务包括Azure OpenAI、Claude等将不同厂商的API统一转换为OpenAI格式简化调用流程支持模型映射用统一模型名调用不同厂商的实际模型提供模型择优机制根据72小时成功率和首token响应时间选择最佳服务内置断路器机制服务连续失败后自动暂停请求保护系统稳定性优化流式输出把大块响应拆成小块提升视觉效果支持自定义API密钥、BaseURL和模型列表灵活配置通过Vercel部署提供管理面板和安全认证OpenAI RouterGitHub轻量级、持久化、零配置OpenAI API统一网关。功能特性描述统一入口/chat/completions、/embeddings、/images/generations…所有OpenAI兼容接口都能转发多后端支持vLLM、SGLang、lmdeploy、Ollama…任意组合零配置持久化内置SQLite存储路由配置自动保存关机重启不丢失告别繁琐配置文件实时流式SSEChunked Transfer全双工支持流式输出体验和直连原生服务一样开箱即用WebUI自带Gradio管理面板开发者友好完美兼容OpenAI现有的OpenAI SDK、LangChain、LlamaIndex代码不改一行只需更换base_url安装uvaddopenai-router-U# 或pipinstallopenai-router-Uopenai-router--hostlocalhost--port8000浏览器打开http://localhost:8000文档参考http://localhost:8000/docs。示例fromopenaiimportOpenAI# 唯一改变base_url指向路由器clientOpenAI(base_urlhttp://localhost:8000/v1,api_keyxxx)respclient.chat.completions.create(modelgpt-4,messages[{role:user,content:hello}],streamTrue)forchunkinresp:print(chunk.choices[0].delta.content or,end)

相关文章:

API统一管控平台:new-api、one-api、Grok2API、Quotio、UniAPI、Sub2API、OpenAI Router

之前写过类似文章,请参考LLM系列之API聚合平台:OpenRouter、TogetherAI、LiteLLM。 本文继续汇总几个开源API统一管控平台。 one-api 官网,开源(GitHub,30.1K Star,5.8K Fork)平台&#xff0…...

新手友好:5步完成Llama3-8B对话系统的本地部署

新手友好:5步完成Llama3-8B对话系统的本地部署 1. 引言:为什么选择Llama3-8B? 如果你对AI对话模型感兴趣,想自己动手搭建一个,但又担心过程太复杂、电脑配置不够,那今天这篇文章就是为你准备的。 Meta-L…...

效率提升秘籍:用快马平台AI快速生成并对比多种代码性能优化方案

今天想和大家分享一个前端性能优化的实战案例——如何快速对比不同优化方案对大数据列表渲染性能的影响。最近在做一个需要展示上万条数据的项目时,遇到了明显的卡顿问题,正好用InsCode(快马)平台尝试了多种优化方案,效果非常显著。 问题背景…...

解决pnpm安装esbuild时ELIFECYCLE错误的3种方法(附详细步骤)

彻底解决pnpm安装esbuild时ELIFECYCLE错误的实战指南 最近在Vite项目中使用pnpm安装esbuild时,不少开发者遇到了令人头疼的ELIFECYCLE错误。这个错误通常伴随着exit code 1,导致构建流程突然中断。作为一名长期使用pnpm的前端工程师,我深刻理…...

Realistic Vision V5.1虚拟摄影棚教程:自定义ControlNet姿势控制技巧

Realistic Vision V5.1虚拟摄影棚教程:自定义ControlNet姿势控制技巧 1. 项目概述 Realistic Vision V5.1虚拟摄影棚是基于当前最先进的写实风格生成模型开发的本地化工具,能够帮助用户轻松创建专业级摄影作品。这个工具特别适合需要高质量人像生成但又…...

新手零基础入门:在快马平台上运行你的第一个yolov8检测程序

今天想和大家分享一个特别适合机器学习新手的实践项目——用yolov8完成第一个目标检测程序。作为刚接触计算机视觉的小白,我最初被各种环境配置和术语搞得晕头转向,直到发现用InsCode(快马)平台可以跳过繁琐的步骤,直接体验模型效果。 为什么…...

大模型转型实战指南:从入门到求职,避坑全攻略

这两年,大模型技术彻底打破行业壁垒,从科研领域的专属议题,变成后端、测试、运维乃至跨行者的职业新选项,更是不少人职业转型的核心方向。 日常对接学员和行业朋友时,类似的疑问反复出现: “我做测试/运维…...

Windows下Git 2.43.2安装全攻略:从下载到配置的避坑指南

Windows下Git 2.43.2安装全攻略:从下载到配置的避坑指南 对于Windows开发者而言,Git已经成为版本控制的标准工具。但许多新手在初次安装时,面对密密麻麻的选项和术语常常感到困惑。本文将带你一步步完成Git 2.43.2的安装过程,不仅…...

Spring Security框架从入门到精通!

安全管理是Java应用开发中无法避免的问题,随着Spring Boot和微服务的流行,Spring Security受到越来越多Java开发者的重视,究其原因,还是沾了微服务的光。作为Spring家族中的一员,其在和Spring家族中的其他产品如SpringBoot、Spring Cloud等进…...

TCP和UDP可以同时绑定相同的端口吗?

之前有读者在字节面试的时候,被问到:TCP 和 UDP 可以同时监听相同的端口吗?关于端口的知识点,还是挺多可以讲的,比如还可以牵扯到这几个问题:多个 TCP 服务进程可以同时绑定同一个端口吗?客户端…...

基于 IWR6843毫米波雷达 的多人跟踪与跌倒检测系统

这是一个面向室内人体感知场景的毫米波雷达项目,核心功能是:多人目标实时跟踪 跌倒检测可视化。项目基于 IWR6843 DCA1000 实现,页面可以直接完成雷达配置、实时目标显示、轨迹跟踪和跌倒告警展示,适合做演示、方案展示和二次开…...

3分钟掌握RePKG:Wallpaper Engine资源提取与转换全攻略

3分钟掌握RePKG:Wallpaper Engine资源提取与转换全攻略 【免费下载链接】repkg Wallpaper engine PKG extractor/TEX to image converter 项目地址: https://gitcode.com/gh_mirrors/re/repkg RePKG是一款专为Wallpaper Engine设计的强大资源提取工具&#x…...

4大维度精通ExtendScript反编译:开发者必备的JSXBIN解析指南

4大维度精通ExtendScript反编译:开发者必备的JSXBIN解析指南 【免费下载链接】jsxer A fast and accurate JSXBIN decompiler. 项目地址: https://gitcode.com/gh_mirrors/js/jsxer ExtendScript反编译是Adobe生态开发者必备的核心技能,而Jsxer作…...

掌控微信数据:从信息丢失到价值挖掘的完整解决方案

掌控微信数据:从信息丢失到价值挖掘的完整解决方案 【免费下载链接】WeChatMsg 提取微信聊天记录,将其导出成HTML、Word、CSV文档永久保存,对聊天记录进行分析生成年度聊天报告 项目地址: https://gitcode.com/GitHub_Trending/we/WeChatMs…...

腾讯优图Youtu-Parsing案例分享:手写体、印章、图表精准识别效果

腾讯优图Youtu-Parsing案例分享:手写体、印章、图表精准识别效果 1. 文档解析的新标杆 在日常工作中,我们经常遇到这样的场景:收到一份扫描的合同,需要提取关键条款;拿到一份手写笔记,想要转为电子版&…...

OpenClaw开源贡献:为gemma-3-12b-it开发并共享自定义技能

OpenClaw开源贡献:为gemma-3-12b-it开发并共享自定义技能 1. 为什么选择为gemma-3-12b-it开发技能 去年冬天第一次接触OpenClaw时,我就被它的设计理念吸引了——一个真正能在本地运行的AI智能体框架。当时我正为重复性的数据清洗工作头疼,而…...

别再为视频生成发愁了!用ComfyUI+Wan 2.1,保姆级本地部署教程(附工作流文件)

从零到一:ComfyUI与Wan 2.1的本地视频生成实战指南 如果你曾经被AI视频生成工具的复杂配置劝退,或是厌倦了云端服务的漫长等待和隐私顾虑,今天这份指南将彻底改变你的创作体验。我们将深入探索如何利用ComfyUI框架和Wan 2.1模型,…...

Redis哨兵模式内存缩容

Redis哨兵模式内存缩容检查节点信息从节点内存缩容最大内存配置修改停机缩容缩容后检查主节点内存缩容回退操作检查节点信息 通过哨兵获取集群名和主节点地址: # docker exec -it pod_sentinel_1 redis-cli -p 26379 info sentinel # Sentinel sentinel_masters:…...

黑客 比普通 程序员 高在哪里?

黑客比普通程序员高在哪里? 99%的程序员:搜,拿,改。纯自己手写个贪吃蛇小游戏都费劲。 99%的黑客:下,扫,查。离开下载的工具,徒手找个网页注入点都费劲。 没几个有真本事的。都瞎掰。骗骗小孩…...

基于 LangChain 1.0 的 LangGraph 高级应用

基于 LangChain 1.0 的 LangGraph 高级应用 文章目录基于 LangChain 1.0 的 LangGraph 高级应用1. 深度对比:Workflow vs Agent1.1 Workflow 实现示例(内容审核)1.2 Agent 实现示例(内容审核)2. 高级状态管理&#xff…...

反激变换器磁学分析

一、反激变换器变压器功能及其占空比图1如图1所示,为反激变换器拓扑,变压器一次绕组匝数和变压器二次绕组匝数之比为;反激变换器变压器功能:由图1中正负号所示,一次绕组和二次绕组的感应电压方向相反,当开关…...

3大核心功能彻底解决环世界MOD管理难题:RimSort完整指南

3大核心功能彻底解决环世界MOD管理难题:RimSort完整指南 【免费下载链接】RimSort RimSort is an open source mod manager for the video game RimWorld. There is support for Linux, Mac, and Windows, built from the ground up to be a reliable, community-ma…...

Claude Computer Use:AI 操控电脑的革命性突破详解

Claude Computer Use:AI 操控电脑的革命性突破详解 引言 2024 年,Anthropic 公司推出了 Claude 3.5 Sonnet 模型,并首次引入了Computer Use(电脑使用)功能。这项技术标志着 AI 从单纯的对话助手向能够实际操作电脑的自主代理迈出了重要一步。本文将深入解析 Claude Comp…...

跨场景事件:没人聊但人人踩的持久化问题

目录根本矛盾静态事件:幽灵订阅问题实例事件:随场景消亡DontDestroyOnLoad 创可贴Bootstrap 场景模式多场景编辑让情况更糟生命周期问题GES 如何解决这个问题ScriptableObject 事件存在于场景之外Behavior Window:自动生命周期管理Persistent…...

论文写作“神器大比拼”:好写作AI凭实力“出圈”

在学术的漫漫征途中,论文写作就像是一场艰难的马拉松,从构思选题到组织内容,再到打磨润色,每一步都充满挑战。而如今,AI写作软件如雨后春笋般涌现,为论文写作者们带来了新的希望和助力。但面对琳琅满目的选…...

学Simulink——基于Simulink的单位功率因数(UPF)整流控制策略

目录 手把手教你学Simulink ——基于Simulink的单位功率因数(UPF)整流控制策略 一、问题背景 二、UPF 控制原理 1. 功率因数定义 2. dq 坐标系下的解耦控制 三、系统架构 四、Simulink 建模步骤 第一步:搭建主电路 第二步:实现锁相环(PLL) 第三步:坐标变换 第…...

告别‘电音’:用WaveRNN和FFTNet给你的AI语音合成项目选个又快又好的声码器

神经声码器选型实战:从WaveRNN到FFTNet的高效语音合成方案 语音合成技术正在经历一场由深度学习驱动的革命,而声码器(Vocoder)作为将频谱特征转换为自然波形的关键组件,其性能直接影响着合成语音的质量和效率。面对市…...

学Simulink——基于Simulink的固定频率滞环电流控制Boost变换器

目录 手把手教你学Simulink——基于Simulink的固定频率滞环电流控制Boost变换器​ 摘要​ 一、背景与挑战​ 1.1 Boost变换器电流控制的痛点与传统方法局限​ 1.1.1 应用场景与核心指标​ 1.1.2 传统控制的缺陷​ 1.2 固定频率滞环电流控制的核心优势​ 1.3 设计目标​ …...

B站成分检测器深度解析:5大革新特性重塑评论区交互体验

B站成分检测器深度解析:5大革新特性重塑评论区交互体验 【免费下载链接】bilibili-comment-checker B站评论区自动标注成分油猴脚本,主要为原神玩家识别 项目地址: https://gitcode.com/gh_mirrors/bi/bilibili-comment-checker 在B站的海量评论互…...

力扣第97题:多数元素

第一部分:问题描述 给定一个大小为 n 的数组 nums ,返回其中的多数元素。多数元素是指在数组中出现次数 大于 ⌊ n/2 ⌋ 的元素。 你可以假设数组是非空的,并且给定的数组总是存在多数元素。 示例 1: 输入:nums = [3,2,3] 输出:3 示例 2: 输入:nums = [2,2,1,1,1…...