市面上开源的 llm 网关都有啥,兄弟们给推荐几个

佬友们给推荐几个市面上开源的 llm 网关,能接接入的大模型越全越好,省的出现了各种协议还得单独对接,能计费,能配置,能负载均衡这些都是必备的。刚才看了两个先共享出来 APIPark/readme/readme-zh-cn.md at main · APIParkLab/APIPark · GitH...
市面上开源的 llm 网关都有啥,兄弟们给推荐几个
市面上开源的 llm 网关都有啥,兄弟们给推荐几个

佬友们给推荐几个市面上开源llm 网关,能接接入的大模型越全越好,省的出现了各种协议还得单独对接,能计费,能配置,能负载均衡这些都是必备的。刚才看了两个先共享出来
APIPark/readme/readme-zh-cn.md at main · APIParkLab/APIPark · GitHub apipark
GitHub - QuantumNous/new-api: A unified AI model hub for aggregation & distribution. It supports cross-converting various LLMs into OpenAI-compatible, Claude-compatible, or Gemini-compatible formats. A centralized gateway for personal and enterprise model management. 🍥 · GitHub new-api

3 个帖子 - 3 位参与者

阅读完整话题

来源: linux.do查看原文