Hacker News – LLM·7 小时前★ 2

开源项目 ShanHaiGateway 发布多上游 LLM 网关

原文标题:Show HN: ShanHaiGateway – multi-upstream LLM gateway in Go

重要度 2/5 · AI 综合评估报道影响力与新鲜度,4–5 分为高价值资讯。

AI 智能摘要

开发者开源 Go 语言编写的 ShanHaiGateway,可将多个模型供应商聚合为 兼容端点。项目支持加权轮转、配额冷却、缓存亲和与失败换道重试,作者称在生产环境将月账单大幅压低。

所属主题开源21
阅读原文 +0
AI 处理过程展开/收起
原始标题:Show HN: ShanHaiGateway – multi-upstream LLM gateway in Go
AI 中文标题:开源项目 ShanHaiGateway 发布多上游 LLM 网关
来源:Hacker News – LLM · 发布于 7 小时前
分类:开源 · AI 重要度:★ 2(2)
标签:开源 / LLM 网关 / Go / 成本优化
关键词:LLM 网关 / 开源网关 / OpenAI 兼容 / 模型路由
AI 处理:2026/11/12 18:00:47 · 模型 deepseek-chat · 规则版本 2026-10-21.1
AI 生成以上内容由 AI 自动生成:中文标题、摘要、分类与重要度;同一事件的多家报道会自动归并展示。 内容仅供参考,可能存在偏差,请以原文为准, 不构成任何投资或专业建议。
版权归原作者与原发布平台所有;若涉及侵权或信息错误,请在举报与侵权投诉页反馈,我们会及时处理。
每天 09:30,3 条 AI 圈真正重要的变化,免费订阅 →

相关推荐

量子位·5 小时前★ 4

MiniMax 开源 SOTA 生图模型,原生 4K 一张两毛

AI 摘要MiniMax 开源一款多模态图像生成模型,支持原生 4K 输出,单张生成成本约两毛钱。该模型号称达到 SOTA 水平,开源策略有望降低高质量生图的使用门槛,加剧开源文生图赛道竞争。

#开源
Hacker News·20 小时前★ 4

华为开源 MACaQ 量化器,支持本地多模态推理

AI 摘要华为发布内部量化工具 MACaQ,模型无关,可对文本、图像、视频与音频模型做低比特量化,兼容 llama.cpp、vLLM、Diffusers 与 PyTorch。官方称 32.5GB 显存可在 64 分钟内量化 122B 参数模型,量化时间较对比方案大幅缩短。

#开源
arXiv NLP·2 天前★ 4

Jais 3 开源发布:0.9B 至 375B 阿拉伯语智能体模型系列

AI 摘要研究团队发布 Jais 3,六个开源阿拉伯语智能体模型覆盖 0.9B 至 375B 参数,可规划多步任务、调用工具与 MCP 服务器、操作终端、联网搜索并读写 PDF、表格与演示文件。模型基于 K2 Horizon 系列经持续预训练、SFT、FTPO 与 RLVR 适配阿拉伯语,继承 512K 上下文。375B 版本称是迄今最大开源阿拉伯语模型,并公开全部权重、检查点与训练数据配方。

#开源
量子位·3 天前★ 4

腾讯混元发布开源模型 Hy4,实测搭配 WorkBuddy 做多模态 Agent

AI 摘要腾讯混元推出新一代开源模型 Hy4,作者实测将其与 WorkBuddy 搭配,展示多模态 Agent 的任务交付能力。该模型被视为国产开源阵营中性能靠前的新选手,进一步加剧开源大模型竞争。

#开源
内容有误或摘要不准?告诉我们
开源项目 ShanHaiGateway 发布多上游 LLM 网关 - 智讯 AI News