Hacker News – LLM·7 小时前★ 2
开源项目 ShanHaiGateway 发布多上游 LLM 网关
原文标题:Show HN: ShanHaiGateway – multi-upstream LLM gateway in Go
重要度 2/5 · AI 综合评估报道影响力与新鲜度,4–5 分为高价值资讯。
AI 智能摘要
开发者开源 Go 语言编写的 ShanHaiGateway,可将多个模型供应商聚合为 OpenAI 兼容端点。项目支持加权轮转、配额冷却、缓存亲和与失败换道重试,作者称在生产环境将月账单大幅压低。
所属主题开源21
阅读原文 +0
AI 处理过程展开/收起
原始标题:Show HN: ShanHaiGateway – multi-upstream LLM gateway in Go
AI 中文标题:开源项目 ShanHaiGateway 发布多上游 LLM 网关
来源:Hacker News – LLM · 发布于 7 小时前
分类:开源 · AI 重要度:★ 2(2)
标签:开源 / LLM 网关 / Go / 成本优化
关键词:LLM 网关 / 开源网关 / OpenAI 兼容 / 模型路由
AI 处理:2026/11/12 18:00:47 · 模型 deepseek-chat · 规则版本 2026-10-21.1
相关推荐
量子位·5 小时前★ 4
MiniMax 开源 SOTA 生图模型,原生 4K 一张两毛
AI 摘要MiniMax 开源一款多模态图像生成模型,支持原生 4K 输出,单张生成成本约两毛钱。该模型号称达到 SOTA 水平,开源策略有望降低高质量生图的使用门槛,加剧开源文生图赛道竞争。
#开源
Hacker News·20 小时前★ 4
华为开源 MACaQ 量化器,支持本地多模态推理
AI 摘要华为发布内部量化工具 MACaQ,模型无关,可对文本、图像、视频与音频模型做低比特量化,兼容 llama.cpp、vLLM、Diffusers 与 PyTorch。官方称 32.5GB 显存可在 64 分钟内量化 122B 参数模型,量化时间较对比方案大幅缩短。
#开源
arXiv NLP·2 天前★ 4
Jais 3 开源发布:0.9B 至 375B 阿拉伯语智能体模型系列
AI 摘要研究团队发布 Jais 3,六个开源阿拉伯语智能体模型覆盖 0.9B 至 375B 参数,可规划多步任务、调用工具与 MCP 服务器、操作终端、联网搜索并读写 PDF、表格与演示文件。模型基于 K2 Horizon 系列经持续预训练、SFT、FTPO 与 RLVR 适配阿拉伯语,继承 512K 上下文。375B 版本称是迄今最大开源阿拉伯语模型,并公开全部权重、检查点与训练数据配方。
#开源
量子位·3 天前★ 4
腾讯混元发布开源模型 Hy4,实测搭配 WorkBuddy 做多模态 Agent
AI 摘要腾讯混元推出新一代开源模型 Hy4,作者实测将其与 WorkBuddy 搭配,展示多模态 Agent 的任务交付能力。该模型被视为国产开源阵营中性能靠前的新选手,进一步加剧开源大模型竞争。
#开源
内容有误或摘要不准?告诉我们