Hacker News – LLM·18 天前★ 3
BitRun 发布：CPU 上运行 1-bit LLM，苹果 M4 达 100T/s
原文标题：Show HN: BitRun, 1-bit LLM runner on CPU (100T/s on Apple Silicon)
重要度 3/5 · AI 综合评估报道影响力与新鲜度，4–5 分为高价值资讯。
AI 智能摘要
开发者发布 BitRun，一个零编译、自包含的 1-bit 三元 LLM 运行器与模型管理器，支持 macOS、Windows、Linux CPU。它封装微软 BitNet b1.58 原生推理引擎，可拉取 Hugging Face 模型、运行交互式聊天并启动 OpenAI 兼容 REST 服务。在 M4 Pro 上 BitNet 70M 生成速度达 1355 t/s，主打本地、低功耗、无 GPU 推理。
所属主题开源15
阅读原文 +0
AI 处理过程展开/收起
原始标题：Show HN: BitRun, 1-bit LLM runner on CPU (100T/s on Apple Silicon)
AI 中文标题：BitRun 发布：CPU 上运行 1-bit LLM，苹果 M4 达 100T/s
来源：Hacker News – LLM · 发布于 18 天前
分类：开源 · AI 重要度：★ 3（3）
标签：1-bit LLM / BitNet / CPU 推理 / 本地部署 / 开源
关键词：BitRun / BitNet b1.58 / 1-bit 模型 / CPU 推理 / 本地大模型
AI 处理：2026/10/15 03:01:18 · 模型 deepseek-chat · 规则版本 2026-10-10.1
相关推荐
量子位·1 天前★ 4
DeepSeek 重磅开源 Agent 底座架构
AI 摘要DeepSeek 开源一套面向 Agent 的底座架构，据称 AI 已能自行定位 Bug 并提交 PR。该开源动作指向智能体工程化基础设施，可能影响 Agent 开发范式。
#开源
TechCrunch AI·3 天前★ 4
Mistral 开源万亿参数模型权重，主攻网络安全
AI 摘要Mistral 发布其万亿参数模型的权重，主打网络安全场景，称开放权重能让组织获得闭源模型无法提供的防御控制权。这是欧洲大模型厂商在开源路线上的又一次重要动作。
#开源
Hacker News·3 天前★ 4
Mistral 开源 Mistral Large 4（Le Chonk）权重
AI 摘要Mistral 宣布以开放权重形式发布 Mistral Large 4，代号 Le Chonk。该消息在 Hacker News 引发 410 分热度与近百条讨论，标志 Mistral 继续坚持开源路线。
#开源
量子位·7 天前★ 4
港科CMU联手岩山科技开源新模型，KV Cache砍99%吞吐提升6倍
AI 摘要香港科技大学、CMU与岩山科技联合开源新模型，通过将KV Cache压缩99%，实现单卡512路长推理并发、吞吐提升6倍。该成果显著降低长上下文推理的显存与成本压力。
#开源