跳转到主内容
极星编程网:以代码为星,赴技术山海!

Sage— 商汤绝影推出的端侧多模态智能体基座大模型

sage是商汤绝影推出的面向端侧的多模态智能体基座大模型,采用moe稀疏激活架构,总参数量达32b,实际推理中仅激活约3b参数,已成功部署于英伟达orin x车载计算平台。在pinchbench基准测试中,其任务完成率高达94%,表现优于claude-opus-4.6、gpt-5.4等主流云端大模型。该模型深度融合scout分级协同学习与erl可擦除强化学习技术,显著提升复杂任务处理能力与训练效率,为智能座舱提供具备云端水准的端侧agent能力。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜Sage的核心能力多意图指令理解:可一次性解析用户含多个子目标的自然语言指令,并自动协调空调、导航、影音等子系统,实现端到端任务闭环。

环境自适应服务:依托车载传感器实时感知乘员状态(如儿童在座、疲劳迹象)与道路环境,主动触发儿童模式、舒适调节、路线重规划等场景化响应。

原生座舱多模态理解:基于真实车载数据训练,同步融合语音、图像、IMU及CAN总线信号,构建高精度座舱语义与空间认知能力。

长链路工具调用与推理:支持多步逻辑推演与跨系统工具调用,在τ2-bench评测中得分达80.7,验证其作为智能体的自主执行能力。

超低延迟端侧生成:在Orin X平台首字响应时间约0.5秒,单Token延迟低至0.03秒,生成吞吐量达80 tokens/s,全程离线运行,不依赖网络连接。

Sage的技术实现机制MoE高效推理架构:通过专家路由机制动态激活少量专家模块,在有限端侧算力下兼顾模型容量与响应速度。

SCOUT分级协同训练范式:以轻量模型先行探索任务路径,再由大模型吸收优化策略,使复杂任务后训练GPU耗时降低约60%。

ERL错误抑制机制:在推理过程中实时识别并剔除错误推理步骤,触发局部重生成,有效遏制误差累积,提升整体任务成功率20%。

车载原生多模态融合设计:从预训练阶段即引入座舱视觉、语音交互、车辆状态等多源异构数据,构建强泛化、强鲁棒的车载专用理解体系。

Sage的落地方式模型已完成在英伟达Orin X平台的全栈适配与工程化部署,支持即插即用式集成。

OpenClaw开源的自托管AI智能体助手,曾用名Clawdbot、Moltbot下载Sage的关键参数与适用条件

模型结构:

MoE架构,总参32B,激活参3B。

运行平台:

已实现在英伟达Orin X芯片上的稳定部署。

性能表现:

PinchBench任务完成率达94%,MMLU Pro 75.8分,GPQA Diamond 77.3分,Human Semantic Understanding 91.5分。

硬件载体:

北京车展首发搭载Sage的智能座舱终端SageBox。

目标用户:

车企研发部门、一级供应商(Tier 1)、端侧AI Agent解决方案提供商。

联网需求:

纯端侧运行,无需云端回传或持续网络连接。

框架兼容性:

可无缝接入OpenClaw、Hermes等主流智能体开发框架。

Sage的差异化优势端侧效能突破:以仅3B激活参数达成94% PinchBench完成率,性能反超多数云端旗舰模型。

极致资源利用率:相较MiMo-v2-Pro(激活42B),Sage激活算力仅为1/14,显存占用约为1/31,而综合性能高出6.6个百分点。

训练成本大幅压缩:SCOUT技术减少约60% GPU训练时长,加速模型迭代与场景适配周期。

推理过程可控可信:ERL机制赋予模型“自我纠错”能力,避免错误传播导致的服务中断。

座舱语义理解领先:在Human Semantic Understanding测试中斩获91.5分,较同类端侧模型高出32%,凸显其对车载场景的深度建模能力。

量产就绪度高:已在Orin X平台完成功能验证、稳定性测试与车规级压力测试,具备直接上车条件。

Sage与主流竞品横向对比对比维度SageGoogle Gemma 4MiMo-v2-Pro发布方商汤绝影Google小米总参数量32B同量级端侧超1T激活参数量3B未披露42BPinchBench完成率**94%**83.9%87.4%MMLU Pro**75.8**69.2–GPQA Diamond**77.3**58.5–τ2-bench**80.7**42.1–Human Semantic Understanding**91.5**69.5–部署平台英伟达Orin X端侧端侧核心定位端侧智能体基座端侧通用模型端侧推理模型Sage的典型应用实例全场景语音交互:用户说“我有点冷,把空调调到24度,同时把音乐换成轻松一点的爵士乐”,Sage自动解析双意图并同步调控温控系统与音响系统。

儿童出行守护:当后排摄像头识别出儿童就座,Sage即时启动儿童安全模式,自动锁闭车窗、推送适龄音频内容、限制最大音量并提醒家长系好安全带。

动态出行辅助:结合高精地图、实时交通流与用户日程,Sage在出发前推荐最优路径;遇突发拥堵时,主动推送备选路线并同步更新预计到达时间。

舱驾协同服务:作为舱驾融合中枢,Sage打通HMI交互与ADAS感知数据,例如在识别驾驶员分心时,自动降低非关键提示频次,并将关键路况信息以更醒目方式呈现。

相关文章