行业动态

库萨科技发布全模态具身模型Kusa Omni-CTS与专用操作系统Kusa OS,助力城市服务机器人从"执行者"变为"思考者"

核心结论:2026年7月2日,库萨科技正式发布面向具身智能的全模态具身模型 Kusa Omni-CTS 与专用操作系统 Kusa OS,旨在推动城市服务机器人从被动执行指令的“执行者”向主动理解物理世界的“思考者”转变。Kusa Omni-CTS 模型实现了视觉空间感知、语义与先验指令、本体感知与动力学三大模态的原生融合,让机器人能通过物理交互“感受”环境;采用连续时空表征完成跨模态异步特征对齐,解耦传感器硬件时间同步依赖;并引入反事实推演机制,在高维空间中对动作后果进行符合物理动力学限制的预判与试错,确保决策安全。Kusa OS 是专为边缘侧设计的操作系统,实现小于1毫秒的系统时延和仅50微秒的极致抖动控制,通过确定性调度保障紧急制动等硬实时任务的最高优先级。该系统提供统一硬件抽象接口,支持“一脑多形”,已在库萨0.5吨级、1.5吨级、3吨级城市服务机器人产品中部署,并在超40座城市的复杂环境中得到验证。两者协同构成库萨的城市服务具身智能技术基座。

核心要点
  1. 库萨科技发布面向具身智能的全模态模型 Kusa Omni-CTS,融合视觉、语义和本体感知三大模态,让机器人通过物理交互“感受”环境。
  2. Kusa Omni-CTS 采用连续时空表征实现异步特征对齐,降低了对严格硬件时间同步的依赖,提升了系统鲁棒性。
  3. 模型引入反事实推演闭环,使机器人可在虚拟空间中基于物理动力学限制对动作后果进行预判和试错。
  4. Kusa OS 是专为边缘侧高实时性场景设计的操作系统,系统时延小于1毫秒,抖动控制仅为50微秒。
  5. Kusa OS 具备确定性调度能力,确保紧急制动等硬实时任务在资源竞争时始终获得最高优先级。
  6. Kusa OS 通过“一脑多形”适配不同吨位和形态的城市服务机器人,目前已在超40座城市的实际复杂环境中部署验证。
机器人行业长期以来的痛点在于“能看不能说、能说不能动”——感知、决策、执行环节在技术上严重割裂。库萨科技此次发布的Kusa Omni-CTS模型和Kusa OS操作系统,正是针对这一行业痼疾给出的系统性解法。文章披露的技术细节相当扎实:从50微秒级的抖动控制到基于物理动力学的反向事实推演,都显示出该团队对真实场景中毫秒级实时性的极致追求。尤其值得关注的是“一脑多形”的架构设计,这意味着同一套软件栈可以跨越从0.5吨小型机器人到3吨市政级车辆的硬件鸿沟。对于正在探索具身智能落地的工程师而言,这套融合了自动驾驶、车规芯片与机器人三大领域经验的系统,是一个极具参考价值的商业化技术样本。

库萨科技发布面向具身智能的全模态模型 Kusa Omni-CTS,融合视觉、语义和本体感知三大模态,让机器人通过物理交互“感受”环境。

—— 络石智能编辑部 · 编辑推荐

库萨科技发布全模态具身模型Kusa Omni-CTS与专用操作系统Kusa OS,助力城市服务机器人从"执行者"变为"思考者"

时氪分享·2026年07月02日 11:30

以真实城市复杂场景为核心训练场,打通“全模态感知—物理级推演—实时控制”的完整技术链路,让城市服务机器人在边界模糊、交互对象复杂、任务需求动态的作业环境中,从被动执行指令走向主动理解物理世界。

7月2日,库萨科技正式发布面向具身智能的全模态具身模型 Kusa Omni-CTS 与专用操作系统 Kusa OS。这是库萨首次完整披露其城市服务具身智能技术架构:以真实城市复杂场景为核心训练场,打通“全模态感知—物理级推演—实时控制”的完整技术链路,让城市服务机器人在边界模糊、交互对象复杂、任务需求动态的作业环境中,从被动执行指令走向主动理解物理世界。

库萨科技始终致力于打造城市服务机器人,让机器人在边界模糊、交互对象复杂、任务需求动态的作业环境中,从被动执行指令走向主动理解物理世界。

Kusa Omni-CTS:全模态感知,构建物理理解能力

城市服务的复杂性,决定了它不能靠穷举规则来解决。规则驱动的逻辑是遇到A执行B,但城市里的物品关系、人员行为和环境持续变化,规则库很难覆盖所有组合。

Kusa Omni-CTS并非单一技术点的深入,而是在全模态融合的广度与物理理解的连续性上做的系统性变革,通过三项关键突破实现从"背诵规则"到"理解世界"的转变。

1.三大模态原生融合,物理交互"感受"世界

要真正理解物理世界,光看、光听是不够的——机器人还需要"感受"接触。视觉能识别"前方有垃圾桶",语言能传达"把这里扫干净",但如果缺少对力度、摩擦、负载的感知,机器人在真实场景中始终隔着一层。这种对物理交互的"无感",限制了机器人在真实场景中的判断能力。

Kusa Omni-CTS将输入模态扩展为涵盖物理交互的三大核心模态:

· 视觉空间感知:识别"前方是路沿""右侧有行人"等外部空间信息

· 语义与先验指令:理解"在遵守交通规则的前提下,完成贴边清扫,保证设备与环境安全"等任务约束

· 本体感知与动力学:反映"扫刷已经接触路沿,电机负载正在上升"等身体状态反馈

三类信息互相校验,机器人结合外部环境与自身状态作出判断——不止"看见",更能通过物理交互"感受"环境。

2.跨模态异步特征对齐,数据自然流动

机器人搭载的各传感器以不同频率运行:触觉、IMU和轮速等本体感知数据通常在200Hz至1000Hz,相机约30Hz,激光雷达可能只有10Hz。

传统方案依赖严格的硬件时间同步,一旦出现时钟漂移、触发延迟或局部丢帧,融合结果就可能出现偏差。Kusa Omni-CTS采用连续时空表征,将不同频率的数据映射到连续时间轴,在模型内部完成异步特征对齐。视觉、语言、触觉各自按自己的节奏采集信息,在模型里自动"对表"。这一工程转变降低了硬件依赖,提升了系统鲁棒性,且当传感器配置变化时,模型可通过少量自适应微调快速适配。

3.物理一致性预测,反事实推演闭环

Kusa Omni-CTS在高维空间中建立符合物理动力学限制的连续轨迹,让机器人的动作遵循物理定律的"惯性"与"约束",保证控制指令的平滑执行。

在预判环境演变的基础上,模型引入了反事实推演机制——在执行前于虚拟空间中对动作后果进行预判和试错,推演通过后再付诸行动。每一次推演均受动力学约束,有惯性、有摩擦、有机器人自身的物理极限,使机器人在开放场景中的决策拥有明确的物理依据,同时保障非结构化场景下的安全交互。

此外,Kusa Omni-CTS可使模型迅速适应不同架构的机器人执行体,实现"一次预训练、多形态部署"的跨形态泛化应用。

Kusa OS:面向具身智能的专用操作系统

场景理解能力再强,如果无法及时转化为行动,一切等于零。城市开放环境中,突发状况常在毫秒之间——突然冲出的行人、被风吹来的障碍物、湿滑路面的侧滑风险。Kusa OS的存在,就是为了让模型输出的智能决策能够被精确、及时地执行。

Kusa OS专为边缘侧高实时性、高可靠性的多任务调度场景设计,核心目标是为具身智能提供低延迟、确定性调度、易扩展的运行环境。系统时延小于1ms,极致抖动控制仅50μs,确保机器人在复杂场景下的精准协同。

其核心设计在于确定性:当感知、规划、通信等任务争夺计算资源时,紧急制动等硬实时任务始终获得最高优先级,不会因为低优先级任务的阻塞而延误。

在开发者体验层面,Kusa OS提供统一的硬件抽象接口,告别繁琐的底层适配工作,让开发者专注算法本身。传感器即插即用,算法模块可灵活组合,资源由系统智能分配。当关键任务超时或异常时,系统自动触发安全降级,使机器人进入预设的安全状态。

Kusa OS的另一项核心能力是"一脑多形"——同一套系统可适配并指挥形态、大小各异的城市服务机器人。目前已在库萨0.5吨级、1.5吨级、3吨级产品矩阵中部署应用,从小型公共空间到市政道路,同一套操作系统完成适配。

这套系统的技术基础,来自库萨核心团队多年的积累,历经自动驾驶、车规芯片、机器人三大体系的落地验证,已在超40座城市的复杂环境中持续接受考验。

Kusa Omni-CTS 与 Kusa OS:感知理解,实时执行

Kusa Omni-CTS负责感知理解、作出智能决策,Kusa OS保障决策的毫秒级执行与多形态调度。两者协同驱动,共同构成库萨此次发布的城市服务具身智能技术基座。

库萨以全模态具身模型与专用操作系统的组合,构筑了具身智能的技术壁垒。库萨将持续引领城市服务机器人的智能化跃迁,深耕城市服务领域,推动机器人在复杂场景中从盲目的"执行者"成长为拥有物理直觉的"思考者"。

该文观点仅代表作者本人,36氪平台仅提供信息存储空间服务。

标签

相关主题

专家点评

本文由编辑团队收录整理,内容来源于公开信息,仅供参考。

相关文章

前線部署工程師 FDE 是什麼?AWS、OpenAI、Anthropic 為何掀起 AI 搶人大戰

前線部署工程師(Forward Deployed Engineer,FDE)是直接与客户合作、将AI模型、数据与既有工作流程整合为可正式运行系统的工程职位。随着企业从关注模型能力转向要求AI投资产生报酬,FDE迅速成为AI产业争抢的人才。高阶猎头公司Christian & Timbers研究显示,美国企业对FDE的需求预计在2026年底前增长2100%,计划聘用FDE的公司比例从年初的5-10%升至第二季末的70%;全美约1.7万名FDE中,同时具备产业知识、企业沟通能力和应用AI经验、能持续创造投资报酬的顶尖人才仅约2000人。为抢占部署能力,AWS投入10亿美元成立全球前線部署工程组织,派遣数千名工程师进驻客户现场开发代理式AI系统;OpenAI于5月成立OpenAI Deployment Company,并通过收购AI顾问公司Tomoro直接获得约150名部署人才;Anthropic则与Blackstone、Hellman & Friedman、Goldman Sachs合作成立企业AI服务公司,瞄准缺乏内部AI团队的中型企业。FDE的价值体现在缩短作业时间、提高产品采用率、加快AI项目从原型到正式环境的速度,但未来AI代理可能逐步接手部分开发部署工作,人才稀缺的竞争格局正重塑AI公司的商业前景。

阅读全文

前沿部署工程师是AI重塑的辅助轮

本文深入分析了前沿部署工程师(FDE)如何从 Palantir 推广的模式演变为 AI 行业突破企业增长瓶颈的关键角色,被比喻为 AI 转型的‘训练轮’。文章核心指出,自 2025 年 12 月德勤命名该实践后,行业迎来投资高潮:Anthropic 斥资 15 亿美元与 Blackstone 等成立 Ode 公司,OpenAI 投入 40 亿美元成立 Deployment Company,亚马逊 AWS 在 6 月 30 日承诺投入 10 亿美元组建 FDE 组织,微软紧随其后斥资 25 亿美元成立拥有 6000 人的 Frontier Company,Google Cloud 也投入 7.5 亿美元。这些资金全部指向组织就绪度而非模型性能。FDE 的三大转变是:工作风险从客户侧转向供应商侧,重点从按需求文档配置软件转向编码企业的隐性决策逻辑(如 AWS 的知识图谱建设),以及将前线洞察反馈至产品路线图。市场正分化为平台商(追求粘性)、模型商(追求效果)和服务集成商(追求规模)三层生态。但文章强调,FDE 的未来在于企业将其内化为自有的、对业务结果负责的跨职能永久团队,并以 Uber 内部部署 30 名工程师使财务报告时间从 2 天降至 10 分钟的案例证明其长期价值,预示这将成为未来十年企业 AI 能力的定义性特征。

阅读全文

什么是前向部署工程师?科技界最热门的新职位及如何准备

2026 年,前线部署工程师(Forward Deployed Engineer, FDE)被公认为科技界增长最快、薪酬最高的岗位之一。这一概念由大数据分析公司 Palantir 首创,指直接嵌入客户现场、从代码编写到系统架构全链路负责的复合型高级软件工程师。文章指出,2026 年 6 月,亚马逊云 AWS 宣布重大投资 10 亿美元组建专门 FDE 组织;紧随其后,微软在 7 月 2 日成立 Microsoft Frontier Company,砸下 25 亿美元扩充约 6000 名专家派驻客户,用于 AI 系统的联合设计与持续优化。硅谷风向标 a16z 发表报告称 FDE 是初创企业最热门的职位,认为愿意投入重服务实施工作是 AI 公司建立长期“护城河”的关键。文章深入对比了 FDE 与解决方案工程师的区别,并引用了 OpenAI 工程师亲赴农场服务农业巨头 John Deere、优化 Realtime API 的实例。此外,文章援引了 MIT 2025 研究,指出约 95% 的企业 AI 试点因数据孤岛问题而失败,这正是 FDE 弥合技术鸿沟的价值所在。在薪酬方面,美国劳工统计局数据显示相关计算机科学家薪酬中位数达 14.5 万美元,FDE 因直接贴近营收端而通常享有更高浮薪。文章还重点结合伊利诺伊理工的教育模式,详述成为 FDE 所必需的 AI 工程、全栈开发、快速原型构建等硬实力,以及共情、商业意识和系统思维等软技能。

阅读全文

前向部署工程师帮助企业在各行业应用AI

2026年,前方部署工程师(FDE)成为科技行业最热门的新角色之一。OpenAI、Palantir、Cognizant等公司正在大规模招募FDE,帮助医院、银行等传统企业将人工智能真正落地。FDE不仅需要扎实的编程能力(Python、API、云平台)和AI技术知识,还必须具备出色的沟通与需求理解能力,为客户构建定制化AI工具并确保其稳定运行。与证书相比,企业更看重实际构建AI产品的经验。顶尖FDE的年薪接近100万美元,这一高薪使得该角色的需求远超硅谷,蔓延至全球各行各业。文章指出,FDE是连接AI技术与真实业务场景的关键桥梁,标志着AI应用从实验走向规模化部署的新阶段。

阅读全文

OpenAI放大招:企业级AI平台Frontier上线,专治各种智能体

OpenAI于2026年2月5日正式推出企业级AI平台Frontier,定位为帮助企业统一构建、部署和管理AI智能体的系统,旨在解决企业AI部署中的“碎片化”和“AI孤岛”问题。Frontier通过连接企业数据仓库、CRM、工单工具等孤立系统,为AI智能体提供共享业务背景、执行环境、记忆与质量优化机制,并内置严格的身份、权限与边界管控,可适用于金融和医疗等受监管领域。平台具有高度开放性,不仅支持OpenAI自建智能体,还兼容来自Google、Microsoft及直接竞争对手Anthropic的第三方智能体,采用开放标准避免供应商锁定。OpenAI应用业务CEO Fidji Simo将智能体视为“AI同事”,预测到2026年底领先企业的大部分数字化工作将由人类指挥的智能体舰队执行。企业业务总经理Barret Zoph指出Frontier创建了“语义层”以打通工作流程。商业层面,OpenAI企业客户约占业务40%,CFO Sarah Friar预计年底接近50%,全球有超过100万家商业客户。平台已面向惠普、Intuit、甲骨文、State Farm、Thermo Fisher和优步等有限客户开放,BBVA、思科和T-Mobile等也在试点。发布前后PayPal、Expedia等软件股大跌,市值蒸发超3000亿美元。OpenAI通过前向部署工程师与客户并肩工作,将实施经验产品化。Frontier的推出标志着AI企业应用从单点工具迈向系统化数字员工管理的新阶段。

阅读全文