我的购物车
资讯分类
全部资讯
最新活动
商城公告
行业信息
新品推荐
元器件知识
资讯标签
iCEasy商城(203) 艾为(AWINIC)(178) 艾迈斯欧司朗(ams OSRAM)(165) NVIDIA(96) 萤火工场(Firefly Workshop)(63) 兆易创新(GigaDevice)(38) 飞腾派V3(32) 赛昉科技(StarFive)(30) 罗彻斯特电子(28) 小华半导体(XHSC)(18) 灵动微电子(MindMotion)(16) 芯佰微(14) 领麦微(leamems)(14) 开源社区活动(13) 日清纺微电子(Nisshinbo Micro devices Inc.)(13) 矽递科技(Seeed Studio)(11) 机器人(9) 航顺(Hangshun)(8) 极海半导体(Geehy)(8) 雷卯(Leiditech)(8) 微源半导体(LowPowerSemi)(8) 物奇(WUQi)(7) 沃虎(WOHU)(6) 教程(6) 高通Qualcomm(5) 峰岹科技(Fortior Tech)(4) BeagleBoard(3) 英迪芯微(indiemicro)(3) 安世半导体(Nexperia)(3) 博瑞集信(bonray)(3) 阿加犀(APLUX)(2) 中科本原(Fdmtek)(2) 芯查查(2) 开源社区(2) 领慧立芯(legendsemi)(1) 凌久微(LingJoWing)(1) 飞腾派(1) 中电港(1) 硅光电二极管BPW 34 S-Z(1) 蓝光激光二极管PLPT9 450MD_E(1) 绿色激光二极管PLT5 520HB_P(1) 红外传感发射器件SFH 4713B(1)

基于AGX Thor的机器人视觉方案

发布时间:2026-11-05

本方案基于宇树 H2 Plus 人形机器人与 NVIDIA Jetson AGX Thor 构建,融合 Isaac GR00T 开放式机器人开发平台,采用“头部双目 + 手部单目”的多视角视觉架构,实现远场环境感知与近场精细操作的协同。通过高性能视觉采集、数据传输与实时计算,为人形机器人提供稳定可靠的视觉输入,支撑感知、理解、抓取及 VLA 等智能应用。


NVIDIA 官方参考设计将 H2 Plus 机器人本体、Jetson Thor 计算平台以及 Isaac GR00T 软件和模型整合为统一的人形机器人开发平台,覆盖数据采集、训练、仿真、评估及部署等开发流程。


通过远场与近场视觉的组合,使机器人能够同时获得环境级视觉信息和操作级视觉信息。NVIDIA 官方资料也将头部 stereo camera 与 wrist cameras 列为该参考设计的多视角感知组成部分。


1. NVIDIA Jetson AGX Thor


Jetson AGX Thor 作为机器人端核心 AI 计算平台,负责多路传感器数据处理、AI 推理及机器人实时计算。


Thor 基于 NVIDIA Blackwell 架构,可为人形机器人提供高性能、低延迟的本地 AI 推理能力。NVIDIA 官方参考设计采用 Jetson AGX Thor T5000 作为 onboard compute,用于实时传感器处理及机器人推理控制。


考虑到原生 Thor 开发套件的相机接口无法直接满足多路机器人视觉采集需求,森云智能针对该参考设计开发专用相机转接板,完成相机接口扩展与平台适配,使 Thor 可直接连接 8 路相机,为头部双目、手部单目等多视角视觉系统提供统一的硬件接入能力。


2. NVIDIA Isaac GR00T


Isaac GR00T 提供面向通用人形机器人的开放式软件与模型体系,覆盖机器人基础模型、数据管线、仿真、训练、评估以及部署等环节。


GR00T 模型可以接收包括视觉、语言和机器人本体状态在内的多模态输入,并输出用于机器人动作执行的控制信息,从而连接机器人“感知—理解—决策—执行”流程。


3. 视觉数据与 AI 协同


前端多路相机采集机器人所处环境及操作区域的视觉信息,经高速视觉接口传输至 Thor 平台进行实时处理,再与 Isaac GR00T 的 AI 模型及机器人状态信息进行融合,为机器人任务决策和动作执行提供视觉基础。


整体形成:


视觉采集 → 数据处理 → AI理解 → 任务决策 → 动作执行的完整技术链路。

技术架构


资讯来源:芯查查