| 类别 | 子类别/组件 | 核心功能与描述 | 代表厂家/平台/框架 |
|---|---|---|---|
| 🧠 软件组件 | 感知与认知 | 处理多传感器数据,实现环境理解、物体识别与任务规划。 | 框架/平台: ROS/ROS 2, NVIDIA Isaac Sim, Autoware (自动驾驶) 算法库: OpenCV, PCL (点云库), PyTorch, TensorFlow 感知模型: Meta Segment Anything Model, OpenAI CLIP, YOLO系列 |
| 决策与控制 | 根据感知信息生成运动规划,并执行精确的底层控制。 | 规划库: OMPL, MoveIt 控制库: Drake, control-toolbox 学习框架: OpenAI Gym/Gymnasium, RLlib (Ray), Stable-Baselines3 |
|
| 仿真与开发 | 提供虚拟环境,用于安全、低成本、可扩展的训练、测试与数据生成。 | 物理仿真: NVIDIA Isaac Sim, Unity (ML-Agents), Unreal Engine, MuJoCo, Gazebo 数据工具: NVIDIA Omniverse Replicator, CARLA (自动驾驶仿真) |
|
| 基础模型与中间件 | 提供高级认知、任务拆解能力或模块化通信框架。 | 机器人模型: Google RT系列, DeepMind RT系列, Microsoft 的VIMA 中间件: ROS/ROS 2 (核心通信), Franka Desk (机器人编程接口), Flexiv 的Rizon操作系统 |
|
| 🛠️ 硬件组件 | 计算平台 | 执行核心算法,要求高算力、低功耗与实时性。 | 边缘计算: NVIDIA Jetson系列, Qualcomm Robotics RB系列, 瑞芯微 RK系列 车规/高性能: NVIDIA Orin, TI TDA4VM, 地平线 Journey系列, 华为 MDC 专用芯片: 特斯拉 FSD, 谷歌 TPU |
| 传感器 | 提供环境与自身状态信息,是系统的“眼睛”和“皮肤”。 | 视觉: 索尼, 豪威科技 (CMOS), Intel RealSense (深度相机), 乐扩 OAK-D 激光雷达: 禾赛科技, 速腾聚创, Velodyne, Innoviz 力/触觉: OnRobot, Robotiq (夹爪), 宇立仪器 (六维力传感器), SynTouch (仿生触觉) IMU/定位: 博世, ADI, 星网宇达, 华测导航 |
|
| 执行器与本体 | 将控制指令转化为物理运动,是系统的“身体”。 | 伺服电机/驱动器: 松下, 安川, 三菱, 汇川技术, 清能德创 仿生/灵巧关节: 宇树科技 (H1机器人关节), Festo (仿生方案) 机器人整机: • 人形: 波士顿动力 Atlas, 特斯拉 Optimus, Figure AI, 宇树科技 H1, 小米 CyberOne, 傅利叶智能 GR-1 • 轮式/复合: 波士顿动力 Handle, 海康机器人 (AMR), 灵动科技, 极智嘉 • 机械臂: 发那科, ABB, 库卡, 新松, 越疆科技 |
| 开发范式 | 核心思想 | 典型流程 | 适用场景与工具 |
|---|---|---|---|
| 🔄 传统分层式开发 | 模块化设计,将系统分为感知、规划、控制等独立模块,通过中间件(如ROS)通信。 | 1. 独立开发各功能模块。 2. 在仿真环境(如Gazebo)中集成测试。 3. Sim2Real迁移至真机调试。 |
工业机器人、自动驾驶。依赖于ROS、标准传感器与执行器SDK。 |
| 🧠 端到端学习 | 使用深度神经网络直接从原始传感器输入映射到控制输出,减少人为模块划分。 | 1. 在仿真或真机中大规模收集数据。 2. 训练一个单一模型(通常是深度强化学习或模仿学习)。 3. 直接部署模型进行推理。 |
研究前沿,如端到端自动驾驶、灵巧操作。依赖PyTorch/TensorFlow和高性能仿真器(Isaac Sim)。 |
| 🤖 基于模型的强化学习 | 先学习环境的动态模型,然后在模型中进行规划或策略优化,提升数据效率。 | 1. 学习环境动力学模型。 2. 在学得模型上进行策略搜索或MPC控制。 3. 在真实世界中迭代更新模型与策略。 |
需要高数据效率的任务,如机器人行走、动态操控。使用MuJoCo、PyBullet等仿真器。 |
| 🌐 数字孪生与Sim2Real | 构建与现实1:1对应的高保真虚拟环境,完成绝大部分开发测试后,再迁移到现实世界。 | 1. 创建物理精确的数字孪生体。 2. 在仿真中完成训练、测试、甚至OTA升级验证。 3. 通过域随机化等技术,将策略鲁棒地迁移到真机。 |
成本高昂或高风险的场景,如无人车测试、人形机器人训练。核心工具是NVIDIA Isaac Sim/Omniverse。 |
| 🔗 软硬件协同设计 | 算法需求驱动硬件设计,硬件特性决定算法优化,实现整体性能最优。 | 1. 联合定义机器人的形态、驱动与计算需求。 2. 同步开发专用芯片、执行器与控制算法。 3. 迭代优化系统整体能效比与性能。 |
追求极致性能的产品,如特斯拉Optimus、宇树H1。涉及定制SoC、驱动器与模型轻量化。 |