意法半导体与Leopard Imaging推出多模态视觉模块
由 意法半导体 和 Leopard Imaging 开发的多模态视觉模块将综合感测能力整合到一个先进 机器人 平台。该模块集成了多种感知技术，并直接连接英伟达的 机器人 生态系统。
机器人 感知的综合传感
此次发布的核心是一款多模态视觉模块，将二维成像、三维深度感测和运动追踪集成于一体中。该系统将ST的成像传感器、惯性测量能力和飞行时间激光雷达与NVIDIA的全息扫描传感器桥接整合，利用以太网连接实时向Jetson平台流式多千兆传感器数据。
该装置设计符合典型的人形机器人尺寸、重量和功率限制，传感器整合至关重要。通过将多个传感功能整合到一个模块中，开发者可以减少对离散组件的需求，简化跨传感领域的校准和同步。
意法半导体 模拟动力微机系统与传感器市场副总裁Marco Angelici表示：“类人机器人正超越研究项目和演示，为制造和汽车工厂、物流和仓储，以及零售和客户服务等多个岗位提供强大的新机器。”“我们与 Leopard Imaging 的合作，将市场领先的ST传感器和执行器无缝集成进NVIDIA机器人生态系统，加速具备类人感知的物理AI应用的部署。”
与NVIDIA机器人生态系统的契合
基于NVIDIA全息扫描传感器桥构建的多模态视觉模块也被NVIDIA Isaac机器人框架支持，该框架提供AI模型、仿真工具和开发库。
这一整合有助于解决机器人开发中持续面临的挑战之一，弥合仿真与实际部署之间的鸿沟。据 Leopard Imaging 称，标准化传感器数据流水线的访问可能帮助开发者简化数据收集和培训工作流程。
Leopard Imaging首席执行官Bill Pu表示：“直接在生态系统内访问ST传感器和执行器，使我们能够标准化并简化了HSB界面上人形机器人视觉的数据采集和记录。”“机器人制造者可以使用我们的多感应视觉模块配合Isaac工具，加速学习，快速弥合'模拟与现实'的差距。”
模块底层的传感器技术
该模块整合多项 意法半导体 传感技术，包括：
510 万像素 RGB-IR 图像传感器：支持卷帘快门与全局快门双模式
6 轴惯性测量单元（IMU）：内置机器学习能力
直接飞行时间（dToF）激光雷达传感器：可生成最高 2300 个区域的深度图
激光雷达组件测距范围达 9 米，具备宽视场角，帧率最高 100fps，适配需要实时感知的动态环境。