当前位置: 首页 > news >正文

自动驾驶—CARLA仿真(8)visualize_multiple_sensors demo

测试用例

PythonAPI/examples/visualize_multiple_sensors.py

carla_vis_multiple_sensors

这是一个多传感器同步可视化示例,用于在单个 Pygame 窗口中以网格布局同时显示多个传感器数据,包括:

  • 多视角 RGB 摄像头(前、后、左、右)
  • 3D LiDAR 点云(投影为 2D 图像)
  • 语义 LiDAR(Semantic LiDAR)

适用于传感器融合、感知系统调试等场景。


🔑 主要模块解析

1.DisplayManager:统一显示管理器
  • 功能:创建 Pygame 主窗口,并管理传感器子画面的布局。
  • 核心特性
    • 支持网格布局(如[2, 3]表示 2 行 3 列)
    • 自动计算每个传感器画面的尺寸偏移位置
    • 提供render()方法统一刷新所有传感器画面
    • 封装 Pygame 初始化与销毁逻辑
  • 关键方法
    • get_display_size():返回每个子画面的宽高
    • get_display_offset(gridPos):根据网格位置[row, col]计算像素偏移

✅ 实现了“一个窗口,多传感器视图”的核心架构。


2.SensorManager:传感器抽象与数据处理
  • 功能:封装各类传感器的生成、数据回调与渲染逻辑。

  • 支持的传感器类型

    类型CARLA 蓝图数据处理方式
    RGBCamerasensor.camera.rgb转为 NumPy → BGR → Pygame Surface
    LiDARsensor.lidar.ray_cast将 3D 点云正交投影到 2D 平面,绘制为白点图
    SemanticLiDARsensor.lidar.ray_cast_semantic同上,但含语义标签(本例未着色)
    Radarsensor.other.radar接收数据但未渲染(仅计时)
  • 关键机制

    • 自动匹配分辨率:根据DisplayManager的子画面尺寸设置传感器image_size_x/y
    • 异步监听:通过sensor.listen(callback)注册回调函数
    • 性能统计:记录每帧数据处理耗时(time_processing

✅ 实现了传感器类型解耦,新增传感器只需扩展init_sensor()和对应save_*_image方法。


3.传感器配置与布局(核心演示部分)

run_simulation()中定义了6 个传感器,布局为2 行 × 3 列

网格位置[row, col]传感器类型安装位姿
[0, 0]RGBCamera左侧(yaw = -90°)
[0, 1]RGBCamera正前方(yaw = 0°)
[0, 2]RGBCamera右侧(yaw = +90°)
[1, 1]RGBCamera后方(yaw = 180°)
[1, 0]LiDAR车顶中心(64 线,100m 范围)
[1, 2]SemanticLiDAR车顶中心(64 线,100m 范围)
  • 所有传感器均附着于同一辆自动驾驶车辆(Dodge Charger 2020)
  • 车辆启用set_autopilot(True),在地图中自主行驶

💡 注释明确提示:修改grid_sizeSensorManager实例即可自定义布局与传感器数量(见 lines 290–308)。


4.仿真控制模式
  • 同步模式(默认)
    • 启用synchronous_mode
    • 固定时间步长0.05s(20 FPS)
    • 使用world.tick()精确控制仿真推进
  • 异步模式(可选)
    • 使用world.wait_for_tick()被动等待

✅ 保证传感器数据与仿真状态严格同步,避免时间错位。


5.主循环与交互
  • 渲染循环
    display_manager.render()# 绘制所有传感器画面
  • 退出控制
    • ESCQ键退出
    • 关闭窗口退出

✅ 总结

该脚本是 CARLA多传感器可视化的标准范例,展示了:

  1. 如何在单窗口中网格化布局多个传感器视图
  2. 如何抽象不同传感器的数据处理流程
  3. 如何实现同步/异步仿真下的稳定渲染

适用于开发者快速搭建感知系统调试界面,或用于教学演示多传感器协同工作效果。

http://www.cnnetsun.cn/news/65929.html

相关文章:

  • 提示工程架构师的战略规划:提示系统生命周期管理
  • 条形码识别与定位:基于FCOS框架的多类型条码检测与识别技术详解
  • AutoGPT能否用于学术文献综述?研究辅助工具测评
  • 如何用AutoGPT实现任务全自动执行?深度解析开源大模型能力
  • Mapbox GL JS 核心表达式:`in` 包含判断完全教程
  • Web3双核引擎:当AI量化金融大脑,遇见DAO社交生态灵魂
  • CEX开发困局:当达普韦伯为交易所注入“数字灵魂”
  • AutoGPT镜像集成指南:如何嵌入现有业务系统?
  • AutoGPT项目活跃度分析:GitHub星标增长趋势
  • AutoGPT能否生成短视频脚本?内容创作新方式
  • 超越ChatGPT!教你开发能自主完成复杂任务的AI智能体,代码开源
  • 震惊!AI Agent智商税?Google最新研究:盲目堆叠智能体可能导致性能暴跌70%
  • AI Agent“杀疯了“!大模型时代,你的编程技能该“内卷“还是“躺平“?
  • 【AI神器】Claude Code四大神器全解析!小白程序员也能秒变效率王者,Command/Skill/Agent/MCP一次搞懂!
  • AutoGPT能否接入企业微信?组织内协作场景落地
  • 震惊!原来AI编程开发这么简单:LLM、Agent与Workflow三兄弟协同工作原理大揭秘,小白也能秒变AI达人!
  • 图灵奖大佬怒怼大模型:LLM不是通向AGI的路径!下一波AI革命竟是洗碗倒水?程序员必看!
  • 从“十五五”规划建议看数字孪生重点发展方向
  • Qwen3-32B中文理解能力为何如此出色?内部机制揭秘
  • BPAdaboost模型:以BP神经网络为‘弱‘分类器的强分类器构建方法
  • 16、科学计算实用指南:从矩阵运算到生物信息学
  • LobeChat文件上传功能怎么用?处理PDF、Word超简单
  • BTC波动加剧之际,投资者如何选择可靠的数字资产观察平台?
  • 基于springboot的水果购物商城管理系统的设计与实现_5n1fg985
  • 计算机毕业设计springboot家庭理财系统 基于 SpringBoot 的个人家庭资产管理系统 SpringBoot+Vue 的智能化家庭财务分析与规划平台
  • 论文写作新范式:基于9款AI工具的实战评测,开题报告与草稿高效产出
  • 兼容性测试云平台使用方法
  • Selenium WebDriver多浏览器控制
  • 计算机毕业设计springboot基于微信小程序的核酸检测预约系统 基于微信小程序的 Spring Boot 核酸检测预约管理系统设计与实现 微信小程序结合 Spring Boot 的核酸检测预约平台
  • 计算机视觉项目启动利器:PyTorch-CUDA开箱即用环境