MuJoCo 相机 5 分钟上手三行 XML 让镜头跟着机械臂跑【免费下载链接】mujocoMulti-Joint dynamics with Contact. A general purpose physics simulator.项目地址: https://gitcode.com/GitHub_Trending/mu/mujoco写机器人仿真时最头疼的往往不是动力学而是镜头。MuJoCo 相机系统统一管理所有仿真视角固定机位、自由旋转、目标跟随都归它管。这篇文章只解决一个实际问题怎么让镜头摆到你要的位置、跟住动作、不裁画面最后录出一段干净的演示视频。镜头一跑起来就飘怎么办你写了个夹爪模型跑一次仿真镜头对着地面某个角落。机器人动起来镜头还停在原地。问题多半出在同一处MuJoCo 的仿真视角由两层东西决定。XML 里的相机定义静态的观察点写死在模型文件里运行时的相机状态一个mjvCamera结构体Python 里叫MjvCamera决定当前这一帧镜头到底怎么用后面每个小节都是在动其中一层。先学会摆好位置再让它动起来最后导出画面。我想固定盯着机械臂末端MuJoCo 固定相机怎么写固定相机就是位置和朝向都写死的观察点。它在 XML 里定义不用运行时创建camera namegrip pos0.4 -0.3 0.5 xyaxes1 0 0 0 1 2/两个参数值得记一下pos相机在世界坐标系里的位置xyaxes6 个数前 3 个是相机 X 轴方向后 3 个是 Y 轴方向朝向Z 轴也就是看的方向由它俩叉乘决定。侧视、顶视这种规则角度用它最直观完整属性列表在 doc/XMLschema.rst 里。定义好之后Python 里这样激活cam mujoco.MjvCamera() cam.type mujoco.mjtCamera.mjCAMERA_FIXED cam.fixedcamid model.camera(grip).id # ... 省略渲染 ...fixedcamid就是告诉 MuJoCo用 XML 里叫grip的那个相机。 小技巧想要第一人称视角镜头装在机械臂上把camera直接写进body标签里就行它会跟着刚体走。model/humanoid/humanoid.xml 里就有一个现成的egocentric相机还把fovy拉到了 80 度视野很宽。我想自己转着看鼠标怎么操作自由相机free camera是交互调试最常用的模式。它不绑定 XML 定义位置、朝向都在运行时由你控制。鼠标映射记住三条左键拖动绕着注视点转圈右键拖动挪动注视点滚轮拉近拉远在 C 里mjv_defaultCamera给一个开箱即用的自由相机mjv_moveCamera处理鼠标事件把位移量传进去就行。Python 的交互式 viewer 帮你接好了直接拖鼠标。怎么让镜头自动跟上动作MuJoCo 相机跟随两种写法第一种XML 里加一个mode属性保存模型时它就带着追踪配置camera namefollow pos-3 0 1 xyaxes0 -1 0 1 0 2 modetrackcom/trackcom表示追踪模型质心。想指定某个刚体就换成trackbody并配target。第二种运行时直接改相机状态cam.type mujoco.mjtCamera.mjCAMERA_TRACKING cam.trackbodyid model.body(torso).id # ... 渲染同前 ...trackbodyid指定跟哪个刚体。lookat和distance还能微调注视偏移和观察距离。⚠️ 坑点目标动得快时追踪镜头容易抖。要么拉大distance要么改用装在刚体里的第一人称相机——它和刚体刚性绑定一点不抖。画面不对或被裁掉mujoco camera 参数怎么救朝向不对三个参数怎么选朝向就是相机面朝哪里、哪里算上。三种写法参数白话解释适合场景xyaxes直接给 X、Y 轴方向侧视、顶视等规则角度euler三个旋转角度手动摆拍好算quat/zaxis四元数或单根 Z 轴已有姿态数据时投影相关fovy是垂直视野角默认 45 度越大越广角。orthographic打开正交投影平行投影无近大远小。⚠️ 坑点切到正交后fovy的含义从角度变成了视野半长米。画面突然放大缩小多半是这里。画面被裁掉裁剪面在哪调物体比裁剪面更近或更远就会被切掉。裁剪面在视觉全局配置里改visual global clipnear0.001 clipfar500/ /visualclipnear是近裁剪面太近会被切clipfar是远裁剪面场景大就调大。我想录一段干净的演示视频流程是什么多机位XML 里定义几个camera录的时候按fixedcamid逐个切换每个机位录一遍。运镜动画手动改相机状态。位置做线性插值姿态做球面插值slerp让旋转走最短路径每帧渲染一次画面就平滑过渡了。导出帧序列frames [] for i in range(300): mujoco.mj_step(model, data) renderer.update_scene(scene, cameracam) # ... 省略 ... frames.append(renderer.render()) 小技巧帧存成 PNG 后再合成视频比边渲染边写文件省内存。完整的 C 逐帧录制实现可以看 sample/record.cc。现在就可以试把cam.type改成mujoco.mjtCamera.mjCAMERA_TRACKING重跑一遍 humanoid看镜头是不是贴上了躯干。【免费下载链接】mujocoMulti-Joint dynamics with Contact. A general purpose physics simulator.项目地址: https://gitcode.com/GitHub_Trending/mu/mujoco创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考