当前位置: 首页 > web >正文

【Unity笔记】OpenXR 之VR串流开发笔记:通过RenderTexture实现仅在PC端展示UI,在VR眼镜端隐藏UI

Unity OpenXR 之 VR 串流开发笔记:通过 RenderTexture 实现仅在 PC 端展示 UI,在 VR 头显端隐藏 UI

实现 UI 组件只在 PC 屏幕上显示,隐藏 VR 头显中的 UI,结合 Unity 的 OpenXR 框架与 RenderTexture 技术,通过相机分层渲染与数据输出,构建高质量、性能友好的跨端 UI 呈现方案。


一、场景需求

在使用 OpenXR 进行 VR 应用开发的过程中,我们常常需要:

  • 在 PC 端显示操作面板(如调试信息、UI 控制器、状态面板等);
  • 同时,完全隐藏在 VR 头显视图中,不干扰用户沉浸体验;
  • 保持画面干净,分工明确,便于 PC 操作人员控制流程,或 OBS 推流录制。

示意图:一个 UI 通过独立摄像机渲染到 RenderTexture,并通过 RawImage 显示在 PC 上,而 VR 端完全不显示该 UI。

在这里插入图片描述


二、实现原理与分层机制

核心原理

通过创建一个独立的 UI 摄像机(UICamera),仅渲染一个 Layer(如 PCOnlyUI),并将其输出到 RenderTexture,再将该纹理通过 RawImage 显示在 PC 屏幕的 UI Canvas 上。

同时,UI 摄像机的 stereoTargetEye 设置为 None,确保不会渲染到 VR 头显中

相机与 UI 层分工结构

摄像头Culling MaskTargetTexturestereoTargetEye显示端
MainCameraEverything - PCOnlyUIBothVR 头显
UICameraPCOnlyUIRenderTextureNonePC RawImage 显示

三、实现步骤详解

创建 UI 层:PCOnlyUI

  • 菜单路径:Edit > Project Settings > Tags and Layers > User Layer
  • 新建 Layer,命名为 PCOnlyUI
  • 将 UI Canvas 所属对象设置为该 Layer

创建 RenderTexture

  • Assets 下新建 → Create > Render Texture
  • 命名为:UI_RT
  • 设置分辨率:1920×1080(或视项目需求调整)

配置 UICamera

属性推荐值
Culling MaskPCOnlyUI
Clear FlagsSolid Color / Depth Only
Depth大于 MainCamera(如 1)
Target TextureUI_RT
StereoTargetEyeNone(⚠️必须设置)

设置 UI Canvas

属性
RenderModeScreen Space - Camera
Render CameraUICamera
LayerPCOnlyUI
Plane Distance合理设置(如 10 ~ 100)防止遮挡

显示 RenderTexture 到 PC UI 上

  • 创建一个新的 UI Canvas,设置为 Screen Space - Overlay
  • 创建 RawImage(命名为 UIViewer
  • 设置其 texture = UI_RT

四、动态脚本绑定 UI 输出逻辑

public class PCUIRenderSetup : MonoBehaviour
{public Camera uiCamera;public RenderTexture uiRenderTexture;public RawImage uiRawImage;void Start(){if (uiCamera != null && uiRenderTexture != null){uiCamera.targetTexture = uiRenderTexture;}if (uiRawImage != null){uiRawImage.texture = uiRenderTexture;}}
}

五、【重点】处理 VR 不显示、PC 显示 UI 的稳定性问题

问题:UI 闪烁或 RenderTexture 不显示?

可能原因与对策:

原因对策说明
多摄像机渲染冲突(Depth)UICamera 的 Depth 要高于 MainCamera
RenderTexture 未创建确保 UI_RT 是动态初始化并 .Create()
Canvas 未正确绑定摄像机Canvas.renderCamera = UICamera
RawImage 未绑定纹理RawImage.texture = UI_RT
UICamera 未关闭 VR 渲染stereoTargetEye = None

六、支持场景切换的动态相机绑定机制(重点!)

当你将 UICamera 设置为 DontDestroyOnLoad 时,场景切换后 MainCamera 会被替换,但新的 Base Camera 并不会自动包含 UI 摄像机的 Overlay Stack,你必须动态注册。

实用脚本:在场景加载后自动将 UICamera 添加到 MainCamera 的 Stack 中

using UnityEngine;
using UnityEngine.SceneManagement;
using UnityEngine.Rendering.Universal;public class UICameraStackBinder : MonoBehaviour
{private Camera uiCamera;void Awake(){uiCamera = GetComponent<Camera>();DontDestroyOnLoad(gameObject);SceneManager.sceneLoaded += OnSceneLoaded;}void OnDestroy(){SceneManager.sceneLoaded -= OnSceneLoaded;}void Start(){AddToMainCameraStack(); // 兼容首次加载场景}void OnSceneLoaded(Scene scene, LoadSceneMode mode){AddToMainCameraStack();}void AddToMainCameraStack(){var mainCamera = Camera.main;if (mainCamera == null) return;var camData = mainCamera.GetUniversalAdditionalCameraData();if (!camData.cameraStack.Contains(uiCamera)){camData.cameraStack.Add(uiCamera);Debug.Log("[UICameraStackBinder] UICamera 已添加至新场景 MainCamera Stack");}}
}

七、效果验证

端点是否显示 UI
PC Game View显示(RawImage)
VR 头显不显示
OBS / 录屏显示
VR 画面截图无 UI 叠加

✔ 非常适合直播、旁观、操作辅助等多端需求!


八、扩展构想与应用场景

多端 UI 逻辑分层

  • PCOnlyUI:仅在 PC 显示
  • VRDebugUI:仅在头显中显示调试信息
  • SharedHUD:两端共享的 HUD、警告等通用组件

多摄像头 + 多 RenderTexture 实现多画面:

  • 监控、观察、直播切屏(例如安全摄像头)
  • 状态面板分区域渲染(地图、数据、角色)
  • 远程操控或分布式 UI 控制台

九、结论:打造 VR + PC 高效协同的 UI 架构

通过 RenderTexture + Overlay 相机 + 相机栈绑定机制,我们可以:

  • 实现 VR 端干净沉浸体验;
  • 同时支持 PC 操作与观察;
  • 且具有高度可控、可扩展性。
http://www.xdnf.cn/news/16322.html

相关文章:

  • 大模型进阶面试题
  • 车载 CAN-Bus 数据记录仪说明书
  • 【C语言进阶】一篇文章教会你文件的读写
  • 【unitrix】 6.16 非负整数类型( TUnsigned )特质(t_unsingned.rs)
  • 电子电子架构 --- 软件项目的开端:裁剪
  • Java面试题(中等)
  • Javascript NaN Symbol BigInt
  • TDengine 转化类函数 CAST 用户手册
  • 7.24 C/C++蓝桥杯 | 排序算法
  • Android15或AndroidU广播的发送流程
  • 星慈光编程虫2号小车讲解第三篇--附件概述
  • 深入理解 IO 多路复用:从 select 到 epoll
  • MySQL---索引、事务
  • VUE2 学习笔记5 动态绑定class、条件渲染、列表过滤与排序
  • 【全新上线】境内 Docker 镜像状态监控
  • 秋招Day18 - MyBatis - 基础
  • C语言转义字符‘\\‘‘ 解析与常见误区
  • 六种经典智能优化算法(PSO/GWO/WOA/HHO/DBO/SSA)无人机(UAV)三维路径规划,Matlab代码实现
  • TimeXer - 重新审视时序预测内的外生变量
  • 【LeetCode数据结构】二叉树的应用(一)——单值二叉树问题、相同的树问题、对称二叉树问题、另一棵树的子树问题详解
  • MySQL的命令行客户端
  • markdown学习笔记(个人向) Part.2
  • 跨境支付入门~国际支付结算(区块链篇)
  • C语言:20250724笔记(函数-指针)
  • JAVA_THIRTEEN_常用API
  • 【分布式锁】什么是分布式锁?分布式锁的作用?
  • tensorflow搭建神经网络
  • Linux 磁盘挂载,查看uuid
  • 前端笔记:同源策略、跨域问题
  • 专题:2025微短剧行业生态构建与跨界融合研究报告|附100+份报告PDF汇总下载