XR合成渲染引擎 XR VS 2110

实时超高清XR虚拟虚实系统,采用UNREAL ENGINE 5.4.4三维实时虚拟虚实渲染引擎 2路ST2110 4K IP流输入,2路ST2110 4K IP流输出。

实时超高清XR虚拟虚实系统,采用UNREAL ENGINE  5.4.4三维实时虚拟虚实渲染引擎 2路ST2110 4K IP流输入,2路ST2110 4K IP流输出,输出视频达到行业3A级效果,特别是Lumen动态全局照明和反射系统、Nanite虚拟化微多边形几何系统和虚拟阴影贴图。蓝图系统可以使策划不用写代码。有开放的控制协议,能通过网络自动加载内容和模板,按需触发播控等功能,实现演播室自动化制作。

在演播室虚实结合AR或虚拟系统VR制作时,可根据机位调整跟踪参数和镜头参数,使场景中虚拟物体与环境完美融合;支持虚拟场景中多路虚拟摄像机的同时实时显示;控制软件可以对虚拟摄像机实时操控;支持在本地进行场景效果预览;在场景播放动画过程中,进行机位的切换,不会出现动画跳跃的现象;动画的播放支持外部设备进行触发;支持对场景中的虚拟灯光,灯光的方向、发射点、颜色等参数能够实时调整;还支持软件景深,当聚焦在主持人身上时,可以对背景进行失焦处理。

采用Win11 23H2 64位图形操作系统,软件操作界面友好便捷;软件采用模块化设计,可以根据需要灵活扩充;图文包装形式丰富,画面效果新颖、传达更大的信息量;播出控制工作站和渲染引擎的通过以太网,采用交叉连接的方式形成备份,在意外断开后应有应急机制完成播出;支持实时开窗等特技;并支持高清视频片段插入。支持天气、股市、短信、路况等外部数据联接(ODBC、XML、RSS等);

支持无限层播控和包装元素间的切换关系,即:支持无限层的独立播控,即各种在线包装场景中的元素(图片、文字、视频、三维物体)的数量不受任何系统限制(只受渲染能力限制),可以位于独立的层中,并且实现互不干扰的独立控制上下;支持各层中的元素(图片、文字、视频、三维物体)建立互相之间的切换关系,播控人员只需关注需要播出那个元素,事先定义好的切换关系能够自动移动可能会发生重叠冲突造成播出事故的位于其他层的元素,来保障最大的播出安全。能够互相设定切换关系的元素的数量和类型没有任何限制;独立层播控和切换只需在场景设计中实现即可,播控无需关心实现方式,以做到最简化的安全播出。

可以对三维物体、三维文字、三维图片、三维曲线进行实时渲染,并可以通过演播室控制端在播出中进行实时更改变换,能够在摄像机运动的情况下,保证场景渲染的平滑、稳定、无锯齿;摄像机聚焦虚拟三维物体/虚拟视频窗时,虚拟物体的图形清晰,不会产生电子放大;支持多种格式视频文件的播放,如AVI、MPEG4、MPGE2、 MOV、H.264、FLASH视频、WMV等等,并可对视频片断进行剪裁拼接;支持全场景实时抗锯齿,具备硬件加速能力,采用32位真彩色,支持像素级光源;

采用播控分离的结构,播出渲染工作站和播出控制工作站分离,通过网络连接,播出工作站的故障不会影响渲染工作站的输出。支持主备播出安全机制,采用交叉连接的方式形成备份;主机和备机均包括完整的渲染机和控制机,主机和备机的渲染机和控制机支持实时交叉热备。在主机发生故障时,备机可以随时接手主机的直播图文包装播出串联单,代替主机立刻开始工作。

系统具有真三维全景虚拟场景、三维直播特效、虚拟人直播、全景切换、虚拟运镜等强大功能,支持带跟踪和不带跟踪的全景,远景,近景,特写等多机位切换,满足不同场景的运镜需求。虚拟场景内也可灵活调整镜头,360度展示直播场景,支持虚拟背景,支持自定义素材替换,支持摄像机跟踪定位。

 

功能参数

1. 支持OptiTrack、Vicon、TrackMen、Ncam、RedSpy,Mosys,HTC Vive、Seeder机械臂等多种追踪系统接入,并统一空间坐标;

2. 支持对任意型号的摄影机、镜头做畸变,offset等内、外参标定;确保最终虚实合成画面空间透视对齐;

3. 支持控制Seeder机器人摇臂等完成自动化镜头内外参数校准;

4. 位置计算精确到毫米级别,计算时间延迟低于30ms;

5. 支持快速生成大屏点参数,方便在UE里快速生成与定位系统空间位置相统一的大屏投影模型;

6. 数据帧率自适应,支持24,25,30,50,60fps等常用定位数据帧率;

7. 支持将数据实时网络数据流方式输出,供配套UE插件使用,也可以供第三方软件调用;

8. 支持基于大屏物理显示屏的快速标定校准,获取大屏在空间中的准确位置

9. 支持录制UE中虚拟摄影机的最终轨迹数据,可供后期再处理流程的轨迹直接使用;可支持对轨迹的精确帧区间裁切

10. 支持录制最终合成结果画面

11. 支持实时抠像功能,应对不同灯光环境,支持多种参数设置;提供快速取色和多种设置项以提升抠像效果;

12. 抠绿支持无限绿/蓝箱功能,可做到对绿/蓝幕以外的穿帮部分做遮罩屏蔽,使绿/蓝箱无限拓展,避免拍摄中超广角或超远距离机位时的穿帮;

13. 支持一键快速生成大屏模型,大屏在UE里的坐标系与定位系统经标定后的坐标系统一;无需额外的对位对齐调整工作

14. 虚拟渲染画面与实拍画面时码对齐,支持手动调整帧偏移,适应多种使用工况,可确保背景层、实拍视频层、AR层内容的严格帧对齐;

15. 支持AR功能,提供AR阴影和倒影,效果多种参数可调整,支持实现多种复杂效果;既可单独使用AR功能仅与摄影机实拍画面合成,也可与抠绿功能同时工作;

16. 支持基于nDisplay的内视锥VFX拍摄,支持无限机位的联动同步渲染;

17. 支持XR屏幕拓展拍摄,屏幕内和屏幕外内容的空间对齐,无画面错位;

18. 支持屏内外颜色校准功能,修正内容投屏后再被摄影机拍到这些过程中的颜色变化,自动纠正以使最终输出画面里,屏幕内外画面平滑过渡,无色差;

19. 可以与抠绿合成插件结合使用,可在XR合成的基础上,添加AR前景内容,丰富画面表现

20. 支持基于时码的数据输出,并确保输出的像机结果为UE场景中世界坐标系下位姿,以确保可直接使用于后期渲染中;

21. 支持快速导览,一键到达设定项,减少在UE中在各繁复功能里找设置项的耗时问题;亦可以自定义增加快速导览设置项,提高工作效率;

22. 支持多移动机位同时拍摄与实时信号切换;

23. 内含三套基本演播室场景资产用于展示和测试;

24. 通过网络协议触发控制虚拟虚实系统设备,自动加载内容和模板,生成实例,按时触发播出等功能,实现演播室自动化制作。

 

包含:

Win11 23H2 64位图形操作系统

Licensing 授权管理系统

UE5渲染引擎管理系统

Tracking Hub 跟踪系统

Studio Manager 演播室管理系统

ST2110 IP化数据流引擎

 

专业工作站,配置为:

1x 64位处理器 12核24线程 主频2.8-3.9GHz

64GB DDR5内存

NVIDIA RTX 4080图形卡

512GB+1TB  m.2 SSD

1200W热插拨双电源

双1Gb 管理网络接口卡

双25Gb数据网络接口卡