[00318529]沉浸式虚拟现实(VR)视频直播系统

技术成果介绍：

沉浸式虚拟现实(VR)视频直播软件系统是一套集采集、编码、发送、接收播放为一体的VR视频直播录播系统，该系统支持4K/8K超高清VR视频点播与直播，可以提供360°高清晰、逼真、交互视觉体验，其主要功能为：多相机视频实时采集与拼接、全景投影格式转换、优化的高效视频编码与转码、流媒体加密与传输、视频的渲染与绘制、虚拟现实视频质量与用户感知评价。该系统可用于演示基于VR视频的直播录播系统的实现流 程，并可基于此系统加以改进，从而可用于演唱会大型赛事直播、在线教育、游戏、虚拟场景演示等实际应用场景。

主要技术指标及优势：

1. 支持4-8路高清相机输入，实时拼接4K/6K/8K高清视频；

2. 支持圆柱投影(ERP)、立方体投影(CMP)、平面极点投影等10余种全景投影格式变换;

3. 优化的高效感知超高清视频编码，考虑人的视觉特性和视频内容，视频压缩效率平均提升30%;

4.超高清视频实时转码，支持不同码率与格式、不同视频流以及不同视场角的转码；支持流式视频加密， 实时可靠数据传输；

5.支持本地视频、站点视频（HTTP协议）和直播（RTMP和RTP协议）；支持普通2D、单目VR、双目 VR、双目3DVR,头盔3DVr等20多种输出模式；6.虚拟现实视频质量评估技术、用户视觉舒适度、深度感质量评估技术。

知识产权：

已发表IEEE Trans等国际顶级期刊论文10余篇，申请专利10项，授权6项，软件著作权3项目：

1. 专利名称：某质量评价方法，专利号：ZL2015103****0.3

2. 专利名称：基于某高效视频编码方法，专利号：ZL2015101****7.3

3. 专利名称：某视频编码方法和装置，专利号：ZL2015103****6.6

4. 专利名称：一种基于某帧内编码方法，专利号：ZL2013104****6.1

5. 专利名称：一种基于某HEVC帧内编码方法及系统，专利号：ZL2013106***3.5

6. 专利名称：基于某视频转码方法，专利号：ZL20151070***2.7

7. 专利名称：一种低复杂度某编码处理方法，申请号：CN2018115***8.5

8. PCT名称：某感知质量分析与评价方法，申请号：PCT/CN2018/12***9

9. 软件名称：某播放软件V3.0,登记号：2018SR72***7

10. 软件名称：某视频投影转换平台V1.0,登记号：2018SR71***6

11. 软件名称：某失真软件V1.0,登记号：2018SR71***6

主要应用领域：

大型赛事与活动直播、会议直播、游戏直播、生活直播、秀场直播、在线教育。

市场前景及经济效益预测：

VR技术能通过视觉呈现的方式阻断人眼与现实世界的连接，通过设备实时渲染画面，营造出一个全新的世 界。高盛预计，到2025年全球VR产业将形成1820亿美元的市场规模，到2020年，中国市场规模将达85亿美元。经过几年的发展，直播行业已步入一个平稳阶段，达到了2亿平台用户规模，VR+直播能提供更逼真的视觉 体验，其在游戏直播、生活直播以及秀场直播的应用拥有巨大的市场前景和潜在机遇。

产业化需求及生产条件：

项目受到了广东省科技厅重大科技专项、深圳市科学技术公关重点项目支持，已发表10余篇相关论文于 IEEE Trans. Image Process., IEEE Trans. Broadcast., IEEE Trans. Circuits Syst. Video Technol.等高水平期 刊和会议上，已完成核心算法的设计、实现，开发了原型平台，并进行了测试，并且在201 9年中国多媒体大会 （西安）、201 9年深圳高交会上进行了系统演示。我们寻求合作伙伴推进该系统的产业化，以实现VR直播与点 播产业重大突破，对产业伙伴的条件：

1. 可采用专利转让、授权使用、入股等多种方式，实现该技术同企业的商业化绑定；

2. 可将关键技术与企业产品相结合，实现企业产品功能的升级换代。