技术详细介绍
本项目围绕非配合复杂环境下虚实信息的无缝融合与交互自然呈现以及云环境下虚实混合环境的统一表达与应用系统的快速定制等关键科学问题，以非配合虚实环境的实时注册融合技术与引擎、大视场高保真的虚实环境自然交互呈现技术与装备、复杂虚实混合环境的高效构建、应用定制与云服务平台等三个关键技术研究为基础，研发高沉浸式和透射式头盔显示器、虚实环境自然融合引擎和高效内容创作、行业应用软件定制和服务云平台等系统，突破当前混合现实技术普及应用仍面临的复杂虚实融合呈现的软硬件实时性、稳定性和自然性差，缺乏普适规范的系统软件开发框架，难以高效定制行业应用系统等重大技术瓶颈。
项目成熟度
由2016年起，项目完成了虚实环境的实时注册、单图语义理解、光照恢复、超大场景三维重建和超大视角透射式头盔显示器等工作。
应用范围
构建一个支持大范围室内场景、实时注册融合、大视角头戴式显示器的增强现实终端，以及云环境下虚实混合环境的统一表达与应用系统的快速定制平台。
生产条件与经济效益评估
本项目属于科技部国家重点研发计划项目。
合作方式
跨校合作。其中，浙江大学作为主要承担单位，负责非配合虚实环境的实时注册融合技术与引擎（课题1），北京理工大学作为主要承担单位，负责大视场高保真的虚实环境自然交互呈现技术与装置（课题2），网易（杭州）网络有限公司与厦门大学团队、浙江大学团队，负责复杂虚实融合环境的高效构建、应用定制与云服务平台（课题3）。