瑞立视智能3D交互系统——视点追踪全息3D和人机交互极致融合 2020年11月

2020年11月，深圳市瑞立视多媒体科技有限公司（Realis ，以下简称瑞立视）举办了2020新品发布会，展现了能够实现人机智能交互的全息3D智能立体交互系统。发布会的主角是基于瑞立视核心的光学空间定位技术研发的最新产品：RTS-3DHOLO全息3D智能交互数字虚拟沙盘、RTS-3DESK全息3D桌面交互系统以及RTS-DINO双目红外光学定位相机。而发布会的重头戏则是RTS-3DHOLO全息3D智能交互数字虚拟沙盘。
瑞立视全息3D智能交互数字虚拟沙盘：让虚拟世界更真实
文章插图
RTS-3DHOLO全息3D智能交互数字虚拟沙盘是一款结合三维仿真、光学空间定位、视点追踪全息3D显示、人机交互的一体化产品，能够将数字虚拟内容进行三维立体化展现的一套可交互的全息3D虚拟沙盘系统。
换句话说，该产品以“全息3D”贯穿产品的视觉概念，通过光学定位动作捕捉等一系列交互系统构成了一个完整的信息处理平台，该产品改变了人们对于显示屏单调、平面的认知以及使用方式，实现了从2D到3D、定点到360度环绕、静止到实时动态交互的显示屏应用改革，提高人机交互的沉浸感。
融合全息、3D、交互新型人机智能交互产品形态
当讲到高沉浸感的人机交互体验，也许第一反应是戴上VR头显或AR眼镜，与虚拟环境互动以获得身临其境般的体验。而全息3D显示技术作为增强现实（AR）的其中一种呈现形式，在行业应用中也有不少的成果。其中较为广为人知的全息投影方案有早期的初音未来演唱会，或者邓丽君“复活”与周杰伦合唱等。
文章插图
基于3D全息技术建立的三维图像，消弭了人与计算机画面的距离，使数字图像到达了“让画面走出来”的阶段。而全息技术的商业落地，继续发展出了不同的产品形态，比如应用在裸眼3D大屏，进行产品展示、舞台效果设计等。
文章插图
成都太古里裸眼3D大屏
但无论是全息影像，还是裸眼3D应用，观众都只是停留在“观看”层面，要实现更深度的沉浸感，还需要加入交互元素，目前市面上缺少能够很好地整合全息技术、3D视觉技术、人机智能交互及XR技术的产品，但其对应的图形仿真和立体化、沉浸交互体验正是用户的关键需求。基于这一点， RTS-3DHOLO全息3D智能交互数字虚拟沙盘应运而生。
这套交互系统不同于主打封闭式沉浸体验的VR头显，十分适用于B端企业协同作业场景，对此类需求较高的企业来说该解决方案具有开放式沉浸的使用特性。其应用领域包括地产展示、展览展陈、智慧城市、文创博览、军事仿真、教育教学、医学培训和工业仿真等等。
内容层面，传统3D项目开发落地相较VR内容成熟度、普及度更高，其可供参考案例及覆盖受众较广，具备较强的变现能力。对于政企客户来说，这种介于传统与黑科技之间的沉浸式展示模式更易于被接受和推广，教育场景下也更符合实操、分享式学习理念。
瑞立视正在积极推动其“全息3D智能立体交互系统”成为一个可广泛应用于各大行业的产品体系。这意味着，在房地产、军事、工业制造、智慧城市、文创产品、教育、医学等领域，人们可以更方便地获取知识、理解更复杂的工程，从而提升信息交流的效率和质量。
文章插图
全方位构建完整的产品体验与内容生产生态
RTS-3DHOLO采用计算机3D仿真技术结合基于光学空间定位的视点追踪全息3D显示技术，将3D场景立体化展现。人与虚拟沙盘之间的交互，通过瑞立视核心的光学空间定位、人机交互技术，捕捉到操控手柄空间数据，手柄发出指令对全息3D内容实时操控，将3D显示载体以水平观看的方式呈现。
构建可交互的全息3D虚拟沙盘系统，其难点在于基于计算机视觉原理，实现由多个高速相机从不同角度对目标特征点的监视和跟踪，同时结合带有Marker标记点的眼镜及手柄对应的算法来完成对头部及体验者相对位置的捕捉。
通过标记点式光学动捕算法，将光学空间定位、视点追踪全息3D显示、数字虚拟场景智能交互和双视角全方位立体操控等技术融于一身，这正是RTS-3DHOLO全息3D智能交互数字虚拟沙盘能够呈现出逼真全息3D人机交互效果的核心所在。