浅谈面向元宇宙的技术之——全息视频通话.docx
浅谈面向元宇宙的技术之一一全息视频通话近年来，随着数字化办公、“非接触式”服务的广泛普及， 音视频通话成为远程办公过程中主要的沟通方式。然而，音 视频通话的画面目前都是二维平面，存在感官上的距离感。 随着显示技术的发展，提供裸眼三维视觉体验的全息技术在 实际应用上取得了较大的突破，并成为业界的研究热点，如 谷歌近期研发的全息视频通话项目Project Starline,能让 身处异国他乡的亲友、同事、合作伙伴打破空间的限制，在 通话的时候以虚拟影像的形式“坐”在你的面前，与你自然地 沟通交流。Project Starline项目的出现引发了业界广泛关 注。一、全息视频通话技术概述全息视频通话技术是现有二维视频通话的视觉升级版, 借助三维重建、实时渲染、全息投影等技术实现实时面对面 裸眼三维视频通话，给用户提供沉浸式“面对面”的沟通交流 体验，且无需佩戴眼镜或头盔。目前，实现全息视频通话主要有两种技术路线：一种是 基于视觉特效的技术路线，技术上虽然可行，但在使用上有 一定的限制要求；另一种是基于三维重建的技术路线，现阶 段仍不成熟。L基于视觉特效的技术路线基于视觉特效的全息视频通话在采集、传输、播放等环 节的画面数据都是二维图像数据，其核心是利用三维视觉增 强技术和全息舱显示装置（如图1所示）来实现三维视觉效 果。全息舱是一种透明屏展示柜，柜体前部是一个透明LCD 显示屏，画面的白色区域屏幕不发光显示，观看者可透过屏 幕看到柜体内部，从而获得三维景深的视觉体验。图1全息舱显示装置2 .基于三维重建的技术路线基于三维重建的全息视频通话在采集、传输、播放等环 节传输的画面数据都是三维数据，核心是利用软件算法复现 三维人物、空间来实现全息视觉效果（如图2所示）。目前，基于三维重建的全息视频通话在技术上仍不成熟，存在多镜 头数据编解码、实时三维重建等技术难点。两种技术的对比 情况见表LBacklight UnitDisplay Unit图2基于三维重建的全息视频通话模型表1两种技术对比基于视觉特效的技术路线基于三维技术成熟度技术成熟，应用案例广泛技术不成熟,画面采集高像素普通摄像头多个传输的画面维度二维图像-传输协议RTSP/RTMP等协议画面播放全息舱专业三二、全息视频通话技术在业界的 应用概况目前，基于视觉特效的全息视频通话技术在点对点、多 方视频通话以及一对多直播等场景有相关落地案例，其中， 比较典型的案例是2022年冬奥会上张勇与巴赫的全息会面。 2022年2月6日，身处北京冬奥场所的国际奥委会主席巴赫 通过全息舱“现身”2022北京新闻中心展区，与远在上海的阿 里巴巴集团董事会主席张勇隔空"云聚”会面，以全息形态送 出奥运寄语，又在“现场”隔空传递冬奥火炬，如图3所示。图3国际奥委会主席巴赫通过全息舱送出奥运寄语基于三维重建的全息视频通话技术目前还不太成熟，尚 处于实验室技术原型验证阶段，代表性的项目是Google于 2021年公布的全息视频通话技术Project Starline o Project Starline是一个三维视频聊天室，旨在取代一对一 的二维视频电话会议，让用户有非常真实的现场感，但据用 户的现场体验反馈来看，观看者只能在特定角度、特定距离 范围内观看才能体验到立体视频聊天效果，与宣传片效果差 异很大。三、全息视频通话技术在银行业的应用全息视频通话技术提供的“面对面”实时音视频交互能力 将推动交互方式的升级换代，在对客服务和内部运营方面将 会构建新的金融服务模式，拓展银行业务发展空间。网点远程协助：在远程银行中心与一个或多个支行网点 之间搭建点对点的全息视频通话服务，让银行业务人员与客 户通过线上方式远程交流互动，为客户提供和现场面对面相 同的服务体验，拓展了全新对客服务渠道。全息视频会议：可基于现有视频会议平台，利用全息舱、 三维视觉增强等技术来打造具有科技感、未来感的行内会议 系统，丰富办公形式和用户体验。当前，全息视频通话技术在应用上还有一定的局限性, 如需要定制化的采集场地和全息舱等设备，相信随着技术的 不断进步，未来用户能够体验到如同好莱坞大片中的全息视 频通话方式，提升人与人之间的远程交互体验。
