全息FACEBOOK神经渲染实现AR穿戴新里程,微美全息AI视觉场景高仿真拼接

Facebook Reality Labs(FRL)致力于构建一个现实世界和虚拟世界能够自由混合 , 同时提升我们日常生活体验 , 增加效率和加强彼此之间联结的未来 。 续航是迈向所述愿景的挑战之一 。 为了能够实现能够长时间(包括一整天)舒适穿戴的虚拟现实头显和增强现实眼镜 , 我们必须优化设备的功耗 。 作为朝构建下一阶段AR/VR系统的一步 , 这家实验室正努力开发不影响图像质量的情况下显著降低功耗的图形系统 。
DeepFovea是FRL为应对这一挑战而开发的数种基于神经网络的方法之一 。 DeepFovea这个渲染系统利用了最近发明的生成对抗网络(Generative Adversarial Network;GAN)人工智能概念来模拟人类在日常生活中的外围视觉 , 利用这种感知匹配架构来提供前所未有的图形效率 。 在测试中 , DeepFovea可以将渲染所需的计算资源量减少多达10-14倍 , 而人眼依然无法注意到任何图像差异 。 DeepFovea的神经渲染远远超出了目前Oculus产品中的传统注视点渲染系统 , 能够生成感知上与全分辨率图像别无二致的图像 , 而需要渲染的像素不到10% 。 现有的注视点渲染方法需要渲染全分辨率图像一半的像素 , 所以DeepFovea在渲染需求的数量级进步代表了感知渲染的一个全新里程碑 。
FRL最初在2019年11月的SIGGRAPH Asia展示了DeepFovea , 而今天 , 团队公开了关于DeepFovea存储库的完整演示 , 从而帮助图形研究社区深化对先进感知渲染的探索 。
全息FACEBOOK神经渲染实现AR穿戴新里程,微美全息AI视觉场景高仿真拼接
图片

FRL的最终目标是将实时注视点渲染带给能够全天候穿戴的轻便高能效AR/VR设备 。 DeepFovea演示了其能够渲染比传统渲染器少10%的像素 , 同时没有出现感知质量损失 。 这为感知渲染的效率设定一个全新的标准 , 并标志着朝着前述目标迈出了重要的一步 。 这种方法不取决于硬件 , 亦即DeepFovea能够兼容各种AR/VR研究系统 。
尽管DeepFovea为AR和VR中的高效绘图提供了一种重要的方法 , 但这只是超低功耗感知探索的开始 。 除了研究论文之外 , FRL同时发布了DeepFovea演示内容 。 团队表示 , 希望这能给志在为感知与神经渲染技术的进步做出贡献的图形与视觉科学研究人员提供一个有用的框架 。
而在国内 , 微美全息(WIMI.US)拥有国内领先的AR全息应用平台 。 据Frost & Sullivan称 , 从2017年的总收入来看 , 微美全息云已是中国领先的全息AR应用平台 。 此外 , 根据Frost & Sullivan的数据 , 2018年 , 微美在国内所有全息AR解决方案提供商中建立了全面、多元化的全息AR内容库 , 在收入、客户数量、全息AR内容以及全息AR专利和软件著作权数量方面 , 微美全息云在中国全息AR行业排名第一 。 2018年全年 , 微美全息云拥有大约4654个AR全息内容、106软件版权和219个技术专利 。 微美全息云致力于使用全息技术来满足客户和最终用户的娱乐和业务需求 。 根据Frost&Sullivan的说法 , 微美全息云目前运营的全息AR应用平台涵盖了中国最广泛的全息AR产品类型 。 微美全息云的综合平台应用是微美全息云区别于竞争对手的一个关键因素 。
全息黑科技那么出彩 , 微美全息(WIMI.US)专注于计算机视觉全息云服务 。 据介绍 , 微美全息覆盖从全息计算机视觉AI合成、全息视觉呈现、全息互动软件开发、全息AR线上及线下广告投放、全息ARSDK支付、5G全息通讯软件开发、全息人脸识别开发、全息AI换脸开发等全息AR技术的多个环节 , 是一家全息云综合技术方案提供商 。 其商业应用场景主要聚集在家用娱乐、光场影院、演艺系统、商业发布系统及广告展示系统等五大专业领域 。
全息投影技术的应用已经广泛普及 , 在技术上也越来越的成熟 , 融合了多媒体、互联网等多项技术 , 从而可以增加远程控制和远程的传输与连接 , 它的清晰度和展架自由组合等都是一种不小的创新 。 当前 , 裸眼全息投影技术的运用十分广泛 , 涉及各个领域 。 在军事领域 , 全息投影技术可模拟战场环境 , 从而提供分析决策与行动的支持 , 真实且便携;在教育领域 , 可以突破时间和空间的限制 , 用动态的、具有时间性和故事性的虚拟影像来展现历史 , 真正达到学生参与体验 , 实现寓教于乐;在影视领域 , 全息影像技术能使人有更强的真实感 , 在超大屏幕的影院中 , 无需带上特制的眼镜 , 借助超大立体画面配合环绕立体声音效就能使观众有身临其境的感觉;在舞台效果上 , 能使观众直接看到舞台上立体的虚拟人物和景物 , 从而营造出亦幻亦真的视觉氛围 , 具有超级强烈的视觉冲击力 。


推荐阅读