Facebook开源DeepFocus算法，为VR提供逼真的焦点变换渲染

DeepFocus是Facebook的人工智能驱动的渲染器，据说它可以实时产生自然的模糊效果，是与变焦显示器密切相关的技术。今天，Facebook宣布DeepFocus已经开源。虽然该公司拥有大视场角的原型“Half Dome”可能是专有的，但他们的深度学习工具将是“硬件无关的”。

当你在面前举起手时，您的眼睛会自然地收敛，聚焦于手上。在今天的VR头显中，这种体验并不相同，因为头显中的光源来自固定光源，你的眼睛需要聚焦于很近处才能看清近场图像。这是变焦显示和眼动追踪要解决的问题，可以让固定的焦距可以匹配人的眼睛变得可变，具体取决于你在任何给定时刻所注视的位置。

从本质上讲，这项技术可以让你聚焦于物体，无论它们与你的距离如何，使整体体验更加舒适和身临其境。但是这里的缺失部分是头显并没有复制自然的离焦模糊的能力，也就是当你看着你的手时背景会变得模糊。

Facebook在SIGGRAPH Asia 2018 上发表的一份研究论文中表示，DeepFocus的灵感来自“越来越多的证据表明视网膜散焦模糊在推动调节反应方面发挥的重要作用，以及对深度和物理现实的感知。”

与基于深度学习的图像分析这种更传统的AI系统不同，DeepFocus据说可以处理视觉效果，同时保持高质量VR所需的超清晰图像分辨率。

这意味着该系统不仅让变焦VR头显与带有光场显示器的AR头显画面看起来更逼真，还可以减轻与聚散度调节冲突相关的眼睛疲劳。

“该神经网络被证明可以仅使用常用的RGB-D图像精确合成离焦模糊、焦点叠加、多层分解和多视图图像，让许多支持调节功能的头显能够实时且接近完美的显示视网膜的模糊效果”，Facebook研究人员说。

Facebook在一篇博客文章中称，Facebook今天将发布DeepFocus源代码和神经网络训练数据，主要面向“开发新VR系统的工程师、视觉科学家以及其他研究感知的研究人员”。

Facebook Reality Labs首席科学家迈克尔·阿布拉什（Michael Abrash）在Oculus Connect 5上推出DeepFocus，虽然Half Dome和DeepFocus基本上“只是光学和显示器技术革新的开端，但它是进步加速的典范。”

来源：87870