DeepFocus，基于AI实现更逼真的VR图像-德赢Vwin官网网

DeepFocus是一种基于AI的渲染系统，用于在VR中渲染自然逼真的人眼聚焦效果。本文来自Facebook工程博客，LiveVideoStack进行了翻译。感谢阿里巴巴高级算法专家盛骁杰提供的技术审校。

研究内容：

一种新的基于AI的框架，用于在VR中渲染自然逼真的人眼聚焦效果。DeepFocus可与高级原型头盔配合使用，在不同的焦距实时渲染模糊效果。例如，当有人戴着支持DeepFocus的设备观看附近的一个物体时，它会立即聚焦并变得清晰，而背景物体则会像在现实生活中一样，呈现出失焦模糊效果。这种失焦模糊（也称为视网膜模糊）对于实现VR中的真实感和深度感知非常重要。DeepFocus是第一个能够为VR应用程序实时产生这种效果的系统。我们现在开放我们的工作和数据集，以帮助VR研究界的其他人。

它是如何运作的：

一些传统方法，例如使用累积缓冲算法（accumulation buffer），可以实现物理上精确的失焦模糊。但它们无法实时生成复杂，丰富的内容，因为这种处理，即使是对于最先进的芯片，要求也太高了。与此不同的是，我们使用深度学习解决了这个问题。我们开发了一种新颖的端到端卷积神经网络，一旦眼睛看到场景的不同部分，就会产生具有精确视网膜模糊的图像。该网络包括新的保持体积的交织层，以减少输入的空间维度，同时充分保留图像细节。然后，网络的卷积层运行在相同的，降低了的空间分辨率上，从而运行时间能够明显减少。

为什么重要：

随着对新型VR头显技术的研究不断深入，DeepFocus将能够vwin 精确的视网膜模糊，从而产生非常逼真的视觉效果。该平台还表明AI可以帮助解决VR渲染高度计算密集型视觉效果的挑战。DeepFocus为克服未来新型显示系统的实际渲染和优化限制提供了基础。

由于DeepFocus仅依赖于标准RGB-D颜色和深度输入，因此它几乎适用于所有现有的VR游戏和应用程序。它还兼容VR研究界目前正在探索的所有三种头显类型，分别是：变焦显示器（如Half Dome），多焦点显示器（例如，FRL先前的工作）和光场显示器。

详细了解Facebook Reality Labs如何创建DeepFocus。

（https://www.oculus.com/blog/introducing-deepfocus-the-ai-rendering-system-powering-half-dome/）

阅读完整的论文：

DeepFocus：用于计算显示的学习图像合成

（https://research.fb.com/publications/deepfocus-siggraph-asia-2018/）

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表德赢Vwin官网网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。举报投诉

AI

AI

+关注

关注
87

文章
30728

浏览量
268885
vr

vr

+关注

关注
34

文章
9638

浏览量
150207

原文标题：DeepFocus，基于AI实现更逼真的VR图像

文章出处：【微信号：livevideostack，微信公众号：LiveVideoStack】欢迎添加关注！文章转载请注明出处。

AI智能体逼真模拟人类行为

近日，据外媒最新报道，斯坦福大学、华盛顿大学与Google DeepMind的科研团队携手合作，成功开发出一种能够高度逼真模拟人类行为的AI智能体。该智能体的构建得益于研究团队将详细的访谈记录

发表于 11-26 10:24 •350次阅读

高通AI Hub：轻松实现Android图像分类

高通AI Hub为开发者提供了一个强大的平台，以优化、验证和部署在Android设备上的机器学习模型。这篇文章将介绍如何使用高通AI Hub进行图像分类的程式码开发，并提供一个实际的例子来展示其在Android平台上的应用。

发表于 11-26 01:03 •197次阅读

高通<b class='flag-5'>AI</b> Hub：轻松<b class='flag-5'>实现</b>Android<b class='flag-5'>图像</b>分类

AI图像识别摄像机

？AI图像识别摄像机是一种集成了先进算法和深度学习模型的智能监控设备。这些摄像机不仅能够捕捉视频画面，还能实时分析和处理所拍摄的内容，从而实现对特定对象、场景或行

发表于 11-08 10:38 •227次阅读

<b class='flag-5'>AI</b><b class='flag-5'>图像</b>识别摄像机

VR科普赛车：VR毒驾模拟驾驶体验，VR消防交通普法教育 #VR科普赛车 #VR毒驾模拟

深圳市星幻元宇科技有限公司

发布于 :2024年10月28日 14:03:48

GPU与VR技术结合应用

一、GPU与VR技术的基本原理 GPU的基本概念 GPU是一种专门用于处理图形和图像数据的处理器，相较于CPU（中央处理器），GPU在处理图形和图像数据时具有更高的效率。GPU通过并行处理技术，能够

发表于 10-27 11:23 •331次阅读

AI大模型在图像识别中的优势

AI大模型在图像识别中展现出了显著的优势，这些优势主要源于其强大的计算能力、深度学习算法以及大规模的数据处理能力。以下是对AI大模型在图像识别中优势的介绍：一、高效性与准确性处理速

发表于 10-23 15:01 •600次阅读

Freepik携手Magnific AI推出AI图像生成器

近日，设计资源巨头Freepik携手Magnific AI，共同推出了革命性的AI图像生成器——Freepik Mystic，这一里程碑式的发布标志着AI

发表于 08-30 16:23 •1127次阅读

深入理解渲染引擎：打造逼真图像的关键

在数字世界中，图像渲染是创造逼真视觉效果的核心技术。渲染引擎，作为这一过程中的关键组件，负责将二维或三维的模型、纹理、光照等数据转化为人们肉眼可见的二维图像。本文将深入探讨渲染引擎的工作原理及其在打

发表于 06-29 08:28 •322次阅读

深入理解渲染引擎：打造<b class='flag-5'>逼真</b><b class='flag-5'>图像</b>的关键

北京君正用户案例：智能报靶，图像识别电子枪

品牌30周年的献礼之作。　　这款蕴藏黑科技的无实弹AI电子手枪，在人工智能技术加持下可实现对不同距离目标的精准射击，枪体还能联动APP端，实现虚拟与现实的灵活切换，互动过程中呈现出逼真的

发表于 06-21 18:19

谷歌发布AI文生图大模型Imagen

近日，谷歌在人工智能领域取得新突破，正式推出了Imagen文生图模型。这款模型以其卓越的细节调整功能、逼真的光线效果以及从草图快速生成高分辨率图像的能力，引起了业界的广泛关注。

发表于 05-16 09:30 •518次阅读

OpenAI发布图像检测分类器，可区分AI生成图像与实拍照片

据OpenAI介绍，初步测试结果表明，该分类器在辨别非AI生成图像与DALL·E 3生成图像时，成功率高达近98%，仅有不到0.5%的非AI图像

发表于 05-09 09:57 •452次阅读

隧道桥梁施工VR安全体验馆

虚拟体验的方式将安全培训的内容进行场景化体验，让每一个接受培训的人在戴上VR眼镜后，整个工程形象逼真的展示在眼前，仿佛身临其境、触手可及，体验者可以在虚拟的建筑工

发表于 03-29 11:39 •1112次阅读

超透镜阵列可实现下一代真3D近眼显示器

由于体积小、全视差、全彩显示方便，更重要的是，通过消除会聚-调节冲突（VAC）实现真正的 3D 和更逼真的深度感知，所以集成成像显示器成为最有前途的近眼显示器（NED）之一。

发表于 01-24 13:38 •766次阅读

计算机视觉：AI如何识别与理解图像

计算机视觉是人工智能领域的一个重要分支，它致力于让机器能够像人类一样理解和解释图像。随着深度学习和神经网络的发展，人们对于如何让AI识别和理解图像产生了浓厚的兴趣。本文将探讨计算机视觉中AI

发表于 01-12 08:27 •1414次阅读

利用AI实现自动图像标注不是梦

了SpeedDP深度学习算法开发平台，如今平台已经实现移动端使用，可运行于Windows或Linux操作系统，可完成自动标注、AI算法开发（项目配置、训练、评估、测

发表于 01-04 08:29 •1301次阅读

搜索历史

DeepFocus，基于AI实现更逼真的VR图像

评论

AI智能体逼真模拟人类行为

高通AI Hub：轻松实现Android图像分类

AI图像识别摄像机

VR科普赛车：VR毒驾模拟驾驶体验，VR消防交通普法教育 #VR科普赛车 #VR毒驾模拟

GPU与VR技术结合应用

AI大模型在图像识别中的优势

Freepik携手Magnific AI推出AI图像生成器

深入理解渲染引擎：打造逼真图像的关键

北京君正用户案例：智能报靶，图像识别电子枪

谷歌发布AI文生图大模型Imagen

OpenAI发布图像检测分类器，可区分AI生成图像与实拍照片

隧道桥梁施工VR安全体验馆

超透镜阵列可实现下一代真3D近眼显示器

计算机视觉：AI如何识别与理解图像

利用AI实现自动图像标注不是梦