Pixel3人像模式对Frankenphone来说很神奇

该钻机名为 Frankenphone，其结果令人难以置信。谷歌本周描述了他们在 Pixel 3 相机的人像模式中使用一种奇怪的设备创造魔法的方式。你首先看到的是那个设备——实际上是 5 个 Pixel 3 设备连接在一起成为一台能够收集视觉信息以训练所有未来 Pixel 智能手机的怪物机器。

今天谷歌解释了他们如何能够将一组复杂的变量转换成一个相机系统，该系统可以合理准确地预测任何物体来自 Pixel 3 相机的深度。为此，他们使用了机器学习——计算机处理其他计算机提供给他们的数字，从而创造出可以改进所有 Pixel 手机的智能最终产品。为此，谷歌从一组“深度线索”开始。

Google 使用的深度线索：

• 传统立体算法——又名“立体深度”

• 焦点——又名散焦线索

• 日常物体的大小——又名语义线索

谷歌使用了上述三种深度线索，结合谷歌照片和谷歌图像搜索等来源已经学习到的大量对象。这些图像是机器识别的“日常对象”。这些物体的识别、立体深度 (PDAF)、散焦深度和语义线索被用来创建一个可以分析照片的系统，从而使谷歌的相机算法变得更加智能。

为了教授 Google 的系统，Google 创建了 Frankenphone，这是一种可以同时从 5 个 Pixel 3 设备上拍照的设备。通过同步，这款手机上的这些镜头能够捕获 5 倍的深度数据，从而使最终产品能够为 Google 的系统提供比其他方式更详细的照片中物体的信息。

有了这些信息，谷歌的系统就可以更好地预测日常物体的大小及其与相机的相对距离。单个对象的多个角度——比如人类——也为系统提供了关于人类可能坐着或站立等的许多不同位置的更多信息。

使用结果信息，谷歌能够通过卷积神经网络运行 PDAF 照片以输出准确的深度图。有了这些信息，就可以显示最终照片，并在主要拍摄对象周围进行模糊处理，从而创建出各种“专业肖像”。所有这些信息都经过处理和翻转，使 Pixel 能够更好地预测使用您手中的 Pixel 拍摄的照片中的深度图。

这会产生漂亮的人像模式照片，但它也使应用程序 Google 照片能够在捕获后重新调整照片。在最新版本的 Google 相册中打开人像模式照片，您应该能够更改模糊量并更改焦点 - 这太棒了!

标签：

版权声明：本文由用户上传，如有侵权请联系删除！