谷歌对其Pixel 8相机进行了重大升级以下是他们的升级方式

谷歌对Pixel 8相机进行重大升级

谷歌正在通过其Pixel 8和Pixel 8 Pro智能手机,向智能手机摄影和视频领导地位的争夺中发起攻势。在这些Android手机上带来的十几个显著改进中,有一个名为Video Boost的工具,它利用谷歌装满服务器的数据中心上的AI处理,大幅提高图像质量。

当您首次拍摄视频时,您只有一个1080p的预览版本。但在上传和处理约几个小时后,谷歌使用了一个对智能手机来说太大的新人工智能模型,以改善阴影细节,减少噪点和稳定视频。这意味着谷歌的夜视技术(该技术在2018年为在昏暗和黑暗环境下拍摄的智能手机照片设定了新标准)现在也适用于视频。至少当Video Boost于今年冬季发布时,它将适用于视频。

负责Pixel相机的首席产品经理Isaac Reynolds表示:“夜视对我们来说意义重大。它是市场上最好的低光智能手机视频,包括最近推出的任何手机。”他在不掩饰对苹果iPhone 15型号的讽刺中说道。但是Video Boost也改善了白天的视频,具有更好的细节和更平滑的平移。

观看视频:

Reynolds在最新发布的Pixel 8(售价699美元)和Pixel 8 Pro(售价999美元)的新照片和视频技术的独家深入访谈中发表了讲话。他详细介绍了谷歌称之为“双曝光”的新硬件,该硬件使夜视视频成为可能,并引入了一系列新的Pixel摄影技术:更高分辨率的照片,更好的镜头,一个具有高级摄影控制的新应用程序,能够创建一张每个人都微笑的合影,以及一个音频魔术橡皮擦,可以清除视频中的声音。

相机功能对于智能手机非常重要,尤其对于谷歌的Pixel手机更是如此。它们正在获得市场份额,但相对较少,仅占北美第二季度手机出货量的4%。多年来的计算摄影工作支持下,出色的照片可以说是Pixel系列的最大卖点。

但是在光线不足时,Pixel手机的视频效果较差。改善这一点,即使需要借助谷歌的服务器,也是使Pixel手机值得购买的关键。

Reynolds表示:“今年我们真正希望取得巨大的进步就是在视频方面。” Video Boost是“我多年来做过的最令人兴奋的事情”。

下面详细介绍了谷歌如何努力提升其Pixel 8手机的照片和视频质量。

Pixel 8 Video Boost的工作原理

实现Video Boost需要许多发展。

首先是Pixel 8主摄像头中的一种较新的图像传感器技术,称为双转换增益,它改善了图像噪点和动态范围 – 即同时捕捉场景的阴影和高光细节的能力。谷歌将其方法称为“双曝光”,但与常规的HDR(高动态范围)技术不同,它不会混合多个单独的拍摄。

谷歌表示,与苹果iPhone 15 Pro相比,其Video Boost技术在视频动态范围(包括未被烧掉的阴影细节和高光)方面表现更好。但是你需要等上几个小时才能从谷歌的数据中心获取Video Boost视频。

谷歌;Stephen Shankland/CNET的屏幕截图

相反,双转换增益技术能够同时以逐像素的方式捕捉低光和亮区的细节,然后将两者中最好的部分混合在一起。结果是:“无论是高对比度场景还是低光场景,与Pixel 7和Pixel 7 Pro相比,您将看到明显更好的性能,”Reynolds说道。“您不必放弃动态范围。这意味着较少的欠曝光,也就是较少的阴影噪点。”

接下来是新的Tensor G3处理器,这是谷歌Pixel手机处理器的第三代。与去年的G2相比,G3内置了更多用于人工智能和图像处理的谷歌电路。谷歌使用它来生成两个视频。一个是1080p的预览版本,您可以立即观看或共享。

另一个是上传到谷歌进行更多编辑的Video Boost版本。G3预处理该视频,并为每个帧添加最多400个表征场景的元数据元素,Reynolds说。

最后的Video Boost步骤发生在谷歌的数据中心,服务器使用新开发的算法对低光图像进行降噪、稳定和锐化处理。然后,该处理后的视频替换了手机上的预览视频,如果您最初以4K分辨率拍摄,则包括4K版本。

雷诺兹认为视频数据中心的绕道是值得的。

他说:“结果是不可思议的。”此外,人们喜欢通过照片和视频回忆过去的时刻,不仅仅是几个月或几年后。“我认为等几个小时没有任何缺点,”他说。

亲密接触 Pixel 8 和 Pixel 8 Pro

这个等待可能值得,但等待时间可能会比几个小时更长,以便将大量视频传输到谷歌。如果你离开家里的 Wi-Fi,你可能会担心超出移动数据流量限制。当你在家里时,你可能是数百万人中的一员,他们的宽带实际上并没有提供快速上传速度。

Pixel 8 相机的更多百万像素

如果你拍照,传感器不使用图像传感器的双转换增益技术 – 至少目前还没有,尽管谷歌表示对该技术的潜力感到兴奋。

但还有其他大的改进:与三星和苹果一样,谷歌现在正在超越我们多年来一直拥有的 12 百万像素智能手机照片分辨率。

当苹果在 2022 年推出 iPhone 14 Pro 时,它让摄影师可以使用主摄像头拍摄 4800 万像素的照片。三星则进一步提供了一个 2 亿像素的传感器,尽管其结果在 5000 万像素以上并不令人印象深刻。相比之下,尽管 Pixel 7 和 7 Pro 拥有 5000 万像素的主摄像头,但谷歌只提供了 1200 万像素的照片分辨率。(尽管它确实提供了 2 倍和 10 倍模式,利用了其传感器的全分辨率。)

今年,谷歌在像素 8 Pro 上的像素数量方面超越了苹果。你不仅可以以主摄像头的完整 5000 万像素分辨率拍照,还可以拍摄 4800 万像素的超广角照片(就像今年的 OnePlus 11),以及 4800 万像素的 5 倍变焦照片。 (Pixel 8 只能拍摄 1200 万像素的超广角照片。)

谷歌的 Pixel 8 Pro 和 Pixel 8 智能手机,它们的颜色为海湾和玫瑰。

Stephen Shankland/CNET

与所有旗舰手机制造商一样,谷歌采用了一种称为像素合并的技术,为摄影师提供了在低光环境下使用全分辨率拍摄和更低分辨率拍摄之间的选择。但今年,如果你愿意,即使在黑暗中,它也会让你拍摄全分辨率的照片,而苹果则在黑暗环境下自动切换到像素合并和低分辨率。

“启用 5000 万像素,即使在非常低的光线下,你总是会得到比拍摄 1200 万像素更多的细节,尽管可能会有一些噪点惩罚,”雷诺兹说。

你还可以使用夜拍模式减少噪点。它可以在 5000 万像素分辨率下工作。

苹果在上个月推出的 iPhone 15 型号中,将其主摄像头的默认照片分辨率从 1200 万像素增加到 2400 万像素。它还使用了比旧版 JPEG 更紧凑存储文件的 HEIF 图像格式。如果你是像素摄影师,你可以选择全分辨率或 1200 万像素,但没有中间选项。而且没有 HEIF 支持,因为谷歌更喜欢 JPEG 的通用兼容性。

我们要通过测试才能知道谷歌的高分辨率照片是否值得。在图像噪点和动态范围方面,小像素会更差。但谷歌在硬件方面进行了更好的投资,包括采用了更大光圈的镜头,可以收集更多光线。

Pixel 8 相机硬件升级

Pixel 8 和 Pixel 8 Pro 都配备了新的高端主摄像头,具有双转换增益,与 Pixel 7 一代相比,能收集到更多 21% 的光线。

这两款手机都配备了新的自拍摄像头,但只有 Pixel 8 Pro 支持自动对焦。谷歌表示,G3 可以改善两款手机的色彩和降噪能力。

与 2022 年的手机一样,只有 Pro 版型号配备了 5 倍变焦摄像头。它使用的是与 Pixel 7 Pro 相同的传感器,但今年,Pixel 8 Pro 配备了一个更宽的 f2.8 光圈镜头,可以收集到更多 56% 的光线。这与 iPhone 15 Pro Max 的 5 倍变焦镜头上的光圈相同。

“我们在低光条件下进行了大量的努力,”雷诺兹说。一个次要的好处是:由于手机可以比Pixel 7 Pro的f3.5镜头更快地锁定焦点,因此切换到5倍相机更快。

照片和视频是Google手机的首要任务和竞争优势。这张“黑曜石”色的Google Pixel 8 Pro的特写照片显示了其左侧更大的新48兆像素超广角相机,中间更新的50兆像素主相机,以及右侧的48兆像素5倍光学变焦相机。

Stephen Shankland/CNET

只有Pro版配备了改进的超广角相机。它可以通过更大的传感器和更大光圈的镜头收集到105%更多的光线。这对于低光场景和支持48兆像素分辨率非常重要。

Pro版的超广角相机还具备自动对焦功能,并将其近焦距从去年的3厘米减少到2厘米-约0.8英寸。这意味着微距拍摄将具有更好的背景模糊效果,雷诺兹说。

新的Google相机应用程序获得“专业控制”

Google对其“计算原始”技术感到自豪,该技术将用于创建普通JPEG照片的多重拍摄合成与原始照片的编辑灵活性相结合。这意味着比单帧原始照片具有更大的动态范围,对于那些之后在Adobe Lightroom等软件中编辑照片的人来说非常方便。

通过Pixel 8手机的相机应用程序,Google为摄影师提供了新的控制选项,以便在拍摄过程中对照片进行微调。它具有新的“专业控制”选项,可以暴露快门速度、曝光长度、白平衡、ISO灵敏度和对焦等选项,雷诺兹说。

大多数人不会拍摄原始照片或使用手动控制,但这并不意味着它不重要。雷诺兹说:“当你确实需要以某种方式获得照片时,它可以帮你实现目标。”

Google相机应用程序的另一个重大变化已经开始推出。多年来,该应用程序一直提供了包括照片、视频、全景、夜视和慢动作视频在内的模式选择按钮。现在,Google为视频和照片分别提供了一个总开关,并配备了各自的按钮范围。

相机应用程序还对用于原始照片的DNG文件进行了改进。现在,它们存储更多的元数据,以便像Adobe Lightroom这样的软件可以显示与Pixel微调的JPEG颜色和色调更匹配的版本。Google表示,原始照片总体上已经重新调整,以获得更好的颜色和微妙的色调差异。

Pixel 8手机是首款使用Ultra HDR的智能手机,这是一种Android照片格式,它在JPEG照片中添加了额外信息,以便兼容的软件可以显示高动态范围版本。例如,Ultra HDR可以增亮天文摄影照片中的星星,这些照片在50兆像素分辨率下显示更多细节。

新的Pixel 8拍摄技巧

新的Pixel还具备其他功能,其中许多使用了人工智能技术。以下是一些功能:

  • 对于团体照片,一项名为Best Take的新功能使您可以从一组照片中选择您想要的面孔。它显示照片中每个面孔的缩略图,当您点击其中一个时,它会显示各种表情。您可以选择每个人最好的微笑或滑稽的面孔,这样相机就会创建出一张合成照片。
  • G3的人工智能加速功能可以自动消除视频中的人群噪音和风噪音。但一种名为Audio Magic Eraser的新编辑工具可以分离不同的声音,让您选择您想要的声音。音量滑块可以调整语音、风声、音乐、人群喧嚣和背景噪音的混合程度。
  • 一种名为Magic Editor的新工具可以增加或减少场景元素的大小,例如人物。一次点击可以勾勒出场景元素,然后通过捏或拖动来移动它。与Video Boost一样,这个工具会发送到Google的云计算系统来完成所需的任何新图像处理。该工具最初只提供早期版本。
  • 一种名为Zoom Enhance的工具将使用生成性人工智能从较小、像素化的原始照片创建出更高分辨率的照片。
  • Google采取了一些措施来改善智能手机上常见的镜头光晕问题。当朝向明亮的光点源(如太阳)拍摄时,Pixel可以消除这些光源常常产生的干扰性绿点。
  • Magic Eraser是一个可以消除背景中令人分心的人等场景元素的工具,它获得了巨大的人工智能增强。它现在使用生成性人工智能,因此手机可以填充更大的区域。它还可以消除您要擦除的选定元素的阴影。

所有这些功能和技术的表现如何尚待观察。但很明显,谷歌正在大力投资于Pixel照片和视频技术。