文 / Li Zhang 和 Wei (Alex) Hong ,软件工程师
从孩子迈出的第一步到不自禁的欣喜雀跃,生活中充满了有意义的时刻,每个人都希望可以用图片保存这些美好时刻。然而,由于这些时刻往往无法预知,错过完美抓拍成了智能手机相机用户每天都要面对的沮丧问题。凭借开发 Google Clips 的经验,我们想知道能否为 Pixel 3 摄像头开发一些新技术,让每位用户每次都能捕捉到完美的抓拍画面。
最佳照片是最近随 Pixel 3 推出的一项新功能,可以在您按下快门按钮时自动帮您精准捕捉珍贵瞬间。最佳照片功能采用计算机视觉技术,可以实时保存并分析按下设备快门键前后的图像帧,向您推荐多张高质量 HDR+ 备选照片。

Pixel 3 的最佳照片示例。在左侧,推荐的是更好的微笑照片。在右侧,推荐的是更好的跳跃照片。所推荐的图像都是高质量 HDR+ 照片
捕捉多个时刻
最佳照片功能会在用户打开 Pixel 3 相机应用时默认启用,通过分析按下快门前后拍摄的图像,帮助用户捕捉完美时刻。该功能会实时分析每个图像中的一些定性特征(例如,拍摄对象是否在微笑),而且全部工作都在手机上完成,可以保护隐私并最大限度缩短延迟时间。每个图像还会关联其他信号,例如图像的光流、曝光时间和陀螺仪传感器数据,以便形成用于为帧质量评分的输入特征。
当您按下快门按钮时,最佳照片功能可以在按下快门前后的 1.5 秒中捕捉高达 90 张图像,然后选出最多两张备选照片,并将其保存为高分辨率图像,即供您审看的原始快门帧和高分辨率备选图像(也可以根据需要查看其他分辨率较低的帧)。该功能会先处理并保存快门帧,然后保存最佳备选照片。Pixel 3 的 Google Visual Core 用