谷歌的Pixel手机并不是第一个部署人工智能来推动智能手机功能发展的产品,但它们一直在展示一些有利于日常使用的日常增强功能的最佳示例。从使用 HDRNet 更好的视频捕获到照片取消模糊甚至音频消息转录等功能,Pixel 系列在Tensor G2 等处理器上推动了 NPU 和注入 ML 的内核,以创造微妙但变革性的用户体验。
虽然Google Pixel系列继续推动计算摄影和环境计算体验的范围,但我们认为还有一些功能可以从Google的神奇触摸中受益。以下是我们希望在未来Pixel智能手机上看到的一些支持AI的功能。
去年,谷歌在Pixel 6系列旁边推出了魔术橡皮擦工具,以从照片中删除不需要的主题和物体。紧随其后的是面部和照片取消模糊功能,该功能利用Tensor处理器的机器学习功能对抖动的照片进行模糊处理。
谷歌应该效仿三星Enhance-X等替代照片编辑器的领导,以消除云纹或阴影。
但是,我希望看到Google进一步扩展该功能。跟随三星对象橡皮擦工具的脚步,我希望看到谷歌添加删除或调整阴影和反射的功能。虽然三星的实现更接近Photoshop中的内容感知填充 - 也就是说,不完美 - 我可以看到谷歌的AI技能和巨大的照片集填补了空白,以获得更好的空间意识和更干净的外观。
此外,拍摄屏幕和显示器的照片是智能手机相当常见的用例。但是,很多时候,由于屏幕和智能手机相机传感器上的拜耳滤镜之间的干扰,您最终会在屏幕上出现摩尔纹图案。这种图案会使文本难以理解或使紧密编织的织物看起来很奇怪。与三星的Enhance-X应用程序类似,它可以让你删除摩尔纹图案,很高兴看到谷歌将编辑工具烘焙到谷歌相册中,或者更好的是,将烘焙到相机应用程序本身中。
图像恢复
谷歌并不羞于将高级照片编辑工具推向Pixel体验。传统主义者可能会声称像照片取消模糊和魔术橡皮擦这样的可选工具会篡改原始照片,但最终结果是一个完美的、美观的图像,没有任何干扰。
在Google相册中构建全面的图像恢复是一件轻而易举的事。
将相同的计算方法引入图像恢复是轻而易举的。事实上,谷歌在Pixel 7发布会上谈到了修复模糊的胶片照片。该功能的一个简单扩展是能够校正旧扫描中的白平衡。更进一步,谷歌的人工智能工具可以扩展到修复颗粒和划痕等缺陷,或者为黑白图像添加颜色。可能性是无穷无尽的。我们最近比较了Pixel内置的Photo Unblur功能和使用Photoshop的手动校正 - 结果相差不远。只需添加一些简单的内容,即可使Google Pixel手机成为您口袋中最好的照相馆。
有没有想过在拍摄之前稍微改变一下视角?虽然存在透视校正工具,但它们往往会扭曲图像。但是,视图合成可以解决此问题,而不会产生任何异常。未来派技术使用机器学习算法根据来自多张图片的输入生成场景的替代视图。
视图合成可以从多个图像中获取数据点,并允许您在后期处理照片。
谷歌的工程师已经尝试了一段时间的视图合成(并在谷歌照片的电影照片自动建议中实现了类似的东西)。事实上,它正在考虑用于命运多舛的Google Clips相机,但由于其高计算要求而被放弃。但是,未来的 Tensor 芯片组可能有足够的咕噜声来在设备上启用该功能。
计算技术可以利用拍摄HDR Plus图像时捕获的多帧,并让您巧妙地改变奇怪的倾斜图像,而不会撕裂或失真。
内置稳定扩散
裁剪得离主题太近了?也许您想要更多完美的创意美学背景。摄影师长期以来一直使用 Photoshop 的上下文感知填充工具来扩展照片的边界。但是,稳定扩散和DALL-E 2等图像生成算法可以更容易、更准确地减少帧并获得更多帧。
设备上的图像生成算法将允许更具创意的编辑或更好的图像扩展。
鉴于Pixel以摄影为中心的野心,构建设备上的AI算法以允许您扩展图像将是一个很棒的工具。事实上,谷歌拥有的照片编辑器Snapseed已经内置了一个扩展工具。但是,该工具使用上下文提示来缩小镜头。由Pixel手机上的ML内核提供支持并与Google庞大的数据集配对的设备稳定扩散,允许您使用人工智能将更多背景添加回图片中,从而使该工具大大改善。
全分辨率 HDR 拍摄
借助现代Pixel手机中新奇的高分辨率传感器,期望用户想要具有与缩减采样的12MP照片相同的HDR Plus魔力的全分辨率图像并非没有道理。
看,像素合并极大地有利于低光摄影和细节,但有时您只想要尽可能高分辨率的图像。像Realme这样的品牌已经讨论过使用相机传感器的全分辨率输出来渲染最终结果。
全分辨率 50MP 拍摄具有与 Pixel 标准 12MP 照片相同的优势,将允许用户随意裁剪或根据需要放大图像。对于希望在编辑照片时获得最大灵活性的用户来说,这将是一个很好的补充,而无需与处理RAW图像相关的任何大惊小怪。当然,渲染镜头可能需要更多时间,但将其作为可选设置应该不费吹灰之力,我很想在下一代 Pixel 硬件上看到它。
标签:
版权声明:本文由用户上传,如有侵权请联系删除!