AI如何驱动Pixel 4

 
Google的Pixel 4和Pixel 4 XL上周在纽约的一次硬件活动中首次亮相后，本周开始销售。与以前版本的Google旗舰智能手机一样，人工智能为许多独家新功能和改进提供了动力。
设备上机器学习是最新的Google制造的硬件的主要主题。 Pixel 4使用了Neural Core，这是从Pixel 3的Visual Core芯片升级而来的TPU芯片。 Pixel 4拥有许多预先存在的，支持AI的功能，例如用于播放歌曲的即时播放，但是有四个主要变化：语音识别，下一代Google Assistant，一系列新的摄像头功能以及用于解锁手机和手机的面部识别付款。
智能手机制造商不再销售手机。他们出售相机。这就是为什么Google在上周的揭幕仪式上花大量时间谈论Pixel 4相机的问题，而不是谈论手机的其余部分。
AI建议在弱光条件下使用Night Sight等功能，并为人像模式图像提供深度预测功能。
使用Pixel 4进行深度预测的肖像模式拍摄似乎比以前的Pixel手机要强。
夜视仪也得到了改进。如果您手持拍摄，Night Sight可以提供令人印象深刻的结果，有些人称之为“疯狂的科学”。
但是，如果您支撑Pixel 4使其静止不动或使用某种三脚架，Night Sight可以持续三分钟或更长时间，不仅可以提供更清晰的微光图像，还可以拍摄天空中的恒星照片。我们的初步测试发现这并不夸张。
与其他Pixel手机上的摄像头相比，另一个很大的不同是您可以拍摄超4K视频，而按住摄像头按钮则可以录制视频。 (以前，按住并按住“相机”按钮可拍摄数十张照片。)向下滑动以进行扩展控制可让您启用“频繁面孔”之类的功能。
基于机器学习的白平衡最初是为Pixel 3引入的，并与Pixel 4一起使用，以提供具有准确色温的图片。
Super Res Zoom是Pixel 4的另一个主要功能，并且使用了新的远摄镜头，其最大变焦倍数为8倍，与以前使用数码变焦拍摄的照片相比，可以改善拍摄效果。
“常去面孔”会定期记录和存储有关您拍摄的人的数据，以塑造“最佳照片”推荐结果。
面部识别
面部识别可为Pixel 4提供多种功能，例如“面部解锁”功能可打开手机或进行付款，以及“面部特征”功能可识别您所拍摄照片最多的人。
Google声称，通过手机感应到动作时触发的Motion Sense雷达，Google认为Face Unlock的速度比Apple的iPhone Face ID快。 Pixel 4启用了面部识别功能，可通过面部扫描验证Google Pay交易，而Apple Pay用户在启动时无法使用此功能。但是，谷歌针对智能手机系统的第一个面部识别正在经历一些重大的发展难题。
英国广播公司(BBC)侦查的内容发现，即使闭着眼睛，“脸部解锁”也能对人有效，这是某些用户所担心的。
事实是，即使在指纹扫描的Touch ID世界中，意图不佳的人也可以强迫某人打开手机，但是看脸可能比扫描手指更容易。
像这样的设计缺陷最有可能被滥用，可能是配偶解锁其伴侣的手机，但是当众所周知，Pixel 4可以在昏迷，睡眠或死亡的人的脸上工作时，很容易想到恶意漏洞。
Google发言人最初在一封电子邮件中对VentureBeat表示，Google最初并未计划对此功能进行任何更改，但周日该公司宣布了一项需要检测眨眼的修复程序，并将在未来几个月内作为软件更新的一部分发布。 。
另一个潜在的改进领域是Google对深色皮肤的人脸识别的性能。
Pixel 4发行前几周，《纽约每日新闻》报道说，为Google工作的承包商使用可疑的策略来提高其面部识别功能来识别深色皮肤的人的能力，例如对面部扫描的使用方式不太了解。或提及用于改善Google面部识别的游戏扫描。承包商兰斯塔德显然参加了洛杉矶的BET大奖，并通过发放5美元的星巴克礼品卡招募了亚特兰大的无家可归者。
这些发现引起了亚特兰大城市检察官的注意，并引起了人们质疑什么构成人脸图像的合理价格。
在进行中的调查中，面部扫描收集程序已暂停。
将来的更新可能会导致性能提高。在我的深色皮肤上，Pixel 4在理想的条件下具有平衡的照明条件下非常稳定，但是有时在合理的照明条件下Face Match反复无法识别我。连续多次失败执行“脸部解锁”后，电话建议我删除脸部轮廓并创建一个新的。
重新注册对某些人有帮助，Pixel 4评论中没有记录“ Face Unlock”成功或失败实例的正式记录，但是在早上躺在床上扫描我的脸部时，打开手机是例行的失误练习。夜间使用头顶照明的车辆，或在其他常见情况下使用不理想的照明的车辆。
手机上的面部识别设置大约需要30秒钟，将鼻子朝不同方向缓慢指向以完成面部扫描。这比Nest Nest Max智能显示器上的“面部识别”捕获过程更为广泛，这可能是因为面部识别取代了指纹扫描仪，该指纹扫描仪曾经是解锁Pixel手机的主要方法，并且在这种情况下，面部识别只需要告诉用户每户最多可容纳6人。
在皮肤黝黑的人身上，面部识别性能低下是整个行业的问题。随着这款手机的上市，将对Google的面部识别技术在浅色和深色皮肤上的表现进行更多审核和分析。
尽管我自己经常遇到失败的Face Unlock尝试的经历，但将其称为失败是为时过早的，正如某些记者选择的那样，因为Google才刚刚开始面部识别。
如果我有经验，可以用“面部解锁”代替Touch ID指纹扫描。
下一代Google助手
正如Google上周展示的那样，新版Google Assistant可以打开应用程序，搜索网络，获取路线，以及将Google Assistant搜索查询结果发送给联系人。
下一代Google Assistant使用“持续对话”来启用多回合对话。这意味着在您说出“ Okay，Google”的初始唤醒字后，Google Assistant将执行该命令，然后继续监听其他命令，直到您说“ Stop”或“ Thank you”以结束交换。
持续对话已经在智能显示器和扬声器上使用了一段时间，但是在智能手机上使用时，它会提供一连串的卡片和内容。这给您带来了与智能显示器不同的体验，该智能显示器可以在每个问题后更改屏幕图像。允许您来回滚动和完成动作的信息流突出显示了您自己的意识流。
这意味着您可以非常快速地从询问Google有关给定主题的问题到深入探讨该主题，并继续学习更多内容，甚至可以与朋友共享或根据该信息采取行动。您还可以在Google Assistant在后台运行时与应用程序或网站进行交互，这是真正的多模式体验。
仍然有缺点。告诉Google助理与朋友分享，可能只需要截图即可。我要求Google在不同的场合与朋友分享电子邮件和播客片段，并且只是拍了照。例如，这在Google共享天气报告时有效，但不适用于网站或电子邮件之类的东西。 URL链接几乎总是更有帮助。
还要注意：新的Google助手使用设备上的语言模型和Neural Core使其比其他智能手机的其他语言更快，但这并不意味着延迟的结束。由于速度较慢的Wi-Fi或数据连接，新的Google Assistant仍然会遇到延迟。
并且新的Google助手将在启动时不适用于G Suite帐户。旨在使您尽可能高效的新型Google Assistant似乎无法与G Suite配合使用。
最后，新版Google助手可以与应用进行交互，并且可以更好地显示Google相册内容，但仍无法识别上下文。因此，如果您打开Goog​​le地图，然后说“找到最近的花店”，您的助手将退出Google地图，然后返回网络搜索以共享结果。
新助手在Pixel 4中的外观也略有不同，仅在屏幕底部显示为一组发光的Google原色。
带有Pixel 4的Google助手为您的单词的实时转录留出了空间。这有助于确认助手是否正确听到了您的请求，并且屏幕上的单词移动使您知道助手正在收听，并为每种语音命令建立了要遵循的节奏。
多年来，与使用智能手机在拇指上打字相比，使用对话式AI将语音转换成单词的速度确实是正确的。语音到文本的转录在越来越多的地方都可以找到，而使用Pixel 4，您可以自动转录视频中说话的人。
实时字幕提供了从相机胶卷到YouTube的播客，音频消息和视频中音频的文本转录。这里偶尔会错过，但是当您无法收听音频但仍想欣赏视频和其他内容时，此功能很有用。
轻按并按住屏幕上显示的文本即可将其移动，双击将展开以显示更多文本。
新的Recorder应用程序还可以记录您的语音记录，此功能使您可以在音频文件中搜索单词并导出文本记录。 Recorder应用程序使用实时语音到文本转录，有时会出错，这与其他语音转录服务是一致的。记录器还可以自动识别记录中的关键字，并根据记录中的关键字或音乐，掌声或语音来推荐音频消息标题。
缺点：“记录器”应用无法很好地分解或标记对话中的说话者，因此转录的单词有时会相互融合。对Recorder的软件更新可能应该解决以下事实：它没有为可导出的转录文本添加任何时间戳。
这些新功能中的每一项都使用自然语言理解技术，GBoard中已经使用了多年的自然语言理解技术来编写Google文档或发送消息。