[AI Google] 在 Android 上以更多方式体验 Google AI

总结

通过将 AI 直接构建到 Android 操作系统中，Google 正在重新想象用户与手机的互动方式。最新的更新包括用于家庭作业帮助的 Circle to Search、增强的 Gemini 助手功能以及通话期间的实时诈骗检测。Circle to Search 现在通过逐步指导帮助学生解决数学和物理问题，并将很快处理更复杂的问题。Gemini 变得更擅长理解上下文以帮助用户完成各种任务，并将推向数亿台设备。此外，Gemini Nano 的多模态功能将为视障用户带来更清晰的 TalkBack 描述。新的诈骗检测功能使用 Gemini Nano 在通话期间检测到诈骗模式时提醒用户。Google 致力于将 AI 集成到智能手机体验的每个部分，并鼓励开发者使用他们最新的 AI 模型和工具进行构建。

通过将 AI 直接构建到 Android 操作系统中，我们正在重新想象您与手机的互动方式。

一个 Android 吉祥物站在显示屏幕前，屏幕上显示了用于家庭作业帮助的 Circle to Search、诈骗检测警报、TalkBack 和 Gemini 的覆盖层，上面有一个按钮写着“询问此 PDF”。

我们正处于一代人的关键时刻，最新的 AI 进步正在重新发明手机能做的事情。随着 Google AI 成为 Android 操作系统核心的，数十亿 Android 用户现在可以以全新的方式与他们的设备互动。

今天，我们正在分享更新，让您在 Android 上体验 Google AI。

Circle to Search 现在可以帮助学生完成家庭作业

将 Circle to Search 直接构建到用户体验中，您可以使用简单的 gesture 搜索您在手机上看到的任何内容——无需停止您正在做的事情或切换到不同的应用程序。自三星 Unpacked 发布以来，我们已经为 Circle to Search 添加了新功能，如全屏翻译，并将可用性扩展到更多的 Pixel 和三星设备。

从今天开始，Circle to Search 现在可以帮助学生完成家庭作业，为他们提供更深入的理解，而不仅仅是答案——直接从他们的手机和平板电脑上。当学生圈出一个他们卡住的提示时，他们将获得逐步指导来解决一系列物理和数学1单词问题，无需离开他们的数字信息表或教学大纲。今年晚些时候，Circle to Search 将能够帮助解决甚至更复杂的涉及符号公式、图表等问题。这一切都归功于我们 LearnLM 努力增强我们的模型和产品以供学习。

Circle to Search 今天已经在超过 1 亿台设备上可用。计划将体验带到更多设备上，我们有望在年底前将这一数字翻倍。

Gemini 将变得更擅长理解上下文以帮助您完成任务

Android 上的 Gemini 是一种新型的助手，它使用生成式 AI 帮助您更有创造力和生产力。这种集成到 Android 中的体验正在变得更擅长理解您屏幕上的上下文和您正在使用的应用程序。

很快，您将能够在您所在的应用程序上方调出 Gemini 的覆盖层，以便更容易地以更多方式使用 Gemini。例如，您可以将生成的图像拖放到 Gmail、Google Messages 和其他地方，或点击“询问此视频”在 YouTube 视频中找到特定信息。如果您有 Gemini Advanced，您还将有“询问此 PDF”的选项，以便快速获取答案，而无需滚动浏览多个页面。此更新将在接下来的几个月内推送到数亿台设备上。

我们将继续改进 Gemini，为您提供更多与屏幕上内容相关的动态建议。

手机框架显示一个覆盖层，上面有四个图像，显示网球拍击中切片的泡菜，一个图像被拖出覆盖层以附加到短信。
手机框架显示一个覆盖层，上面的文本回答了一个关于泡菜球视频的问题。覆盖层下面的文本显示视频的标题卡，上面写着“3 分钟学会泡菜球”。覆盖层下是 YouTube 上播放的视频的一部分，显示泡菜球场。
手机框架显示一个覆盖层，上面的文本回答了泡菜球中是否允许旋转发球。覆盖层下面显示的是一个人打泡菜球的剪影，作为 PDF 的封面。

Gemini Nano 将迎来全多模态功能

Android 是第一个包括内置、设备上基础模型的移动操作系统。借助 Gemini Nano，我们能够迅速为您带来体验并完全保护您的信息隐私。从今年晚些时候的 Pixel 开始，我们将推出我们最新的模型，Gemini Nano with Multimodality。这意味着您的手机将不仅能够处理文本输入，还能够理解更多上下文信息，如视觉、声音和口语。

使用 TalkBack 获得更清晰的描述

今年晚些时候，Gemini Nano 的多模态功能将来到 TalkBack，帮助视力障碍或低视力的人获得更丰富、更清晰的图像描述。平均而言，TalkBack 用户每天会遇到 90 张未标记的图像。此更新将帮助填补缺失的信息——无论是家人或朋友发送的照片中的更多细节，还是网上购物时衣服的风格和剪裁。由于 Gemini Nano 是在设备上的，这些描述发生得很快，甚至在没有网络连接时也能工作。

在电话通话期间接收疑似诈骗的警报

根据最近的一份报告，在 12 个月的时间里，人们因欺诈损失了超过 1 万亿美元。我们正在测试一种新功能，使用 Gemini Nano 在通话期间提供实时警报，如果它检测到通常与诈骗相关的会话模式。例如，如果“银行代表”要求您紧急转移资金、使用礼品卡支付或请求个人信息，如卡 PIN 或密码，这些是不常见的银行请求，您将收到警报。这种保护完全在设备上进行，因此您的对话对您来说是私密的。我们将在今年晚些时候分享更多关于这个可选功能的信息。

红色框显示诈骗检测警报，文本写着“可能是诈骗，银行永远不会要求您移动您的资金以保持安全。”下面是“忽略并继续”或“结束通话”的选项。

Android 上还有更多

我们才刚刚开始探索设备上 AI 如何改变您的手机能做的事情，我们将继续在 Pixel、三星等每部分智能手机体验中构建 Google AI。如果您是开发者，请查看 Android Developers 博客，了解如何使用我们最新的 AI 模型和工具，如 Gemini Nano 和 Android Studio 中的 Gemini 构建。