[AI Google] 在 Android 上以更多方式体验 Google AI

2024-06-09 12:28

本文主要是介绍[AI Google] 在 Android 上以更多方式体验 Google AI,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

总结

通过将 AI 直接构建到 Android 操作系统中,Google 正在重新想象用户与手机的互动方式。最新的更新包括用于家庭作业帮助的 Circle to Search、增强的 Gemini 助手功能以及通话期间的实时诈骗检测。Circle to Search 现在通过逐步指导帮助学生解决数学和物理问题,并将很快处理更复杂的问题。Gemini 变得更擅长理解上下文以帮助用户完成各种任务,并将推向数亿台设备。此外,Gemini Nano 的多模态功能将为视障用户带来更清晰的 TalkBack 描述。新的诈骗检测功能使用 Gemini Nano 在通话期间检测到诈骗模式时提醒用户。Google 致力于将 AI 集成到智能手机体验的每个部分,并鼓励开发者使用他们最新的 AI 模型和工具进行构建。


通过将 AI 直接构建到 Android 操作系统中,我们正在重新想象您与手机的互动方式。

一个 Android 吉祥物站在显示屏幕前,屏幕上显示了用于家庭作业帮助的 Circle to Search、诈骗检测警报、TalkBack 和 Gemini 的覆盖层,上面有一个按钮写着“询问此 PDF”。

我们正处于一代人的关键时刻,最新的 AI 进步正在重新发明手机能做的事情。随着 Google AI 成为 Android 操作系统核心的,数十亿 Android 用户现在可以以全新的方式与他们的设备互动。

今天,我们正在分享更新,让您在 Android 上体验 Google AI。

Circle to Search 现在可以帮助学生完成家庭作业

将 Circle to Search 直接构建到用户体验中,您可以使用简单的 gesture 搜索您在手机上看到的任何内容——无需停止您正在做的事情或切换到不同的应用程序。自三星 Unpacked 发布以来,我们已经为 Circle to Search 添加了新功能,如全屏翻译,并将可用性扩展到更多的 Pixel 和三星设备。

从今天开始,Circle to Search 现在可以帮助学生完成家庭作业,为他们提供更深入的理解,而不仅仅是答案——直接从他们的手机和平板电脑上。当学生圈出一个他们卡住的提示时,他们将获得逐步指导来解决一系列物理和数学1单词问题,无需离开他们的数字信息表或教学大纲。今年晚些时候,Circle to Search 将能够帮助解决甚至更复杂的涉及符号公式、图表等问题。这一切都归功于我们 LearnLM 努力增强我们的模型和产品以供学习。

Circle to Search 今天已经在超过 1 亿台设备上可用。计划将体验带到更多设备上,我们有望在年底前将这一数字翻倍。

Gemini 将变得更擅长理解上下文以帮助您完成任务

Android 上的 Gemini 是一种新型的助手,它使用生成式 AI 帮助您更有创造力和生产力。这种集成到 Android 中的体验正在变得更擅长理解您屏幕上的上下文和您正在使用的应用程序。

很快,您将能够在您所在的应用程序上方调出 Gemini 的覆盖层,以便更容易地以更多方式使用 Gemini。例如,您可以将生成的图像拖放到 Gmail、Google Messages 和其他地方,或点击“询问此视频”在 YouTube 视频中找到特定信息。如果您有 Gemini Advanced,您还将有“询问此 PDF”的选项,以便快速获取答案,而无需滚动浏览多个页面。此更新将在接下来的几个月内推送到数亿台设备上。

我们将继续改进 Gemini,为您提供更多与屏幕上内容相关的动态建议。

手机框架显示一个覆盖层,上面有四个图像,显示网球拍击中切片的泡菜,一个图像被拖出覆盖层以附加到短信。
手机框架显示一个覆盖层,上面的文本回答了一个关于泡菜球视频的问题。覆盖层下面的文本显示视频的标题卡,上面写着“3 分钟学会泡菜球”。覆盖层下是 YouTube 上播放的视频的一部分,显示泡菜球场。
手机框架显示一个覆盖层,上面的文本回答了泡菜球中是否允许旋转发球。覆盖层下面显示的是一个人打泡菜球的剪影,作为 PDF 的封面。

Gemini Nano 将迎来全多模态功能

Android 是第一个包括内置、设备上基础模型的移动操作系统。借助 Gemini Nano,我们能够迅速为您带来体验并完全保护您的信息隐私。从今年晚些时候的 Pixel 开始,我们将推出我们最新的模型,Gemini Nano with Multimodality。这意味着您的手机将不仅能够处理文本输入,还能够理解更多上下文信息,如视觉、声音和口语。

使用 TalkBack 获得更清晰的描述

今年晚些时候,Gemini Nano 的多模态功能将来到 TalkBack,帮助视力障碍或低视力的人获得更丰富、更清晰的图像描述。平均而言,TalkBack 用户每天会遇到 90 张未标记的图像。此更新将帮助填补缺失的信息——无论是家人或朋友发送的照片中的更多细节,还是网上购物时衣服的风格和剪裁。由于 Gemini Nano 是在设备上的,这些描述发生得很快,甚至在没有网络连接时也能工作。

在电话通话期间接收疑似诈骗的警报

根据最近的一份报告,在 12 个月的时间里,人们因欺诈损失了超过 1 万亿美元。我们正在测试一种新功能,使用 Gemini Nano 在通话期间提供实时警报,如果它检测到通常与诈骗相关的会话模式。例如,如果“银行代表”要求您紧急转移资金、使用礼品卡支付或请求个人信息,如卡 PIN 或密码,这些是不常见的银行请求,您将收到警报。这种保护完全在设备上进行,因此您的对话对您来说是私密的。我们将在今年晚些时候分享更多关于这个可选功能的信息。

红色框显示诈骗检测警报,文本写着“可能是诈骗,银行永远不会要求您移动您的资金以保持安全。”下面是“忽略并继续”或“结束通话”的选项。

Android 上还有更多

我们才刚刚开始探索设备上 AI 如何改变您的手机能做的事情,我们将继续在 Pixel、三星等每部分智能手机体验中构建 Google AI。如果您是开发者,请查看 Android Developers 博客,了解如何使用我们最新的 AI 模型和工具,如 Gemini Nano 和 Android Studio 中的 Gemini 构建。


  • 原文
  • AI 博客 - 从零开始学AI
  • 公众号 - 从零开始学AI

这篇关于[AI Google] 在 Android 上以更多方式体验 Google AI的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1045178

相关文章

MybatisPlus中几种条件构造器运用方式

《MybatisPlus中几种条件构造器运用方式》QueryWrapper是Mybatis-Plus提供的一个用于构建SQL查询条件的工具类,提供了各种方法如eq、ne、gt、ge、lt、le、lik... 目录版本介绍QueryWrapperLambdaQueryWrapperUpdateWrapperL

idea设置快捷键风格方式

《idea设置快捷键风格方式》在IntelliJIDEA中设置快捷键风格,打开IDEA,进入设置页面,选择Keymap,从Keymaps下拉列表中选择或复制想要的快捷键风格,点击Apply和OK即可使... 目录idea设www.chinasem.cn置快捷键风格按照以下步骤进行总结idea设置快捷键pyth

Linux镜像文件制作方式

《Linux镜像文件制作方式》本文介绍了Linux镜像文件制作的过程,包括确定磁盘空间布局、制作空白镜像文件、分区与格式化、复制引导分区和其他分区... 目录1.确定磁盘空间布局2.制作空白镜像文件3.分区与格式化1) 分区2) 格式化4.复制引导分区5.复制其它分区1) 挂载2) 复制bootfs分区3)

Android使用java实现网络连通性检查详解

《Android使用java实现网络连通性检查详解》这篇文章主要为大家详细介绍了Android使用java实现网络连通性检查的相关知识,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录NetCheck.Java(可直接拷贝)使用示例(Activity/Fragment 内)权限要求

SpringBoot返回文件让前端下载的几种方式

《SpringBoot返回文件让前端下载的几种方式》文章介绍了开发中文件下载的两种常见解决方案,并详细描述了通过后端进行下载的原理和步骤,包括一次性读取到内存和分块写入响应输出流两种方法,此外,还提供... 目录01 背景02 一次性读取到内存,通过响应输出流输出到前端02 将文件流通过循环写入到响应输出流

java敏感词过滤的实现方式

《java敏感词过滤的实现方式》文章描述了如何搭建敏感词过滤系统来防御用户生成内容中的违规、广告或恶意言论,包括引入依赖、定义敏感词类、非敏感词类、替换词类和工具类等步骤,并指出资源文件应放在src/... 目录1.引入依赖2.定义自定义敏感词类3.定义自定义非敏感类4.定义自定义替换词类5.最后定义工具类

python项目环境切换的几种实现方式

《python项目环境切换的几种实现方式》本文主要介绍了python项目环境切换的几种实现方式,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 目录1. 如何在不同python项目中,安装不同的依赖2. 如何切换到不同项目的工作空间3.创建项目

SpringBoot的内嵌和外置tomcat的实现方式

《SpringBoot的内嵌和外置tomcat的实现方式》本文主要介绍了在SpringBoot中定制和修改Servlet容器的配置,包括内嵌式和外置式Servlet容器的配置方法,文中通过示例代码介绍... 目录1.内嵌如何定制和修改Servlet容器的相关配置注册Servlet三大组件Servlet注册详

C# WebAPI的几种返回类型方式

《C#WebAPI的几种返回类型方式》本文主要介绍了C#WebAPI的几种返回类型方式,包括直接返回指定类型、返回IActionResult实例和返回ActionResult,文中通过示例代码介绍的... 目录创建 Controller 和 Model 类在 Action 中返回 指定类型在 Action

SQL 注入攻击(SQL Injection)原理、利用方式与防御策略深度解析

《SQL注入攻击(SQLInjection)原理、利用方式与防御策略深度解析》本文将从SQL注入的基本原理、攻击方式、常见利用手法,到企业级防御方案进行全面讲解,以帮助开发者和安全人员更系统地理解... 目录一、前言二、SQL 注入攻击的基本概念三、SQL 注入常见类型分析1. 基于错误回显的注入(Erro