【iPhone免費升級AI🆙】Google Gemini Live 全新體驗,有眼睛的AI助理~實測功能亮點與操作教學,一次看懂!

简要总结

本视频介绍了 Google Gemini Live 的新功能,它可以识别手机屏幕上的信息,并像 Google Lens 一样实时检测镜头前的物体。要使用此功能,需要将 Google Gemini 应用更新到最新版本,并将手机语言设置为英文。视频演示了 Gemini Live 的对话、屏幕检测和镜头检测功能,并将其与 Apple 的 Visual Intelligent 进行了比较。此外,还介绍了 Google 搜索中的 AI Mode 功能,该功能目前仅支持英文版本。

  • Google Gemini Live 能够识别手机屏幕信息和检测镜头前的物体。
  • 使用 Gemini Live 需要更新应用并切换语言为英文。
  • 演示了对话、屏幕检测和镜头检测功能。
  • 介绍了 Google 搜索中的 AI Mode 功能,但目前仅支持英文。

介绍 Google Gemini Live

Google 开发者大会上提到了 Google Gemini 将导入 Google Gemini Live 的影像辨识新功能,它可以辨别手机屏幕上的信息,并像 Google Lens 一样实时侦测镜头前的资讯。视频作者提到他会将所有信息分享在他的网站 cwcchannel.com 上。

更新 Google Gemini 以使用 Live 功能

要使用 Google Gemini Live,需要更新 Google Gemini 应用到最新版本。目前作者的版本是 1.2025。但繁体中文版并不支持 Google Gemini Live 功能。如果想要测试,需要将手机语言转换为英文。

切换语言以启用 Gemini Live

为了启用 Gemini Live,需要将手机的语言设置为英文。在手机的设置中,选择“一般”,然后选择“语言与地区”,将语言转换为英文。转换后,重新开启 Gemini 应用,右下方就会出现 Gemini Live 的按钮。

Gemini Live 的界面和功能

Gemini Live 界面右下方有一个 Gemini Live 按钮。点击后,下方有四个按钮:关闭 Gemini Live、暂停(On hold)、手机屏幕信息分析和镜头信息分析。作者将演示对话、手机屏幕侦测和镜头侦测三个主要测试。

对话功能演示

作者演示了 Gemini Live 的对话功能,可以进行聊天、玩游戏、脑力激荡和学习新事物。如果觉得 Gemini 讲得太长,可以直接暂停或打断。Gemini Live 还可以用英文进行会话练习。对话内容会被整理起来,可以复制或分享。

屏幕侦测功能演示

作者演示了 Gemini Live 的屏幕侦测功能。开启后,Gemini 可以识别手机屏幕上的内容,例如应用程式图示、网站内容和截图。作者让 Gemini 描述了一个网站和一个截图的内容,并成功复制了截图中的文字。

镜头侦测功能演示

作者演示了 Gemini Live 的镜头侦测功能。开启相机权限后,Gemini 可以识别镜头前的物体。作者让 Gemini 识别了 AirPods 充电盒,并询问了它的代数,Gemini 成功回答。作者还让 Gemini 解答了一个数学题目,Gemini 也给出了正确的答案和解题方法。

Gemini Live 与 Apple Visual Intelligent 的比较

Google Gemini Live 与 Apple Visual Intelligent 最大的不同在于,Gemini Live 可以在对话过程中持续询问,而 Visual Intelligent 需要拍照后才能询问,步骤比较麻烦。Gemini Live 就像真人在不断对话,它有“眼睛”,知道你的屏幕,因此有很多应用场景。

AI Mode 功能介绍

Google 开发者大会上还提到了 AI Mode 功能,有些人已经可以使用。在 Google 搜索中,右边的搜索按钮就是一个 AI Mode。点击后,搜索结果会像 AI 对话一样生成。但目前 AI Mode 仅支持英文版本。作者演示了使用 AI Mode 规划台北 101 一日游。

几秒总结任意 YouTube 视频

用免费的 Summ App,为任意视频生成这样的摘要,支持你的语言。

在 App Store 下载
在 Google Play 下载

文字稿

“【iPhone免費升級AI🆙】Google Gemini Live 全新體驗,有眼睛的AI助理~實測功能亮點與操作教學,一次看懂!”的完整文字稿。点击时间戳即可从该位置打开视频。想要其他视频的字幕?试试 YouTube 字幕提取工具。

0:00 Hello 大家好 欢迎来到C w C Channel 今年Google的开发者大会上面有提到 Google Gemini将会导入Google Gemini Live的影像辨识新功能 可以辨别你手机萤幕上面的资讯 同时也可以像是Google Lens一样来 及时的侦测镜头前的资讯 这个是什么 这个是AirPods Pro的充电盒 这个影片的所有资讯会分享在本频道的网站上面 叫cwcchannel.com 也欢迎你来参观 如果要使用这个最新的Google Gemini Live的功能 你必须要更新 请来到App Store 搜寻Google Gemini

0:46 请更新到最新的版本 我目前的版本是1.2025 请在这里点选更新 步骤2要使用Gemini Live 还有另外一个非常大的限制是 如果是繁体中文版 并不会有Google Gemini Live的功能 那我有询问 Google Gemini为什么我找不到这个Live的功能呢 特定的功能像是Gemini Live 会逐步的在不同的地区和语言 推出这个新功能 因此我在这只手机上面是繁体中文的 并没办法使用Google Gemini Live 那如果你想要测试玩看看 你可以把它转换成英文 点选设定 来到了一般语言与地区

1:35 转换成英文 继续 接下来开启Gemini 右下方就多出了Gemini Live的按钮 点选 就可以开启Gemini Live 那第一次使用你必须要做一些简单的设定 设定完成之后 你就会来到了这个页面 我先跳回来 好 所以现在的界面上面在右下方就多出了 这一个Gemini Live的按钮 所以我在测试的过程当中 必须是英文的环境 更新到最新版本才可以使用 接下来我来点选 Google Gemini Live 下方有四个按钮 最右边是关闭Gemini Live的功能 第二个是暂停On hold的一个功能

2:22 它就不会来听从你的指令 接下来下一个是手机萤幕上面资讯的分析 最后一个是镜头前面的资讯分析 我会做三个主要的测试 第一个是直接对话 接下来是手机萤幕侦测 最后是镜头侦测 首先来做对话 点选 你好 很高兴认识你 今天过得怎么样 还不错 请问Google Gemini Live可以做哪些功能 Gemini Live可以做很多事情 像是聊天 玩游戏 脑力激烈 学习新事物 还可以 如果你觉得它讲太长了 直接暂停即可 你就可以问下一个

3:08 或者是直接打断也可以 请问你可以讲英文来做会话的练习吗 绝对没问题 我很乐意练习英文对话 所以今天怎么样 我做得好 谢谢你 我很高兴来跟你聊天 今天什么希望你做的 我们可以谈谈你的日子 或者可能是 你就可以直接暂停 如果你想要看之前所对话的文稿 你就可以关闭起来 所以刚才所有的对话资讯 通通都整理起来 如果有不错的回答内容 你想要分享的话 你可以点选这个三个小点点的按钮 那你也可以把它复制下来 或者是你可以点选这个分享按钮 它就会变成一个连结

3:55 你可以把这个连结分享给其他人 这个是去检查资讯 如果你点选下去 你可以搜寻相关的主题 如果回答了不错就按赞 我们来试看看 萤幕侦测的功能 开启 请点选右边数来的第三个按钮 那使用之前请先启动 接下来点选开始录制 请问我手机现在的萤幕上面有什么东西 我看到你的手机萤幕上有几个应用程式的图示 最上面有电池图示 中间有一个像是卡通造型的图案 下面还有一些应用程式图示

4:41 我现在开启了一个网站 你可以说明一下这是什么网站吗 好的 我看到你开启了一个名为 连结到cwcchannel.com的网站 这个网站看起来有很多关于科技新知的文章 像是Google AI的新产品podcast 我现在手机上面有一张截图 那这个截图的内容是什么呢 这张截图显示的是手机的电池充电记录 包括充电开始和停止的时间 总充电时长以及 好那最后一个这个截图内容是什么 这个截图看起来像是苹果iOS18b的更新说明

5:27 很好那请帮我复制里头的文字 没问题 我已经复制好iOS18b的更新说明文字了 好我来现在来看看它现在对话生成的结果 好那刚才的所有对话内容都会出现在 Gemini Live 的应用程式里面 接下来来测试最后一个 最后一个它会使用你的镜头来分析镜头前面的物体资讯 那第一次使用必须要开启camera的功能 我再用一次 请问我现在手上拿的东西是什么 你手上拿的是AirPods 的充电盒 请问你知道它是第几代的吗

6:13 就看起来算是第二代AirPods Pro的充电盒 诶答对了 好接下来我再来问其他问题 我现在这里有一个数学的题目 那我想要请你帮我解答 好的没问题 这道题目的答案是B 80 解题方法是 一 宠物店内有猫和狗 好那Google Gemini Live 这个Apple Visual Intelligent最大的不同地方是 Visual Intelligent它没办法在你对话的过程当中一直询问 也就是你在询问过程当中你必须要拍照下来 然后用这样的点选方式来询问

6:59 多了几个步骤比较麻烦 那Google Gemini Live 就像是真人在跟你一直在不断的对话 它有眼睛 它知道你的屏幕 那这个就有很多的应用你可以来玩看看 例如说你走到一个陌生的地方 你可以直接的问Gemini Live这个是哪里 例如说像这张照片 请问这个是哪里 这栋建筑物看起来像是台北南山广场 你只要是一个物体它都会帮你来辨识 那Google的开发者大会上面还有提到一个AI Mode的功能 有些人已经可以使用 那使用的方法直接开启Google的应用程式 左上方会有这个图示也可以让你来使用

7:46 现在我在Google的搜寻引擎里头右边的搜寻按钮 它其实就是一个AI Mode 那所有搜寻的结果都会像是AI的对话一样生成 我随便来询问一下 它就像之前一样的搜寻引擎的结果 但是左上方这边有个AI Mode 所以我点选它就会透过Gemini来去分析你的问题 但目前只有支援英文的版本 所以这个功能还是有限制 Please help me plan to visit Taipei 101 for one day 它就使用了AI的功能直接在搜寻引擎上面 这个就是开发者大会里头所提到的AI Mode

8:34 那这个影片就介绍到此为止 希望所分享的资讯对你有所帮助 谢谢您的收看 我们下一集再见 Bye bye Have a great day

Share

更多视频摘要