主要观点总结
谷歌发布AI语音功能Gemini Live,与OpenAI竞争,文章介绍了Gemini Live的特点、与其他AI助手的区别、以及谷歌为支持Gemini而采取的其他技术举措。
关键观点总结
关键观点1: 谷歌发布AI语音功能Gemini Live
谷歌宣布推出语音模式Gemini Live,将在全球30亿安卓和22亿iOS设备中上线。虽然现场演示出现小问题,但谷歌决心与OpenAI竞争,提供类似的AI语音功能。
关键观点2: Gemini Live的特点
Gemini Live具有自然对话语言、真人般的声音和节奏,支持10种声音选择。它还能免提功能,支持打断、更改话题等。此外,Gemini Live与安卓系统深度集成,完全融入用户体验。
关键观点3: Gemini与其他AI助手的区别
与其他AI助手相比,Gemini的重要优势在于它连接了更多应用程序。用户无需在应用程序和服务之间切换,即可完成大大小小的任务。此外,Gemini还能通过图像识别、文本理解等功能,提供更个性化的服务。
关键观点4: 谷歌为支持Gemini采取的技术举措
谷歌引入了新模型Gemini 1.5 Flash,提高了响应速度和回答质量。此外,谷歌还发布了全新的AI生图应用Pixel Studio和Imagen 3技术。为了支持这些AI能力,谷歌还发布了最新手机硬件Pixel 9系列,包括AI加持的拍照能力。
关键观点5: Pixel 9系列手机的新功能
Pixel 9系列手机新增了Add Me、Reimagine、Auto Frame和Zoom Enhace等AI图像编辑能力。这些功能使手机摄影更加便捷和有趣。
关键观点6: 谷歌Tensor G4芯片的作用
为了支持AI功能和计算摄影,谷歌发布了全新设计的处理器Google Tensor G4。该芯片具有强大的AI处理能力,是Pixel 9系列手机的核心组件之一。
正文
【新智元导读】
谷歌版Her,抢先OpenAI登场了?谷歌语音模型Gemini Live,即将在全球30亿安卓和22亿iOS设备中上线。虽然现场演示依旧小翻车了一下,但谷歌下定决心不等了,一心截胡OpenAI,还要对打苹果!
紧追着OpenAI的「Her」,谷歌也正式官宣:发布AI语音功能!
就在刚刚「谷歌制造」的主题演讲中,谷歌宣布推出语音模式Gemini Live。不久后,Gemini Live就会在Gemini移动应用程序中上线。
看看OpenAI那边,三个月前石破天惊的「Her」如今依旧没个声响,这是妥妥要被谷歌截胡的节奏啊。
在场的谷歌领导Rick Osterloh也意味深长地表示:「我们听到太多关于AI的承诺,和即将推出的口号了。今天,我们要展示的是真实的进展!」
此外,在这次演讲中,谷歌还详细展示了Gemini会如何更深入地集成到安卓、应用程序和新的Pixel设备中。
在一口气发布的Pixel 9系列手机中,谷歌也探索了「AI+手机」的新样态:Gemini、安卓、Pixel的融合,会孵化出怎样的端侧AI产品形态。
根据谷歌介绍,Gemini Live是一款全新的移动对话体验。
如果我们想要头脑风暴一下,根据自己的技能和学历能找到什么样的工作,Gemini可以立刻跟我们实时对话。
这个感觉,就仿佛口袋里有了一个随时可以聊天的贴心助手。
而且同OpenAI一样,谷歌的语音功能,同样可以让用户以自然的对话语言和它交流,它的回应也用的是真人般的声音和节奏。
请听下面这个音频,几种男声和女声的音色都很自然。
为了让我们拥有最自然的体验,谷歌一口气推出了10种声音,我们可以随心选择自己最喜欢的语调和风格。
另外,Gemini Live还支持免提功能。即使Gemini应用程序在后台,或者手机正在锁定,我们依然可以和它对话,就仿佛在普通的电话中一样。
还有,我们可以随时打断它、更改话题——看着很眼熟对吧?没错,OpenAI的语音能做的,它都有。
五月份OpenAI惊艳全场的高级语音功能「Her」,如今依旧在鸽,上个月底也只是选择性地向一小部分Alpha测试参与者开放。
现在只要花每月19.99美元,就可以在安卓设备上使用Gemini Live了,只要进入谷歌Gemini应用程序即可。
目前开放的是英语版本,而iOS版本和更多语言的支持,还会在未来几周内推出。
另一方面,在用户规模上,谷歌的高级语音模式也会接触比OpenAI更广泛的潜在用户。
要知道,如今全世界有超过30亿的安卓用户,和22亿的iOS用户。
而OpenAI的语音功能鸽了的部分原因,恐怕是跟红队测试中AI的异常表现有关。
这些安全问题,谷歌就完全解决了吗?目前没人知道,但很明显——不想屈居人后的谷歌,决定这次也豁出去一把。
但翻了两次车
唯一不足的是,Gemini Live现场演示,出现了一些小插曲。
谷歌高管Dave Citron在展示Gemini在安卓新机连接谷歌日历、任务和Keep的新功能时,没想到接连翻车两次。
他先用手机拍摄了一张Sabrina Carpenter在旧金山举行时装秀宣传海报,然后问道Gemini,「查看我的日程,看看是否有空参加Sabrina Carpenter的时装秀」。
Gemini第一次回复中,却说这里出错了,再尝试一次。
第二次重复尝试刚刚步骤时,Gemini依旧没有答复。
直到第三次(换了一个设备),终于给出了结果,现场一阵欢呼。
在这次演讲中,谷歌表示:通过Gemini,他们重新构想了个人助手对人类真正有用的意义——更自然、对话式、更直观。
连接更多应用程序
Gemini就是如此,它会跟我们使用的所有谷歌应用程序和工具集成,完成大大小小的任务。
而跟其他助手不同的是,我们无需耗费功夫,在应用程序和服务之间切换。
而在未来几周,谷歌还会推出全新的扩展功能,包括Keep、Tasks、Utilities和YouTube Music。
图中有什么食物?问一嘴Gemini,它全给你列出来
假设现在我们要办一场晚宴,Gemini就可以发挥它的百般武艺了——
从Gmail中,它可以找出某人发给我们的千层面食谱,然后把配料添加到Keep的购物清单中;然后,在让Gemini为我们攒一份歌单,要求是「让我想起90年代末」。
在谷歌即将推出的日历扩展功能中,我们可以直接拍一张音乐会的海报,问Gemini:我当天有空不?如果答案是yes,还可以让Gemini帮我们设置提醒,准备抢票。
让Gemini给教授写个邮件请个假,请求deadline再延期几天,动动嘴就行了
只有在安卓系统中,我们才能体会到如此丝滑的上下文感知功能。
只要拿着一部安卓手机,无论我们想要做什么,Gemini都能在需要时应声出现。
长按电源按钮,或者说一声「Hey Google」,就能召唤出Gemini了!
点击「询问此屏幕」,就可以获取有关屏幕内容的帮助。
如果正在使用YouTube,可以向Gemini询问有关视频的问题。
比如,假设我们正在为出国旅行做攻略,刚看完一个旅游视频博客,点击「询问此视频」,让它列出视频中出现的所有餐馆、添加到谷歌地图中,Gemini就会一一照做。
再看下图,Gemini生成的图像,可以直接拖放到Gmail和Google Messages中。
因为Gemini为安卓构建了深度集成,AI能做的就不仅仅是读取屏幕内容,还能与我们已经在使用的许多应用进行交互。
Gemini 1.5 Flash,加持AI助手
不过,还有两个问题:能更好地解释自然语言和处理任务的LLM,往往意味着即使完成简单任务,也需要更多的时间。
而AI如果表现出意想不到的行为,或提供不准确的信息,也很让人头疼。
为此,谷歌特意引入了新模型——Gemini 1.5 Flash。
在未来几个月内,谷歌还会把模型与Google Home、Phone和Messages进行更深层的集成。
谷歌表示,今天我们正式到达了一个拐点,AI助手的有用性,远远超过了它们的挑战。
会上,谷歌还推出了一款全新的AI生图应用——Pixel Studio。
最重要的是,它是一个本地生图APP,基于Imagen 3打造,2秒之内便可生成各种图像。
同在今天,Imagen 3的技术报告也出炉了,技术细节可参见32页论文。
论文地址:https://arxiv.org/pdf/2408.07009
所有这些AI能力,谷歌全都植入到了最新手机硬件之中。
现场,谷歌一共发布了四款AI手机——Pixel 9、Pixel9 Pro、Pixel9 Pro XL,以及二代折叠屏Pixel 9 Pro Fold。
在Pixel 9系列新机上,你一定不能错过的,就是AI加持的拍照能力。
谷歌表示,图像处理算法——HDR+pipeline,已完全重建,可以让拍摄的照片有更好的对比度、阴影、曝光、锐化、色彩等。
以下是Pixel 9系手机新增的AI图像编辑能力:
Add Me
你是否常常遇到,家庭聚会、团建、家人旅行时,担起了拍照的重担,然而照片中唯独少了自己。
不过,以后就不用担心了。
谷歌「加我一个」(Add Me)功能,就能弥补你的遗憾。
首先,需要拍摄一张团体照。然后,负责拍照的人与照片中的人交互位置,拍摄一张「摄影师」在内的照片。
这时,Pixel使用实时AR技术,引导第二个拍照的人去构图,让其与第一张照片构图相匹配。
最后,然后,Pixel将两张图像合并,确保每个人都出现在同一张照片中,包括「摄影师」在内。
Reimagine
这时Magic Editor编辑器中的一项能力,直接在文本框中描述你想要的效果。
比如,修改照片中的背景,火山、日落、极光各种场景,随意发挥。
Auto Frame
自动构图是Magic Editor中的一项新功能,可以为已拍摄好的照片重新构图。