谷歌将Gemini引入GoogleHome智能音箱“换脑”，摄像头自动生成字幕
智器械
编译 黄心如
编纂 李水青
智器械8月9日新闻，谷歌于8月6日发布，将推出基于Gemini AI的Google Home功效。跟着Google Home得到壮大的AI支撑，Nest智能音箱和显示器上的Google Assistant将于2024年晚些时刻进行重年夜进级Nest摄像头也将在不久后具备辨认和显示功效。
只管谈天机械人每每更能引起存眷，但天生式AI切实其实有潜力使智能家居变得加倍直观和用户友爱。亚马逊本年六月已颁布了加强版Alexa的方案，而谷歌也在加紧措施，许诺推出更智能、更壮大的Google Assistant。
一、 Google Home引入Gemini，智能摄像优等新功效即将上线
在下周（8月13日）秋季硬件产物宣布会之前，谷歌发布了三项新的Gemini智能体验，这些功效将于本年晚些时刻登岸Google Home平台。此中包含：
一项新的摄像头智能功效，它可认为Nest摄像头的视频片断主动天生描写性字幕；
一项天然语言输入功效，用于在Google Home里创立法式；
一个更智能的Google Assistant，它将实用于Nest智能音箱和显示器，而且配备新的语音选项。
除了新语音选项之外，年夜多半这些功效都将经由过程Google的Nest Aware订阅付费提供——Nest摄像头的视频录制订阅起价为每月8美元（每年80美元）。这些功效将起首在Google的公共预览测试版方案中限量向Nest Aware订阅者推出，并将于来岁扩大至更多用户。
在宣布会前，Google Home产物卖力人Anish Kattukaran接受The Verge采访时提到，这只是谷歌智能家居平台迈向智能化新期间的开端，“这为Google Home的下一个期间摊平了途径”。
▲以上是一个Matter节制器和Thread界限路由器构成的新智能家居中心（图源：Google Home）
二、Gemin晋升用户体验，但不代替Google Assistant
这一更新对付历久受挫的Google Home用户来说是个好新闻，很多用户已经厌倦了机能不敷、装备老化的智能显示器，以及常用的功效被撤消的困扰。此外，他们还阅历了从Nest利用到Google Home利用的艰巨过渡。本周推出的Google TV Streamer 4K（Google Home中心）和新的Nest Learning Thermostat，加上更智能的Google Assistant，预示着Google的智能家居生态体系正在改善。
Google Assistant显然将继续存在。Google并未将Gemini直接移植到Nest智能音箱和显示器上来节制智能家居，而是在幕后部署了Gemini智能。Kattukaran解释道：“Gemini是一个模子系列，我们正在针对Google Home的各项功效对其进行优化”。
三、三年夜新功效实操展现，智能家居多方面成长
智能家居的成长不仅仅是技术功效的晋升，同时也要注重在加强功效的同时掩护用户的隐私和平安。下文将展现智能摄像头的新功效、家庭主动化的简化操作以及Google Assistant的进级和新声音技术。
1、主动天生字幕的摄像头平安警报
▲多模式Gemini AI可以懂得摄像机捕获到的画面和声音并天生描写动作的字幕（图源：Google Nest）
Google正在为Nest摄像头引入Gemini智能，使其可以或许懂得摄像头捕获到的画面和声音，并向用户通报症结信息。这意味着，Google Home之后将不仅仅发送有关某小我或包裹的警报，用户必需旁观视频能力相识产生了什么，而直接添加摄像头所见内容的具体描写。这些模子将在云端专为用户的家庭数据进行进修和训练，跟着光阴推移，它们将变得越来越智能，更精确地相识用户家庭四周的动态。
Kattukaran分享的一个例子是一段人从车上卸下杂货的视频，题目为：
停放在车库里的一辆玄色SUV阁下站着一个穿戴休闲服装的年青人，他提着购物袋，四周情况显得十分平静。
除了提供解释性细节外，视频题目还包括丰硕的配景信息。如许不仅有助于用户查找录像，还可以赞助体系链接到其他主动化功效。例如，假如摄像头辨认到动物并断定是“狗在花圃里挖洞”，体系可能会主动执行“打开洒水器”的操作。
▲用户将可以或许使用文本提醒在Nest摄像机视频片断中搜刮特定变乱（图源：Google Home）
Google Home的运动标签中将新增文本搜刮视频的功效。例如，当用户的猫在入夜后偷偷溜落发时，这一功效将异常便利。用户可以直接搜刮前次发现猫的光阴，而无需逐个阅读所有标有动物的视频来探求。
2、可解析天然语言的主动化法式
▲Gemini智能可以解析天然语言来创立繁杂的智能家居主动化（图源：Google Home）
Google Home利用法式新增的“帮我创立”功效容许用户描写愿望产生的工作，例如“睡觉时锁门并关灯”，体系会主动创立一个对应的执行法式。
用户必要经由过程手机上的Home利用法式进行文本或语音输入（今朝此功效尚不支撑经由过程Nest智能音箱操作），但Kattukaran指出，它将具备Google Home利用法式的所有现有功效。这包含所有当前的启动器、前提和操作，以及对衔接到Google Home的所有装备的拜访，包含支撑Matter尺度的装备。只管这项功效不像谷歌的剧本编纂器那样周详，但它足够简单，可以或许让任何用户轻松创立主动化功效。
3、新增声线及天然交互的Google Assistant
Google正在为其Google Assistant推出新的声音选项。除了摄像头智能和更轻便的天然语言输入之外，谷歌还提到将改良其Google Assistant的“焦点体验”——例如在所有当前的Nest智能音箱和显示器上播放音乐和设置计时器。
此外，Google Assistant将新增分歧作风、语折衷口音的声音选项。该公司宣布了首个新声音选项的演示视频，这此中保存了女性的语调，但听起来更轻巧、更天然。
Google Assistant不仅听起来更天然，也能进行更天然的互动。Kattukaran说，它不必要特定的敕令模式即可完成用户的需求，也可以或许处置停留、“嗯”和“啊”，并答复后续问题。这与客岁秋季亚马逊发布的Alexa功效（尚未推出）相似。
Kattukaran提到，新的Google Assistant将可以或许保存用户的对话配景，并逐渐进修和相识用户的家庭环境。他泄漏，由Gemini驱动的功效将根据谷歌的隐私原则，在云端为用户的家庭提供服务。
“这个功效是依据用户家庭和数据模子量身定制的。我们在家用范畴特意放慢了节拍，由于智能家居范畴的容错率异常小，我们不愿望出差池。”他提到。而Google Assistant的目的是慢慢相识用户的家庭环境，好比用户拥有的房间和装备，并在此根基上变得加倍智能化。
结语：Gemini助力Google Home进级，谷歌看好智能助手将来
这些变化旨在推进数字语音助手更靠近谷歌及其竞争敌手多年来一直尽力实现的愿景：一个真正有效的数字助手。
“当我们开端推出第一代助手时，我们许诺它会是像《杰森一家》里那样的家具智能助手，我们的愿景是打造一个超等有效的助手，可以自动赞助你办理问题，” Kattukaran说，“我们取得了许多进展，但之后就故步自封了——不仅是我们，所有‘助手’都如斯。我们遇到了技术瓶颈，不外跟着年夜型语言模子和多模态语言模子的呈现，这一瓶颈已经获得办理。”
正如Kattukaran指出的那样：“家庭是一个庞然年夜物”，它繁杂而凌乱，有多个脚色和场景。对付人类来说，治理它已经不易，对计算机而言更是伟大的挑战。但亚马逊、谷歌和苹果彷佛都在竞相打造一个将来，让我们的家庭拥有一个智能的、可感知感情的助手，从而回应我们的需求。
将来的进展若何，值得等待。
起源：The Verge