Gemini AI躍上Google Home裝置

Google下周舉行硬體發表會前夕，於昨（5）日宣布為Nest系列攝影機、智慧音箱、顯示器等Google Home裝置加入Gemini多模態模型能力。

Google已為Nest Camera加入AI功能，像是簡單的動作偵測、人臉辨識或封包偵測，不過過去Nest Camera尚無法真正理解真實環境發生的事。在最新進展下，Nest Camera使用的AI模型已升級到Gemini多模態模型。隨著用戶使用一段時間，AI模型理解能力將從特定事物（如動作、人臉和封包等）擴及到更多種，並說出最重要的意義。結合Gemini模型的Google Home App可在用戶觀看Nest Camera拍攝的影片時，為影片產出文字描述或圖說，像是「狗在花園中挖洞」。

Google Home App還能根據用戶輸入的問題搜尋目標。例如當用戶問腳踏車是否停在院子車道上，Home App能搜尋相機歷史紀錄，只提供最相關事件清單，並給出摘要資訊。

圖片來源／Google

Google也為Home平臺加入自動化能力。Home App和自動化腳本編輯器（script editor）現在都能支援100多種家用自動化指令（如開／關、暫停、調暗／調亮），允許用戶設定、串連家中聯網裝置動作，例如說出或輸入「鎖上門、關閉浴室所有電源」。

第二，Nest智慧音箱與顯示器內建的Google Assistant也獲得Gemini模型加持。首先，這些裝置以LLM強化媒體播放或計時設定，今年內Google還會利用Gemini模型為Google Assistant加入不同腔調、類型的新聲音，並提升其理解能力，使Assistant能接受自然語言提問，和用戶產生更流暢的雙向對話，或提供更有用的建議。

這些新AI加持的功能將在今年下半，先以公眾測試版提供給Nest Aware訂閱用戶，預料會逐步增加功能，並開放更多用戶使用。