隨著人工智慧技術的快速演進,Google 推出了 Gemini Live,一項結合即時視覺與語音互動的創新 AI 助理功能。它不僅能聽懂你的語音指令,更能「看見」你眼前的世界,成為你隨身的智慧雙眼與貼心助手。Gemini Live 透過手機相機與螢幕分享功能,讓用戶能夠即時將所見畫面傳送給 AI,並以自然流暢的對話方式獲得即時回應,徹底改變了人機互動的方式。
Gemini Live 是基於 Google 最新 Gemini 2.0 多模態大型語言模型與 Project Astra AI 代理人技術打造,結合語音、文字與視覺多種輸入,實現真正的多模態即時互動。它支援超過45種語言,包括繁體中文,能夠理解複雜的視覺場景與語言指令,並進行多步推理與多輪對話,讓 AI 回應更加智慧且貼近使用者需求。
即時相機視覺互動
用戶可啟動手機相機,讓 Gemini Live 即時辨識鏡頭畫面中的物件、場景或問題。例如對著家中電器拍攝,AI 能提供故障排查建議;對著植物拍攝,能辨識品種並給出養護方法。
螢幕共享互動
透過螢幕分享功能,使用者可將手機螢幕畫面即時傳送給 Gemini Live,無論是網頁、文件還是應用程式介面,都能即時詢問相關問題,獲得精準解答,提升工作與學習效率。
多語言即時翻譯
Gemini Live 支援多國語言的即時翻譯功能,適合旅遊或跨國溝通。只需對著外文菜單或標示拍攝,AI 即可快速翻譯並用你的母語回應,消除語言障礙。
複雜問題推理與多輪對話
結合 Project Astra 的強大推理能力,Gemini Live 能處理跨領域、多步驟的複雜查詢,如穿搭建議、產品比較等,並支持多輪對話,讓交流更自然流暢。
語音與文字雙向互動
用戶可用語音或文字與 Gemini Live 互動,AI 會以語音回應並同步顯示文字字幕,方便在不同環境下使用。使用者可隨時打斷或追問,靈活掌控對話節奏。
生活整理助手
對準凌亂的抽屜或衣櫃,Gemini Live 可提供分類、收納建議,甚至判斷哪些物品適合捐贈或丟棄,讓整理變得輕鬆有效。
創意激發夥伴
分享照片或螢幕畫面,讓 Gemini Live 提供設計靈感、寫作方向或手工藝建議,幫助你突破創意瓶頸。
即時問題排解
家電故障或生活小問題,只需用相機展示現場,Gemini Live 即可快速分析並給出解決方案。
個人化購物助理
線上購物時分享螢幕,AI 幫你比較產品優劣,或根據衣櫃單品提供穿搭建議,助你做出明智且時尚的購買決定。
多語言翻譯專家
旅遊時拍攝外文標示,快速翻譯並提供相關資訊,消除語言隔閡。
安裝並登入 Gemini App
目前 Gemini Live 功能已在 Android 裝置上開放,需下載最新版 Gemini App 並登入 Google 帳戶。
啟動相機或螢幕分享模式
在 Gemini App 中點擊「Live」按鈕,選擇「相機」或「螢幕分享」模式,開始即時視覺互動。
開始對話與提問
用語音或文字輸入問題,Gemini Live 根據視覺與語言資訊即時回應,並支持多輪追問與視角切換。
Gemini Live 利用多模態融合技術,將視覺、語音、文字深度結合,提升 AI 對環境的理解與反應能力。結合低延遲的多模態即時 API,實現流暢自然的人機互動。Google 未來將擴展 Gemini Live 支援更多裝置與語言,並加入更精細的物件辨識與個人化建議,讓 AI 助理更加智慧與貼心。
Google Gemini Live 以突破性的多模態即時互動技術,讓 AI 不僅聽懂你的聲音,更能看見你的世界,成為你隨身的智慧雙眼。它不僅提升日常生活的便利性,也為工作、學習與創作帶來全新助力。隨著 Gemini Live 持續進化,未來的智慧生活將更加智能且人性化,值得每個人親自體驗與探索。