Google 公布 Project Astra，讓 AI 可以用手機鏡頭辨識物體並回答問題

Google 在開發者大會 Google I/O 2024 上，公布新的人工智慧計畫 Project Astra，展示 AI 智慧助理的新應用。

Project Astra 是即時的多功能 AI 助理，跟過去的 Google 語音助理相比算是大幅升級，透過即時取得手機鏡頭拍攝的畫面、理解畫面裡的資訊，Project Astra 可以回答更個人化、更符合當下專屬情境的問題。

負責展示應用的 Google DeepMind 執行長 Demis Hassabis 提供一段示範影片，Project Astra 的使用者要求 AI 辨識畫面裡有什麼東西會發出聲音、揚聲器上的某個零件是什麼功能、找到遺失的眼鏡、辨識一段程式碼是什麼功能，整個過程都是用自然對話達成。

影片搜尋功能成為可能

Project Astra 的功能也將應用到 Google 搜尋中，比方說在二手商店買了一台黑膠播放機，但開機後卻沒辦法使用，唱針會一直往外飄不知道該如何固定在唱盤上，這時候只要打開 Google Lens 鏡頭，讓手機對著不知道該怎麼使用的黑膠播放器，並且提問為什麼這個沒辦法固定（甚至還不用說清楚零件的名稱），這時 AI 就會自動辨認影片裡的元素，搭配使用者的提問給出相關的回答。

透過影片搜尋功能可以節省使用者找出正確描述方式來提問的過程，而且還可以快速獲得故障排除的步驟。

此功能未來將會先開放給美國使用，之後會陸續擴展到其他國家。