蘋果聯合哥倫比亞大學推出的SceneScout已進入測試階段

【環球網科技綜合報道】7月8日消息，據外媒報道。蘋果公司與哥倫比亞大學共同研發的AI原型系統SceneScout正式進入測試階段。據悉，這一系統通過融合蘋果地圖（Apple Maps）API與基於GPT-4o內核的多模態大語言模型，為盲人及低視力羣體（BLV）提供定製化街景導航輔助。

SceneScout的核心功能是查看街景圖像，分析所見內容，並向觀看者進行描述。，核心創新在於其雙模式交互設計，突破了傳統導航工具僅提供路線指引的侷限。在哥倫比亞大學組織的測試中，10名具備科技行業背景的視障用户參與了場景化體驗。參與者反饋，SceneScout的虛擬探索功能顯著降低了獨立出行的心理壓力。一位測試者表示：“過去我需要依賴他人描述或記憶路線，現在系統能提前告訴我‘轉角處有棵大樹，右側是鐵柵欄’，這種細節讓我對環境更有掌控感。”

研究團隊特別指出，系統通過“行人視角模擬”解決了傳統街景圖像的侷限性。例如，微軟2018年推出的Soundscape應用雖能描述環境，但僅支持現場即時操作，而SceneScout允許用户提前規劃，甚至通過骨傳導耳機在行走中同步獲取動態信息。（青山）