商湯絕影首發智能座艙產品A New Member For U

【環球網科技綜合報道】11月27日消息，在2024絕影實力AI DAY上，商湯絕影首發AI汽車創新產品A New Member For U（你的家庭新成員）。

依託原生流式多模態大模型、車載類人記憶框架和持續運行框架等前沿AI汽車創新技術，商湯絕影打造的“家庭新成員”能夠察言觀色。商湯絕影致力於讓智能汽車向有情感、有温度的超級智能體進化，讓汽車不再是冰冷的工具或者機械式的助手。

在商湯絕影看來，這就需要讓智能座艙進行一次“叛逆”進化，是指一種突破。AI汽車的智能座艙不再只是個聽話的工具，循規蹈矩的助手，而是能夠主動學習，自我進化。未來，它會將每一次交互轉化為寶貴的記憶，逐漸形成對用户的深度理解。在知情允許之下，座艙能記住你的偏好，比如喜歡的温度、常去的目的地以及更多個性化細節，並提供主動服務，它還會持續迭代、自我成長。

為此，商湯絕影打造了A New Member For U(你的家庭新成員)，讓智能汽車能夠察言觀色，時刻準備着主動提供專屬服務。

而“家庭新成員”能夠察言觀色，離不開商湯絕影強大的原生流式多模態大模型。絕影的多模態大模型能夠綜合理解文本、圖像、音頻、視頻、3D等信息模態，包括人的表情、語氣等，做到全場景的多模態感知。不止如此，商湯絕影還針對車載場景進行定製，融合車端感知數據、車端場景針對性訓練。

因此，家庭新成員能全面感知用户在車內的信息和需求，以及周圍環境數據，並進行深度理解和推理思考。

除了強大的感知和理解能力外，要成為家庭新成員，汽車必須要有記憶。對人類來説，記憶很重要，因為它是認知功能的核心，也是情感的基礎和連接的紐帶。

商湯絕影打造的首個車載類人記憶框架，與人類的記憶機制非常相似，包括臨時記憶、長期記憶和場景記憶三部分，三者結合讓系統實現類人的記憶能力。

臨時記憶，能記得一些瞬時信息，比如車裏的物品、人的搭配、有沒有系安全帶等；也有長期記憶，就像是一個檔案庫，存儲用户的基本信息、行為模式和偏好等，它可以自我迭代，能從用户長期使用中總結規律並不斷優化。場景記憶或者説工作記憶，是通過從臨時記憶和長期記憶中提取重要信息，對這些信息即時處理和分析，作出決策或者解決問題。

此外，商湯絕影還打造了能夠持續推理的Always-on運行框架，能夠將多模態感知到的信息與各種記憶相結合，進行高效的處理和反饋，做到時刻感知需求，主動為用户服務。通過零拷貝技術和端側部署，新成員的系統數據延遲控制在1毫秒以內，端側也能快速響應，目前首包耗時最短僅需60毫秒，推理速度40Tokens/秒。