隨著(zhù)座艙屏幕數量和算力趨近用戶(hù)感知上限,智能座艙的競爭焦點(diǎn)正由硬件堆疊轉向智能體驗。真正的變革在于座艙系統能否成為貼心伙伴——不僅能聽(tīng)懂指令,更能理解意圖;不僅能識別環(huán)境,更能洞察場(chǎng)景;不僅能執行操作,更具情感共鳴與主動(dòng)服務(wù)能力,而這正是中科創(chuàng )達深耕智能座艙領(lǐng)域的核心探索方向。
NVIDIA TensorRT Edge-LLM是專(zhuān)為邊緣端大模型部署打造的輕量級推理框架,面向智能汽車(chē)等實(shí)時(shí)端側應用場(chǎng)景。中科創(chuàng )達憑借深厚的智能汽車(chē)操作系統及AI技術(shù),敏銳把握這一技術(shù)趨勢,將該框架作為核心底層依托,賦能座艙AI的本地化落地。
NVIDIA在GPU計算領(lǐng)域深耕多年,依托CUDA、TensorRT等核心技術(shù)構建了成熟的AI開(kāi)發(fā)生態(tài),已成為業(yè)界事實(shí)標準。此次開(kāi)源TensorRT Edge-LLM,正是將這一生態(tài)優(yōu)勢向邊緣端延伸的重要舉措,更精準契合了智能座艙從硬件堆疊到AI體驗升級的行業(yè)需求。中科創(chuàng )達作為NVIDIA的重要合作伙伴,正借助這一開(kāi)源技術(shù)紅利,將NVIDIA的標準化技術(shù)底座與自身的車(chē)規級AIOS深度融合,為車(chē)企打造高水準智能座艙提供標準化、高可靠的一體化技術(shù)解決方案。
中科創(chuàng )達的創(chuàng )新實(shí)踐基于NVIDIA TensorRT Edge-LLM的多模態(tài)AI服務(wù)架構
TensorRT Edge-LLM為車(chē)載邊緣AI提供了高性能、輕量化、純C++的推理運行時(shí),是構建車(chē)規級推理系統的重要基礎?;谠撨\行時(shí),中科創(chuàng )達進(jìn)一步構建了面向座艙業(yè)務(wù)的多模態(tài)AI服務(wù)架構,將底層推理能力封裝為可調度、可擴展的系統服務(wù)。

該架構具有統一的AI服務(wù)接口、支持跨SoC平臺的快速適配、面向業(yè)務(wù)負載的推理任務(wù)調度和優(yōu)化的特點(diǎn)。
案例A:重構AI座艙交互基于NVIDIA DRIVE AGX Orin的端側算力與優(yōu)化視覺(jué)大模型融合實(shí)踐
基于DRIVE Orin平臺,中科創(chuàng )達與某頭部車(chē)企攜手,成功打造并全球首發(fā)了新一代AI座艙。其核心成果在于:充分利用DRIVE Orin平臺的極致 AI 算力,深度融合經(jīng)中科創(chuàng )達深度優(yōu)化的本地 Qwen2.5-VL-7B 視覺(jué)大模型,真正兌現了“AI座艙”的感知與決策能力,并將關(guān)鍵AI場(chǎng)景的端到端推理延遲降至業(yè)界領(lǐng)先水平,為用戶(hù)帶來(lái)顛覆性的瞬時(shí)響應體驗。
案例B:面向下一代車(chē)載自然交互的端側大模型記憶實(shí)踐
中科創(chuàng )達與某全球頭部車(chē)企合作的Innovation Project 中,在車(chē)規級高性能 AI 算力底座上,部署并深度優(yōu)化了Qwen3-VL-4B視覺(jué)語(yǔ)言模型,使其滿(mǎn)足車(chē)載環(huán)境的苛刻要求?;诖?,成功實(shí)現了“長(cháng)聆聽(tīng)”(Long-Context Listening)與“端側主動(dòng)記憶”(On-Device Proactive Memory)兩大原型功能,為探索無(wú)界面的自然交互奠定了基礎。
核心價(jià)值
面向未來(lái),雙方將合作聚焦于三個(gè)維度:基于量產(chǎn)數據和用戶(hù)反饋持續優(yōu)化 DRIVE平臺上的性能表現;共同開(kāi)發(fā)支持個(gè)性化服務(wù)與座艙AI Agent框架;為車(chē)企提供從模型選型、量化優(yōu)化到Agent部署集成的完整工具鏈與參考框架,助力打造可持續進(jìn)化的AI定義座艙。中科創(chuàng )達非常期待通過(guò)NVIDIA開(kāi)放的底層能力與中科創(chuàng )達成熟的集成經(jīng)驗,與更多開(kāi)發(fā)者共同創(chuàng )建創(chuàng )新可靠的智能汽車(chē)軟件生態(tài),真正實(shí)現從功能定義到AI定義的范式變革。
