英偉達(dá)今日正式推出了Alpamayo 2 Super,這是一款擁有320億參數(shù)、基于推理能力的視覺-語言-動作模型。該模型進(jìn)一步豐富了英偉達(dá)Alpamayo系列開源人工智能模型、仿真框架與物理人工智能數(shù)據(jù)集,助力企業(yè)研發(fā)安全的L4自動駕駛出租車。

伴隨該模型發(fā)布,英偉達(dá)還推出多款全新工具、模型與智能體技能,打通從真實(shí)場景數(shù)據(jù)采集、閉環(huán)訓(xùn)練到車載部署的全流程。這些工具包括NVIDIA AlpaGym、NVIDIA OmniDreams以及全新的NVIDIA Omniverse NuRec模型。
Alpamayo 2 Super可免去企業(yè)從零搭建自動駕駛核心基礎(chǔ)設(shè)施的環(huán)節(jié),大幅加速自動駕駛車輛研發(fā)進(jìn)程。該模型具備類人的感知、推理與行動能力,并且具有可解釋性,能夠滿足安全驗(yàn)證與合規(guī)監(jiān)管的相關(guān)要求。
為適配道路實(shí)車部署的模型訓(xùn)練需求,AlpaGym提供閉環(huán)強(qiáng)化學(xué)習(xí)平臺。而英偉達(dá)OmniDreams作為可生成逼真場景的世界模型,能夠大規(guī)模仿真各類罕見、長尾駕駛場景。此外,英偉達(dá)為旗下所有自動駕駛開發(fā)工具配套了物理人工智能智能體能力,例如依托Omniverse NuRec打造的神經(jīng)重建能力,可基于真實(shí)車隊(duì)行駛場景開展仿真,并批量生成合成訓(xùn)練數(shù)據(jù)。
英偉達(dá)創(chuàng)始人兼首席執(zhí)行官黃仁勛表示,Alpamayo標(biāo)志著汽車開始具備自主推理能力,不再只是單純行駛。唯有英偉達(dá)能同步提供開源模型、仿真工具、真實(shí)場景數(shù)據(jù)與智能體能力,助力全球自動駕駛出租車生態(tài)打造四級自動駕駛能力,讓車輛識別極端場景、解釋決策邏輯、建立安全信任,并順利規(guī)?;渴鹬翑?shù)百萬輛汽車。
Alpamayo 2 Super將模型參數(shù)規(guī)模從100億提升至320億,不僅在長尾場景下的邏輯推理、三維空間感知與軌跡預(yù)測能力全面增強(qiáng),還支持多類任務(wù),包括邏輯推理、自動標(biāo)注、場景理解、模型評估以及大模型知識蒸餾至輕量化模型。該模型升級后,具備全車環(huán)視感知和元動作輸出能力,新增推理式自動標(biāo)注與二維目標(biāo)定位功能,優(yōu)化因果鏈與軌跡輸出。