拋棄OpenAI,F(xiàn)igure亮王牌:史上首次兩個(gè)機(jī)器人「共腦」!Figure在與OpenAI分手后,自主研發(fā)了首個(gè)模型Helix。這個(gè)視覺-語言-動(dòng)作模型被直接應(yīng)用于人形機(jī)器人大腦中,讓機(jī)器人具備感知、語言理解和學(xué)習(xí)控制的能力,是一個(gè)端到端的通用模型。Figure的目標(biāo)是發(fā)展家庭機(jī)器人,其內(nèi)部的AI需要像人一樣推理,處理各種家庭用品。
Helix目前主要用于Figure上半身的控制,包括手腕、頭部、單個(gè)手指和軀干,能夠以高速率執(zhí)行復(fù)雜任務(wù)。只需一句話,機(jī)器人就可以拿起任何物品。例如,當(dāng)被要求“撿起沙漠物品”時(shí),Helix會(huì)識(shí)別出玩具仙人掌,選擇最近的手,并執(zhí)行精確的電機(jī)指令來抓住它。
拋棄OpenAI,F(xiàn)igure亮王牌:史上首次兩個(gè)機(jī)器人「共腦」
此外,Helix還能精準(zhǔn)地處理生活中的各種小物件,如金屬鏈、帽子、玩具等。它還可以將物品放置在冰箱里,而且兩個(gè)Figure機(jī)器人可以協(xié)作完成這一任務(wù)。Helix是首個(gè)同時(shí)操控兩臺(tái)機(jī)器人的VLA,使它們能夠解決共同的長序列操作任務(wù),即使面對從未見過的物品也能應(yīng)對自如。
新款模型采用單一神經(jīng)網(wǎng)絡(luò)權(quán)重學(xué)習(xí)所有行為,無需特定微調(diào)。它還是首款完全在嵌入式低功耗GPU上運(yùn)行的VLA,未來商業(yè)部署甚至進(jìn)入家庭指日可待。家庭環(huán)境對機(jī)器人技術(shù)來說是巨大挑戰(zhàn),因?yàn)榧抑谐錆M了無數(shù)不可預(yù)測形狀、尺寸、顏色和質(zhì)地的物品。為了讓機(jī)器人在家庭中發(fā)揮作用,它們需要生成智能化的新行為來應(yīng)對各種情況,特別是那些從未見過的物品。
當(dāng)前,教會(huì)機(jī)器人一個(gè)新行為需要大量人力投入,要么博士級專家手動(dòng)編程,要么數(shù)千次示教。這兩種方法的成本都難以承受。但通過Helix,只需通過自然語言即可實(shí)時(shí)定義新技能。這種能力將從根本上改變機(jī)器人技術(shù)的發(fā)展軌跡。突然間,曾經(jīng)需要數(shù)百次示教才能掌握的新技能,現(xiàn)在只需通過自然語言與機(jī)器人對話就能立即獲得。
軟銀承諾每年花費(fèi)30億美元使用OpenAI的技術(shù)
2025-02-04 19:08:49SBOpenAI