Världsmodellen som NEO:s kognitiva kärna 1X har avslöjat en stor AI-utveckling där NEO-humanoiden kan översätta vilken naturlig språkprompt som helst till robotisk handling. Den demonstrerar denna förmåga även för nya uppgifter, objekt och miljöer som inte finns i dess robotdataset. - 1X World Model tränas på internetskala mänskliga interaktionsvideor och finjusteras med robotdata för att förankra sin förståelse i fysik och i NEO:s förkroppsligande - från en enkel röst- eller textprompt genererar världsmodellen en visualisering av framtida handlingar - en inbyggd modell för invers dynamik översätter dessa till precisa motoriska rörelser för NEO
Ännu mer imponerande är att NEO hanterar helt nya uppgifter – som att öppna en toalettsits, stryka en skjorta eller borsta hår – utan några tidigare exempel i robotdatasetet. Detta är möjligt tack vare den breda mänskliga kunskap som fångas inom den videobaserade världsmodellen.
Allmän robotik begränsas av hastigheten i datasamling ledda av människoledda robotar. Med detta nya tillvägagångssätt kan NEO samla in egen data och lära sig självständigt. Denna skalning gynnas både av ny robotdata och den kontinuerliga förbättringen av videovärldsmodeller i dess kärna
163