Überprüft von 
Nvidia hat auf der Conference for Robot Learning (CoRL) in München eine Reihe fortschrittlicher Workflows vorgestellt, um seine Entwicklungsziele im Bereich humanoider Roboter zu beschleunigen.
Die neuen Tools, die auf der Branchenveranstaltung präsentiert wurden, sollen Roboterentwickler bei ihrer Arbeit an KI-basierten Robotern maßgeblich unterstützen.
Zu den vorgestellten Funktionen gehören die allgemeine Einführung des Nvidia Isaac Lab Robot Learning Frameworks, sechs neue humanoide Lernworkflows für das GR00T-Projekt sowie Entwicklungstools für die Kuratierung und Verarbeitung von Videodaten, darunter der Nvidia Cosmos Tokenizer und der Nvidia NeMo Curator.
#Robotikentwickler profitieren von einer verbesserten visuellen Tokenisierung durch den Open-Source Cosmos Tokenizer, der Bilder und Videos in qualitativ hochwertige Token mit fortschrittlichen Kompressionsraten zerlegen kann, die bis zu 12 Mal schneller sind als die derzeit auf dem Markt erhältlichen Tokenizer.
Eine ähnliche Verbesserung bietet der NeMo Creator, der die Kuratierung von Videomaterial etwa siebenmal schneller als die Konkurrenz ermöglicht.
Nvidia in Kooperation mit Hugging Face
Das Projekt GR00T ist das Programm von Nvidia, um die Entwicklung von Robotern voranzutreiben. Es hat sechs neue Workflows eingeführt, darunter GR00T-Gen für die Erstellung von KI-gesteuerten 3D-Umgebungen und GR00T-Mimic für die Trajektoriengenerierung. Außerdem wurden GR00T-Dexterity für geschickte Manipulation, GR00T-Control für Körperkontrolle, GR00T-Mobility für Navigation und GR00T-Perception für sensorische Verarbeitung bereitgestellt.
Auf der CoRL wurde auch eine Zusammenarbeit zwischen Nvidia und Hugging Face angekündigt, die kürzlich eine Million herunterladbarer KI-Modelle erreicht hat. Die beiden Unternehmen werden ihre Open-Source-Robotik-Communities zusammenlegen. Die KI- und Robotertechnologien von Nvidia, Omniverse und Isaac, werden mit der offenen KI-Plattform LeRobot von Hugging Face kombiniert, um die Arbeit von Forschern und Entwicklern in vielen Branchen voranzutreiben, insbesondere in der Fertigung, der Logistik und im Gesundheitswesen.
Image credit: Via Midjourney
