Morzsák

Oldal címe

VLA-Quad: Hierarchikus Edge-Cloud AI Robotvezérlés

Címlapos tartalom

A projekt célja egy olyan több-szintű, hierarchikus Vision-Language-Action (VLA) AI architektúra kutatása és fejlesztése, amely lehetővé teszi négylábú robotok hatékony és intelligens vezérlését erőforrás-korlátos környezetben.

A kutatás központi kérdése az intelligencia optimális megosztása a robot, az edge cloud kapacitások és a felhő között. A HUN-REN Cloud nagykapacitású GPU-it a nyílt forráskódú VLA alapmodellek (pl. Hugging Face-en elérhető OpenVLA) és nagy paraméterszámú modellek célzott finomhangolására (fine-tuning), új skillek generálására, valamint a komplex feladattervezésre használjuk. Az így betanított, kevesebb paraméteres modellek az edge szerverre kerülnek, ahonnan skill- és tool-használattal vezérlik a roboton futó alacsony latenciájú mozgásvezérlőt.
Információ a felhő robotika műhelyről: https://sites.google.com/gsuite.tmit.bme.hu/hsn-cloud-robotics-group (http://www.hsnlab.hu)