Felhasználók tájékoztatása az új GPU erőforrás-gazdálkodással kapcsolatban

Kedves Felhasználónk!

Ezúton szeretnénk felhívni a figyelmét néhány fontos változásra a HUN-REN Cloud GPU erőforrás-gazdálkodásával kapcsolatban.

A HUN-REN Cloud népszerűsége töretlenül növekedett az elmúlt években, és ezen belül is kiemelt érdeklődés övezte a GPU erőforrásokat. Ennek az örömteli folyamatnak mellékhatásaként azonban ez év őszére a kiosztható GPU kapacitás lényegében elfogyott, ami szükségessé teszi az eddig megszokott, meglehetősen rugalmas erőforrás-gazdálkodási rendszerünk átalakítását. Annál is inkább, mivel méréseink szerint számos kutatási projektben az általuk lekötött GPU erőforrások tényleges felhasználói kihasználtsága nem egyenletes, illetve viszonylag alacsony szinten mozog, miközben az új felhasználók GPU igényeit egyáltalán nem, vagy csak hosszas várakozás után tudjuk kiszolgálni.

Fenti okokból változtatnunk kellett az eddigi GPU igénylési- és allokálási szabályokon. A cél egy dinamikusabb GPU kapacitás-elosztó rendszer bevezetése, amely egy év alatt több felhasználó számára teszi elérhetővé a felhő szolgáltatásokat, valamint a SLURM Job manageren keresztül hatékonyabb GPU erőforrás-kihasználtságot eredményez.

2025. január 1-jétől életbe lép a HUN-REN Cloudra vonatkozó új GPU Erőforrás-gazdálkodási Szabályzat. Olyan új GPU erőforrás allokálási rendszert dolgoztunk ki, amely elegendő erőforrás esetén pontosan úgy működik, mint a régi rendszer. Ha viszont nincs elegendő erőforrás, akkor automatikusan átmegy egy a versenyhelyzetet fair módon lekezelő mechanizmusba.

Legfontosabb változások (a GPU erőforrásokat is igénybe vevő IaaS projektek esetén), a teljesség igénye nélkül:

  • Projekt fázisok bevezetése
    • Előkészítő projekt
      • Új projektek besorolása alapesetben
      • Legkisebb flavor kerül kiosztásra
      • Betanulási szakasz konzultációs lehetőséggel
    • Haladó projekt
      • Sikeres előkészítő szakasz után következő projektállapot
      • Nagyobb flavor is kiosztható
      • Az előkészítő szakasz csak hitelt érdemlően igazolt GPU tapasztalat esetén ugorható át
  • Előre meghatározott futtatási idő
    • GPU erőforrást a jövőben legfeljebb 3 hónapra lehet igényelni, speciális esetben (szolgáltatást nyújtó projektnél vagy ernyőprojektnél) legfeljebb 1 évre
  • Már futó GPU-s projektek esetén
    • A 2025.03.31 előtt lejáró projektek az eredeti dátum szerint kerülnek lezárásra
    • A 2025.03.31 után lejáró projektek végdátuma 2025. március 31-re változik, de hosszabbítási kérelem nyújtható be március 1-ig az alábbiak szerint:
      • Legfeljebb 3 hónapra szóló hosszabbítási kérelem adható be
      • Az igények versenyeztetése miatt előfordulhat, hogy egy projekt átmenetileg nem jut GPU-s erőforráshoz
      • Hosszabbítási engedély esetén a projekt változatlan formában futhat tovább
      • Az egy project által kérhető hosszabbítások száma nincs korlátozva
  • Elbírálási- és projekt futtatási időszakok
    • Negyedéves rendszerben
    • Elbírálási időszakok
      • Kezdete: márc. 1., jún. 1., szept. 1., november 20.
      • Vége: a 14-edik napot követő első munkanapon és ekkor az igénylők kiértesítése
    • Projekt futtatási időszakok
      • jan. 1 - márc. 31.
      • ápr. 1 - jún. 30.
      • júl. 1 - szept. 30.
      • okt. 1. - dec. 31.
  • Új- és erőforrás bővítési igénylések
    • Leadás szükség szerint, folyamatosan
    • Benyújtási határidő az elbírálási időszakok kezdetéig
    • Kiértékelésükre szabad erőforrások esetén akár azonnal, de jellemzően a soron következő elbírálási időszakban kerül sor
    • A folyamatban lévő elbírálási időszak idején érkező igényekre, amennyiben nincs szabad erőforrás, csak a rákövetkező elbírálási időszakban kerül sor.
  • Bírálati szempontok
    • Tudományos érték
    • Szabad erőforrások
    • Hosszabbítási igény esetén a projekttel eddig elért eredmények
    • Az új- és hosszabbítási igények azonos súllyal esnek latba
  • Új projektek indítási igényei 2025. jan. 1. és márc. 31. között
    • Az indítási kérelemhez csatolni kell egy kitöltött GPU igénylőlapot
    • A projektek indíthatóságáról döntés a márc. 1-jén kezdődő elbírálási időszakban
    • Az engedélyezett projektek ápr. 1-jén indulhatnak
  • Futó projektek folytatási igényei 2025. jan. 1. és márc. 31. között
    • Minden olyan projektnek, amely folytatni akarja működését, folytatási kérelmet kell regisztrálnia a HUN-REN Cloud weblapon 2025. feb. 28-ig.
    • A kérelem beadása a szokásos módon történik, de mellé csatolni kell egy kitöltött GPU igénylőlapot
    • A projektek folytathatóságáról döntés a márc. 1-jén kezdődő elbírálási időszakban születik
    • A nem engedélyezett projekteknek márc. 31-ig le kell költözniük a HUN-REN Cloudról.
    • Az engedélyezett projektek megszakítás nélkül folytathatják műkődésüket márc. 31. után is újabb 3 hónapig.
  • GPU igénylőlap felépítése​​​​​​​
    • A négyféle IaaS projekttípusból melyiket igényli:
      • 3 hónapos előkészítő project
      • 3 hónapos haladó project
      • 1 éves szolgáltató project
      • 1 éves ernyőprojekt
    • A kutatás céljának és várható tudományos impaktjának rövid leírása (max 1500 karakter).
    • A projektben résztvevő, a felhőt ténylegesen használó projekttagok felsorolása akadémiai besorolásukkal (PhD, habilitált docens, egyetemi tanár, MTA doktora, akadémikus). Ezen belül a projektvezetőt (aki egyúttal a pályázó) ki kell emelni.
    • Az igényelt GPU erőforrások várható, százalékos kihasználtsága a projekt során.
    • A GPU használat várható időbeli mintázata (pl. folyamatos, szakaszos, mekkora használati szakaszok és közöttük mekkora szünetek stb.) (max 1000 karakter).
    • A projekthez szorosan kapcsolódó nemzetközi projektek vagy szervezetek megadása, ill. annak leírása, hogy ezek hogyan használják a felhőn indítandó projekt eredményeit, vagy milyen más módon kapcsolódnak a projekthez (max 1500 karakter).
    • Vállalt publikációk (D1, Q1, Q2, előadások stb.) tételes felsorolása.
    • Ha a projektben résztvevő Cloud felhasználóknak van más futó vagy befejezett GPU-t használó projektje a HUN-REN Cloudon, vagy más cloudon, akkor az abban, vagy azokban elért eredmények (publikációk, előadások stb.) tételes felsorolása. (Ilyen esetben az előkészítő projekt fázist ki lehet hagyni, azonnal haladó projektet lehet igényelni).
    • Hosszabbítási igény esetén:
      • Van-e erőforrásigény változás (csökkentés, vagy növelés)?
      • Az aktuális 3 hónapos projekt időszakban elért eredmények (max 1000 karakter).
    • Nyilatkozat tétele:
      Kijelentem, hogy az igényelt projektben a megadott intézményen belül a leírt kutatás érdekében használom a HUN-REN Cloudon futó projektet.

Újdonság: SLURM Job manager

  • PaaS (Platform as a Service) jellegű GPU igények kiszolgálására
  • Ideális rövidebb, intenzív számításigényű feladatok futtatására magasabb GPU kapacitás mellett
  • FIFO (First In First Out) kiszolgálási ütemezés és max 1 hetes futtatási lehetőség
  • Bevezetése a második negyedévtől várható

Minimális változás lesz azon projektek esetén, amelyek egyáltalán nem használnak GPU-t: ezeknél továbbra is a megszokott ügymenet szerint lehet új igényeket leadni, és nincsenek a hosszabbításra vonatkozó korlátozások, de a maximálisan kérhető project időtartam 1 év lesz.

Minderről részletesebben olvashat a januárban megjelenő HUN-REN Cloud GPU Erőforrás-gazdálkodási Szabályzatában. Kérjük tanulmányozza majd át figyelmesen, felmerülő kérdéseivel kapcsolatban pedig nyugodtan keressen bennünket az info@science-cloud.hu e-mail címen, ahol további egyeztetésekre is lehetőség nyílik.

Januárban és februárban online tájékoztató eseményt szervezünk majd, ahol a részleteket elmagyarázzuk a felhasználóknak.