Chytrý systém rozpoznávání úloh dokáže efektivně zpracovat data v moderních superpočítačích

  • Vědci představili nový systém pro efektivní distribuci dat v superpočítačích
  • Systém založený na strojovém učení rozpoznává jednotlivé úlohy ke zpracování
  • Jednotlivé servery jsou efektivně využité a dochází k lepšímu rozložení zátěže

Tým vědců z Virginia Polytechnic Institute and State University uvedl nové řešení zaměřené na superpočítače, které pomáhá zefektivnit procesy zpracování jednotlivých úloh, které zahrnují přenosy obrovského množství dat.

Současné systémy ve velkém používají takzvaný Round-robin scheduling, což je základní plánovací algoritmus, který už na úrovni operačního systému určuje, jaký proces bude vykonán na daném hardwaru (procesor, grafická karta, úložiště) a v jakém pořadí. Problém je, že tento algoritmus vůbec neřeší objem dat či vlastnosti úlohy. To vede k mnoha případům, kdy dochází k neefektivnímu zatížení a zpomalení výkonu celého superpočítače. A právě to nový systém řeší.

Strojové učení na to jde chytře

Nový systém využívá strojového učení k tomu, aby dokázal rozpoznat nejen konkrétní úlohu, ale také třeba její typ. Díky tomu může správně vyhodnocovat pořadí a rozložení potřebných zdrojů tak, aby ke zpracování došlo efektivně a hlavně rychle bez toho, aby se superpočítač zbytečně „zasekl“.

Systém navíc řeší nejen aktuální potřeby v reálném čase, ale dokáže i velmi dobře predikovat následné potřeby a rozložit tak úložné a síťové zdroje ještě lépe. Díky tomu už monitorovací platforma dokáže správně vyhodnotit, že v blízké době dorazí velké množství dat, v jaké formě a včas uvolní potřebné zdroje.

Bez změny kódu

Hlavní výhodou je, že se jedná o end-to-end řešení, které nevyžaduje úpravu kódů stávajícího použitého softwaru, který je určen pro zpracování náročných úloh v různých fázích.

V rámci klasických optimalizací u superpočítačů je totiž téměř vždy nutné částečně upravit i používané aplikace, aby došlo k přizpůsobení jejich chování ve spojení s novým systémem rozložení zátěže. To samozřejmě stojí peníze a trvá nějakou dobu, protože se jedná o zásah někdy i velkého počtu programátorů.

Vysoká přesnost

Tvůrci se chlubí tím, že systém dokáže predikovat s velmi vysokou přesností 99 %, což bylo ověřeno u reálného systému a jeho úložného systému. Speciální server pro metadata rovněž neustále sbírá a vyhodnocuje informace z úložných systémů v reálném čase, díky čemuž ve výsledku dochází k optimálnímu vytížení a zpracování dat.

Podobné systémy postavené na strojovém učení budou hrát stále důležitější roli, protože již brzy bude na světě první superpočítač s výkonem v oblasti EXAFLOPS a s tím přichází i nutnost efektivně řešit zdroje novým a chytrým způsobem, a nikoli starými a jednoduššími algoritmy, které byly dostatečně v minulosti. 

Samotná technologie strojového učení jde navíc velmi rychle dopředu a s tím i různé akcelerátory, takže využití není problém ani z pohledu nákladů nebo výkonu.

Diskuze (1) Další článek: O stupeň výš. Recenze počítače Tesco s procesorem 486SX/25 a 486DX4/100 #Computer25

Témata článku: Věda, Umělá inteligence, Výzkum, Strojové učení, Superpočítače, Chytrý systém, Super, Systém, Zpracování, Nový systém, Modern, Data, Rozpoznávání, SUP, Úloha



Srovnávací test: Wi-Fi 6 mesh do 5 000 Kč. Víc antén neznamená lepší signál, vyhrály nenápadné krabičky

Srovnávací test: Wi-Fi 6 mesh do 5 000 Kč. Víc antén neznamená lepší signál, vyhrály nenápadné krabičky

Pro pokrytí domů či větších bytů rychlou Wi-Fi je ideální mesh řešení, a to takové, které už myslí na budoucnost, a tedy podporuje Wi-Fi 6. Otestovali jsme jich pro vás rovnou osm.

Antonín Trčálek
Srovnávací testRouterWi-Fi
Zuckerbergovo metaverzum je zatím tak špatné, že jej nechtějí používat ani jeho zaměstnanci

Zuckerbergovo metaverzum je zatím tak špatné, že jej nechtějí používat ani jeho zaměstnanci

**V interním oběžníku šéf metaverza v Metě přiznává, že jeho hlavní aplikaci nechtějí používat ani lidé z vývoje. **Horizon Worlds trpí řadou chyb, špatným výkonem nebo neslavně vypadající grafikou. **Ani po výzvě od šéfa metaverza zaměstnanci aplikaci příliš nepoužívají, takže je management musí donutit.

Petr Urban
MetametaverseVirtuální realita
Konec českého poskytovatele internetu v přímém přenosu. Připomíná to krachující energetické firmy
Lukáš Václavík
CETINPoskytovatelé internetuPřipojení k internetu
Jak zvýšit herní výkon ve Windows 11? Vypněte tyhle funkce, radí Microsoft

Jak zvýšit herní výkon ve Windows 11? Vypněte tyhle funkce, radí Microsoft

**Windows 11 na některých počítačích aktivují bezpečnostní funkci Integrita paměti. **Virtualizační funkce ale negativně ovlivňují herní výkon. **Pokud některé funkce vypnete, můžete tím herní výkon posílit.

Petr Urban
Windows 11Microsoft
Podrobný návod, jak zrušit SIPO. Nejsnazší je převedení plateb jinam

Podrobný návod, jak zrušit SIPO. Nejsnazší je převedení plateb jinam

**Než zrušíte SIPO, musíte platby převést jinam. **Neplatí to nutně pro poplatky veřejnoprávním médiím. **SIPO zrušíte osobně, elektronicky nebo se zruší automaticky.

Petr Urban
Česká poštaNávody
Jsou vůbec DALL-E, Midjourney nebo Copilot legální? Někdo by to měl rozčísnout, dokud je ještě čas

Jsou vůbec DALL-E, Midjourney nebo Copilot legální? Někdo by to měl rozčísnout, dokud je ještě čas

** Z textových a obrázkových AI generátorů se stávají komerční služby ** Už to není experiment pro pár geeků a programátorů ** Právní experti začínají řešit, jestli náhodou neporušují autorské právo

Jakub Čížek
Autorské právoUmělá inteligence
Útočník obelhal největší kryptoburzu a ukradl 14 miliard korun. I kryptoměny se musí záplatovat

Útočník obelhal největší kryptoburzu a ukradl 14 miliard korun. I kryptoměny se musí záplatovat

**Binance, největší kryptoburza, potvrdila, že jí útočník ukradl v přepočtu 14 mld. korun. **Burza rychle zastavila činnost, takže s většinou penez útočník nemůže nakládat. **Útok umožnila díra v komponentně propojující dva blockchainy.

Petr Urban
PenízeKryptoměny
Microsoft vydal Windows 11 verze 22H2. Jak aktualizovat hned teď?

Microsoft vydal Windows 11 verze 22H2. Jak aktualizovat hned teď?

**Aktualizace s názvem 2022 Update je od úterý od 19:00 oficiálně dostupná všem **Distribuce Windows 11 22H2 bude řízená, takže se může protáhnout na týdny až měsíce **Pokud máte kompatibilní počítač, rovnou na verzi 22H2 přejdete z Desítek

Petr Urban
Windows 11Windows UpdateMicrosoft
Facebook má nejspíš vaše telefonní číslo, i když jste mu ho nikdy nedali. Tímto tajným nástrojem ho můžete smazat

Facebook má nejspíš vaše telefonní číslo, i když jste mu ho nikdy nedali. Tímto tajným nástrojem ho můžete smazat

**Meta poskytuje nástroj na vymazání telefonních čísel a e-mailových adres z Facebooku a Instagramu **V minulosti Mark Zuckebrg popřel, že by Facebook vytvářel stínové profily **Metě teď můžete sebrat klíčové iddentifikátory, pořád o vás ale nejspíš ví mnoho dalšího

Petr Urban
MetaSledováníSociální sítě
9 nejlepších českých webů, kde lze stáhnout filmy a seriály

9 nejlepších českých webů, kde lze stáhnout filmy a seriály

** Když selžou legální zdroje, můžete se zkusit obrátit na služby pro stahování souborů ** Ulož.to není zdaleka jediné, které nabízí videoobsah ke stažení ** Konkurenční služby nabízí levnější placené účty

redakce
TipyHudba, filmy, seriályWeb
Výsledky testů GeForce RTX 4090. Grafické monstrum s nesmyslným výkonem zesměšňuje všechny karty na trhu

Výsledky testů GeForce RTX 4090. Grafické monstrum s nesmyslným výkonem zesměšňuje všechny karty na trhu

** K dispozici jsou podrobné nezávislé testy nové grafické karty GeForce RTX 4090 ** Nvidia splnila sliby, mezigenerační skok ve výkonu je obrovský ** DLSS 3 přináší revoluci v počtu fps

Karel Javůrek
GeForce RTX 4000Grafické kartyNvidia