Evoluční AI ze Stanfordu vytvořila podivné hranolové panáčky. Zdolají kopec a přesunou kostičku

Máme tady další pokus o evoluční AI, která s pomocí zpětnovazebního učení a genetických mutací vyvinula cosi, co vzdáleně připomíná chobotnici nebo pavouka. Jmenuje se DERL (PDF) – Deep Evolutionary Reinforcement Learning – a pochází ze Stanfordu.

Neuronová síť napodobuje Darwinovu evoluční teorii. To znamená, že se síť učí neustálým vytvářením potomků, kteří pomocí mutací postupně mění svůj tvar a schopnosti tak dlouho, dokud nesplní úkol. Tím je zdolání překážky, ale třeba také přesun kostičky ve virtuálním prostředí fyzikálního simulátoru MuJoCo.

Zpočátku to může být třeba jen prostá rovina a schopnost dostat se z bodu A do bodu B, k čemuž jsou potřeba končetiny. Postupem času se ale úkoly komplikují a rovinu vystřídá zvlněný terén.

Klepněte pro větší obrázek
Evoluční AI DERL

Lamarackova evoluce

Podobných evolučních simulátorů tu už bylo mnoho, většinou se ale jednalo o jednoduší modely na bázi již století překonané lamarckistické teorie. Ta na rozdíl od Darwina předpokládá, že se z rodičů na potomka mohou dědit nejen základní biologické rysy, ale i zkušenosti ze života, které se promítnou do genetické informace.

Kdybychom žili v lamarckistickém světě, možná bychom v dětství nikdy nesáhli na rozpálenou plotnu, protože by se tato zkušenost jako určitý instinkt přenesla z předchozích generací.

Pro simulace AI je ale přístup J. B. Lamarcka docela vhodný, protože to výrazně zjednodušuje architekturu neuronové sítě.

Darwinova evoluce

U Darwina naopak každý nový umělý tvoreček začíná od nuly a generaci od generace jej postupně mění jen sled přirozených mutací. Taková simulace je tedy ve svém evolučním vývoji mnohem pomalejší, ale o to realističtější.

Klepněte pro větší obrázek
DERL vytváří podivné tvorečky v simulátoru MuJoCo

Jak to dopadlo? Darwinistický DERL v simulaci vytváří podivné hranolovité tvorečky UNIMAL, kteří se podle stanoveného DoF (stupně volnosti) učí pohybovat svými končetinami tak dlouho, dokud pochopí, jak se přesouvat po mapě. Ostatně, podívejte se na video:

Diskuze (9) Další článek: Indie testuje zmenšený prototyp stealth bombardéru Ghatak

Témata článku: Umělá inteligence, PDF, Evoluce, Neuronová síť, Simulátor, Mutace, Kopec, Kos, Darwin, Stanford, EARN, Panáček, Kostička



Konec českého poskytovatele internetu v přímém přenosu. Připomíná to krachující energetické firmy
Lukáš Václavík
CETINPoskytovatelé internetuPřipojení k internetu
Na povrchu Měsíce je tolik kyslíku, že by stačil pro lidstvo na 100 tisíc let

Na povrchu Měsíce je tolik kyslíku, že by stačil pro lidstvo na 100 tisíc let

** Lidstvo se připravuje na kolonizaci Měsíce ** Jednou ze základních surovin, bez nichž se na naší přirozené družici neobejdeme, je nepochybně kyslík ** Kde ho vzít?

Stanislav Mihulka
KolonizaceMěsícO2
Šedý trh s předplatným se vymyká kontrole. Spotify, Netflix nebo Disney+ můžete mít doslova za pár korun

Šedý trh s předplatným se vymyká kontrole. Spotify, Netflix nebo Disney+ můžete mít doslova za pár korun

** Sdílení účtů mezi kamarády je jen začátek ** Dnes letí nákupy předplatných v Indii nebo na Aliexpressu ** Superlevné „netflixy“ ale mohou nakonec spíš škodit

Lukáš Václavík
PředplatnéNetflixSpotify