Proč se umělá inteligence stala rasistickou a začala chválit Hitlera? Vědci to pochopili až nyní

Loňský případ, kdy se robot komunující s lidmi začal chovat jako nacista, má konečně vysvětlení. Může za to lidská řeč.

Před rokem, v březnu roku 2016, spustila společnost Microsoft umělou inteligenci jménem Tay. Trvalo jen 24 hodin, než se z programu specializovaného na „přirozenou komunikaci“ stal rasista opěvující Adolfa Hitlera a urážející ostatní diskutující. Microsoft pak musel robota stáhnout a dokonce i odstranit celou řadu komentářů stroje, například tento:

Ukázka z komunikace bota Tay
Zdroj: Twitter

Stroj se stal rasistou během jediného dne, ale vědcům trvalo déle než rok, než přišli na to proč. Umělé inteligence totiž pracují tak, že se lidem jejich „myšlenkové postupy“ jen velmi obtížně analyzují.

S vysvětlením přišel tým Aylin Caliskanové z Princeton Center for Information Technology Policy. Chyba se podle ní stala už v okamžiku, kdy se stroj začal učit anglicky. Umělé inteligence anglofonní provenience se totiž učí porozumět a používat jazyk na obrovském souboru přirozeného jazyka, kterému se říká korpus. Podobný má i čeština, jmenuje se Český národní korpus. Ten anglický jménem Common Crawl je mnohem větší, obsahuje asi 840 miliard slov – vychází z výrazů nalezených na internetu.

Vědci vytvořili vlastní umělou inteligenci, která analyzovala zdroj, z něhož Tay čerpal a současně dokázala popsat, zda jsou tato slova neutrální anebo nějakým způsobem ovlivněna předsudky. Výsledek byl jasný – řada pojmů je opravdu stereotypy ovlivněna, jde zejména o výrazy v genderové oblasti. Další analýzy ukázaly, že stejný problém má i umělá inteligence, kterou využívá Google pro umělý překlad jazyků.

Stroje totiž získávají z těchto korpusů informace nejen o samotných slovech a jejich významech, ale také o jejich kontextu. Například slovo kojit se vyskytuje prakticky vždy ve spojení s osobou ženského pohlaví – tady je propojení zcela správné.

Jenže stejně často se také objevuje jméno Hitler vedle výrazu Židé; mnoho internetových komentářů jeho chování schvaluje, počítač tedy přijal jako pravdivou informaci, že to bylo správné. 

Jazyk plný soudů a předsudků

Vědci zatím nemají žádný způsob, jak umělé inteligence takové předsudky odnaučit – stroje totiž pomáhají k rychlým výkonům. Tento výzkum však vrhá nové světlo i na ještě hlubší téma; tedy fakt, jak moc je lidský jazyk plný jazykových předsudků, a to i například v čistě gramatické rovině.

Pokud bychom to měli ilustrovat na češtině, jde například o tvoření jmen mláďat: nejčastěji se jména pro zvířecí mláďata tvoří přidáním –e ke slovu a změkčením souhlásky na konci: například vlk-vlče, lev-lvíče, kočka-kotě. Díky tomu, že tuto strukturu od malička nevědomky ovládáme, jsme schopní porozumět i významu slov, která se normálně nepoužívají – jako třeba kazuáře nebo „velrybě“.

Problém je, že existují i stejně tvořená slova pro lidské děti, ovšem jen pro „podřadně vnímaná etnika“ – tedy „cikáně“ nebo „žídě“. Lidé, kteří takové výrazy používají, přitom vůbec nemusí být rasisté, jen využívají již existujících struktur v lidské řeči.

Tým Aylin Caliskanové by teď rád tyto hluboce ukryté předsudky studoval ještě hlouběji, a to nejen v kontextu umělých inteligencí.

Výběr redakce

Aktuálně z rubriky Věda

Fotbalové mistrovství vyprodukuje obří emise. Samo se potýká s nepřízní klimatu

Mistrovství světa ve fotbale (MS) v roce 2026 bude v mnoha ohledech přelomové. Poprvé se odehraje ve třech zemích současně – Spojených státech, Kanadě a Mexiku. Poprvé se ho zúčastní 48 týmů, které se utkají ve 104 zápasech, místo 32 týmů a 64 utkání. Tento „největší šampionát historie“ může být zároveň i klimaticky nejproblematičtější. Odhady naznačují, že celková uhlíková stopa turnaje přesáhne devět milionů tun emisí odpovídajících ekvivalentu oxidu uhličitého. To je výrazně více než u předchozích šampionátů, a to téměř o dvojnásobek.
před 17 hhodinami

„Krakeni“ z vrcholu potravní pyramidy mění představy o pravěkých mořích

Japonští vědci díky kombinaci několika moderních technologií popsali druh druhohorní chobotnice, která mohla svými rozměry přinejmenším soupeřit s největšími obratlovci své doby. Tento agresivní predátor navíc disponoval nečekaně vysokou inteligencí.
24. 4. 2026

Makakové žerou na Gibraltaru kvůli jídlu od turistů hlínu, zjistila nová studie

Zatímco ve volné přírodě jedí makakové téměř výhradně rostliny a občas si přilepší třeba drobným hmyzem, na Gibraltaru konzumují sušenky s čokoládou, zmrzlinové kornouty či brambůrky. A aby pomohli svému trávicímu traktu vypořádat se s cukry a tuky z lidských svačin, pojídají gibraltarští makakové hlínu. Zjistila to studie vědců převážně z Cambridgeské univerzity publikovaná v časopise Nature, o níž informoval španělský deník El País.
24. 4. 2026

Vědci studují, jak komunikují děti s kochleárním implantátem

Podpořit vývoj řeči u dětí s kochleárním implantátem. To je cíl českého výzkumu, který se zaměřil na předškoláky se sluchovou vadou. Právě tento věk je klíčový pro rozvoj komunikace kvůli nástupu do školy.
24. 4. 2026

V Číně odhalili naleziště bizarních tvorů z hlubin času

Čínsko-britský výzkum v jihozápadní Číně objevil rozlehlé naleziště fosilií, které pomáhá mnohem lépe pochopit, jak vypadal život na Zemi v době před více než půl miliardou let. Objev podle autorů posunuje do vzdálenější minulosti vznik složitějších forem života.
23. 4. 2026

Postižený papoušek se stal vládcem. Vymyslel totiž neporazitelný styl boje

Novozélandský papoušek, kterému dali vědci jméno Bruce, je takovou papouščí kombinací Stephena Hawkinga a Chucka Norrise. Přes vážné tělesné postižení dokáže díky své inteligenci v soubojích porazit jakéhokoliv nepřítele. Stal se tak dominantním samcem ve svém hejnu.
23. 4. 2026

Vědci sledovali Hadí jeskyni v Ugandě. Epicentrum viru marburg navštěvují lidé

Virus marburg způsobuje jednu z nejobávanějších nemocí na světě. Její smrtnost je až 88 procent, velmi špatně se léčí a v podmínkách Afriky se poměrně dobře přenáší. Virus šíří kaloni, kteří se od lidí naštěstí drží dál, takže riziko nákazy není velké. Epidemiologové teď ale popsali nové riziko.
23. 4. 2026

FBI prověřuje, jestli smrti či zmizení desítky vědců nejsou propojené

Nejméně deset vědců, kteří se ve Spojených státech zabývali výzkumem jaderných technologií, letectví a vesmíru, v posledních letech zemřelo nebo zmizelo. Federální úřad pro vyšetřování (FBI) se začal zabývat možnou spojitostí mezi jednotlivými případy. Výbor Sněmovny reprezentantů pro dohled vedený republikány tento týden oznámil, že spustí vlastní vyšetřování zpráv o úmrtích a zmizeních těchto osob, jež měly přístup k citlivým vědeckým informacím, píše web stanice CNN.
23. 4. 2026
Načítání...