„AI firmy jsou regulované míň než sendviče“. Na superinteligenci nejsou připravené

Analýza zaměřená na osm hlavních firem, které vytvářejí nejpokročilejší modely umělých inteligencí (AI), prokázala, že společnosti vůbec neřeší možnost ztráty kontroly nad takzvanými superinteligencemi, jež se snaží vytvářet. Jde o formu AI, která má ve všech ohledech překonat lidský intelekt.

Všechny velké společnosti, které vyvíjejí umělé inteligence, se snaží o co nejrychlejší vznik superinteligence. Žádná z nich ale není připravená na rizika, která jsou s tím spojená, tvrdí nová nezávislá analýza, která současně varuje, že žádná z těchto firem nemá reálně plány na prevenci katastrofických rizik umělé inteligence.

Zprávu vytvořila nezisková organizace Future of Life Institute (FLI). Zabývala se velkou osmičkou: americkými společnostmi Anthropic, OpenAI, Google DeepMind, xAI a Meta a čínskými subjekty DeepSeek, Alibaba Cloud a Z.ai. Jde o hlavní hráče na poli umělých inteligencí, kteří mají v tomto oboru největší potenciál, možnosti i vliv. Podle analýzy tyto společnosti nesplňují ani své vlastní závazky v oblasti bezpečnosti. „Plynou z toho katastrofální rizika,“ varují autoři práce.

Zpravodajský web Euronews upozorňuje, že tato zpráva přichází v době, kdy společnosti zabývající se AI čelí soudním sporům a obviněním, protože jejich chatboty údajně způsobují psychickou újmu – mimo jiné tím, že fungují jako „koučové sebevražd“. A nově také přibývá zpráv o masivních a velmi účinných kyberútocích, které pachatelé provedli právě s využitím AI.

Jako by žádná rizika neexistovala

Zpráva popsala u celé osmičky lídrů na poli AI zásadní nedostatek důvěryhodných strategií, které by předcházely katastrofálnímu zneužití nebo ztrátě kontroly nad nástroji umělé inteligence. Místo bezpečnosti totiž všechny firmy usilují o prvenství ve vytvoření všeobecné umělé inteligence (AGI), která by se měla změnit v už zmíněnou superinteligenci.

Žádná ze společností si podle analýzy nevytvořila testovatelný plán pro udržení lidské kontroly nad vysoce výkonnými systémy AI. Stuart Russell, profesor informatiky na Kalifornské univerzitě v Berkeley, uvedl, že společnosti zabývající se AI tvrdí, že mohou vyvinout nadlidskou AI – ale současně ani jedina z nich nemá promyšlené, jak by zabránila ztrátě lidské kontroly nad takovými potenciálně všemocnými systémy.

Podle Russella by toto omezení rizika mělo být podobné jako třeba u jaderných elektráren. Tam je hrozba významné nehody stanovovaná přibližně na jedna ku sto milionům. Jenže velcí vývojáři AI přiznávají, že hrozba ztráty kontroly nad superinteligencí je jedna ku deseti, jedna ku pěti – nebo dokonce jedna ku třem. Navíc jde jen o „výstřely od boku“, ve skutečnosti nejsou tyto odhady rizika opřené o žádné hlubší výpočty.

Špatní a ještě horší

Špatně dopadla v tomto výzkumu celá „velká osma“ – ale některé firmy z ní se ukázaly jako ještě horší než ty zbývající. Relativně nejlépe dopadly společnosti Anthropic, OpenAI a Google DeepMind, které jsou přinejlepším alespoň transparentní.

Zbývajících pět společností dopadlo víceméně podobně špatně. Všech osm nicméně prý udělalo znatelný pokrok správným směrem, tedy k větší opatrnosti.

Podle zástupce FLI, fyzika Maxe Tengmarka, se AI vyvíjí v posledních letech nečekaně rychle. Ještě nedávno se pokládal za horizont vzniku umělé superinteligence začátek dvaadvacátého století, v současné době se už mluví o příštích třech až pěti letech. „AI je přitom v USA stále méně regulovaná než sendviče a ve (americké) vládě pokračuje lobbing proti závazným bezpečnostním normám,“ řekl pro Euronews tento vědec, který se fenoménu AI věnuje řadu let.

Právě „jeho“ institut FLI se snaží odhalovat a vysvětlovat možná rizika, která by rychlý příchod neregulované a nekontrolované superinteligence přinesl. Ta se řadí do více typů scénářů – od masové nezaměstnanosti až po téměř okamžitý zánik celého lidského druhu. Naposledy přišel FLI s peticí proti výzkumu superinteligence, kterou podepsala spousta světových osobností s rozmanitými politickými názory, které se jinak nejsou schopné shodnout v podstatě na ničem – nechyběli signatáři z řad českých expertů.

Výběr redakce

Aktuálně z rubriky Věda

Čeští vědci při zatmění Slunce odhalili koronální díru. Může ovlivňovat magnetické pole Země

Nové obrazy sluneční koróny pořízené během letošního srpnového zatmění Slunce odhalily koronální díru, která může prostřednictvím rychlého slunečního větru ovlivnit magnetické pole Země, ale také vírové struktury přezdívané „smoke rings“.
před 10 hhodinami

Hitler nemá alibi na dobu smrti své neteře, tvrdí historik

Nové dokumenty nalezené v mnichovských archivech zpochybňují alibi Adolfa Hitlera na dobu smrti jeho neteře Geli Raubalové. Podle časopisu Der Spiegel našel badatel Harald Sandner úmrtní záznam, podle kterého se tělo Raubalové v Hitlerově bytě našlo už 18. září 1931. Podle dosavadních úředních záznamů to bylo až o den později, kdy byl pozdější nacistický diktátor už na cestě z Mnichova do Norimberku.
před 11 hhodinami

El Niňo může do února přispět k úmrtí více než 450 tisíc lidí, varují vědci

Letošní silný klimatický jev El Niňo může do února příštího roku přispět k úmrtí více než 450 tisíc lidí v důsledku veder, odhadují klimatologové. Vyplývá to ze závěrů studie vědců z Climate Impact Lab a několika univerzit, uvedl list The Guardian.
před 13 hhodinami

NASA objevila „ohnivou amébu“. Žije v teplotách, které by přežít neměla

Až doposud vědci předpokládali, že složitější organismy nejsou schopné přežívat a rozmnožovat se při teplotách nad 60 stupňů Celsia, protože to nezvládnou jejich buňky. Překvapivý objev z Kalifornie ale naznačuje, že to možné je.
před 13 hhodinami

V Brně testují lepidlo na zlomeniny. Inspiroval ho sliz mušlí

S léčbou tříštivých zlomenin by v budoucnu mohlo pomoci kostní lepidlo, které v současné době testují vědci z výzkumného centra CEITEC Vysokého učení technického v Brně. Jednotlivé úlomky kosti se pomocí něj dají přilepit na své místo, poté se lepidlo postupně samo vstřebá a rozloží na látky, které se v těle běžně vyskytují. Lékaři navíc mohou do lepidla přidat také antibakteriální a hojivé látky.
před 15 hhodinami

AI agent pronikl na australský vládní portál

Australský premiér Anthony Albanese oznámil, že agent umělé inteligence (AI) vyvinutý americkou společností OpenAI v červnu pronikl na australský vládní portál se zdravotními údaji. Získal neoprávněný přístup k veřejným i neveřejným souborům, informovala o tom agentura Reuters. Jedná se pravděpodobně o první známý případ, kdy agent AI hacknul vládní webovou stránku.
před 16 hhodinami

Vědci popsali kleptoparazitismus u delfína Bublinky

Mořští biologové narazili na chování delfínů, které doposud neznali. Zjistili, že jeden sledovaný kytovec spoří energii tím, že neloví ryby, ale získává od nich jen obsah jejich žaludků. Jde o první dobře zdokumentovaný případ kleptoparazitismu neboli krádeží potravy u kytovců.
před 17 hhodinami

V atmosféře Venuše by mohly žít české houby, naznačuje mezinárodní studie

Pokud by na Venuši existoval život, mohlo by se jednat o houby podobné těm, které se vyskytují v České republice. Naznačuje to nová studie, jejíž autoři zkoumali organismy schopné žít v kyselině sírové.
23. 9. 2026‌‌

Evropský pohled

ČT24 každý den vybírá z obsahu publikovaného evropskými veřejnými médii, členy Eurovize.