„AI firmy jsou regulované míň než sendviče“. Na superinteligenci nejsou připravené

Analýza zaměřená na osm hlavních firem, které vytvářejí nejpokročilejší modely umělých inteligencí (AI), prokázala, že společnosti vůbec neřeší možnost ztráty kontroly nad takzvanými superinteligencemi, jež se snaží vytvářet. Jde o formu AI, která má ve všech ohledech překonat lidský intelekt.

Všechny velké společnosti, které vyvíjejí umělé inteligence, se snaží o co nejrychlejší vznik superinteligence. Žádná z nich ale není připravená na rizika, která jsou s tím spojená, tvrdí nová nezávislá analýza, která současně varuje, že žádná z těchto firem nemá reálně plány na prevenci katastrofických rizik umělé inteligence.

Zprávu vytvořila nezisková organizace Future of Life Institute (FLI). Zabývala se velkou osmičkou: americkými společnostmi Anthropic, OpenAI, Google DeepMind, xAI a Meta a čínskými subjekty DeepSeek, Alibaba Cloud a Z.ai. Jde o hlavní hráče na poli umělých inteligencí, kteří mají v tomto oboru největší potenciál, možnosti i vliv. Podle analýzy tyto společnosti nesplňují ani své vlastní závazky v oblasti bezpečnosti. „Plynou z toho katastrofální rizika,“ varují autoři práce.

Zpravodajský web Euronews upozorňuje, že tato zpráva přichází v době, kdy společnosti zabývající se AI čelí soudním sporům a obviněním, protože jejich chatboty údajně způsobují psychickou újmu – mimo jiné tím, že fungují jako „koučové sebevražd“. A nově také přibývá zpráv o masivních a velmi účinných kyberútocích, které pachatelé provedli právě s využitím AI.

Jako by žádná rizika neexistovala

Zpráva popsala u celé osmičky lídrů na poli AI zásadní nedostatek důvěryhodných strategií, které by předcházely katastrofálnímu zneužití nebo ztrátě kontroly nad nástroji umělé inteligence. Místo bezpečnosti totiž všechny firmy usilují o prvenství ve vytvoření všeobecné umělé inteligence (AGI), která by se měla změnit v už zmíněnou superinteligenci.

Žádná ze společností si podle analýzy nevytvořila testovatelný plán pro udržení lidské kontroly nad vysoce výkonnými systémy AI. Stuart Russell, profesor informatiky na Kalifornské univerzitě v Berkeley, uvedl, že společnosti zabývající se AI tvrdí, že mohou vyvinout nadlidskou AI – ale současně ani jedina z nich nemá promyšlené, jak by zabránila ztrátě lidské kontroly nad takovými potenciálně všemocnými systémy.

Podle Russella by toto omezení rizika mělo být podobné jako třeba u jaderných elektráren. Tam je hrozba významné nehody stanovovaná přibližně na jedna ku sto milionům. Jenže velcí vývojáři AI přiznávají, že hrozba ztráty kontroly nad superinteligencí je jedna ku deseti, jedna ku pěti – nebo dokonce jedna ku třem. Navíc jde jen o „výstřely od boku“, ve skutečnosti nejsou tyto odhady rizika opřené o žádné hlubší výpočty.

Špatní a ještě horší

Špatně dopadla v tomto výzkumu celá „velká osma“ – ale některé firmy z ní se ukázaly jako ještě horší než ty zbývající. Relativně nejlépe dopadly společnosti Anthropic, OpenAI a Google DeepMind, které jsou přinejlepším alespoň transparentní.

Zbývajících pět společností dopadlo víceméně podobně špatně. Všech osm nicméně prý udělalo znatelný pokrok správným směrem, tedy k větší opatrnosti.

Podle zástupce FLI, fyzika Maxe Tengmarka, se AI vyvíjí v posledních letech nečekaně rychle. Ještě nedávno se pokládal za horizont vzniku umělé superinteligence začátek dvaadvacátého století, v současné době se už mluví o příštích třech až pěti letech. „AI je přitom v USA stále méně regulovaná než sendviče a ve (americké) vládě pokračuje lobbing proti závazným bezpečnostním normám,“ řekl pro Euronews tento vědec, který se fenoménu AI věnuje řadu let.

Právě „jeho“ institut FLI se snaží odhalovat a vysvětlovat možná rizika, která by rychlý příchod neregulované a nekontrolované superinteligence přinesl. Ta se řadí do více typů scénářů – od masové nezaměstnanosti až po téměř okamžitý zánik celého lidského druhu. Naposledy přišel FLI s peticí proti výzkumu superinteligence, kterou podepsala spousta světových osobností s rozmanitými politickými názory, které se jinak nejsou schopné shodnout v podstatě na ničem – nechyběli signatáři z řad českých expertů.

Výběr redakce

Aktuálně z rubriky Věda

Rakovina mozku nemusí začínat bolestí hlavy, upozorňuje lékařka

Rakovinou mozku sice v Česku onemocní ročně „jen“ několik stovek lidí, ale je to přes pokrok v medicíně stále velmi ničivá diagnóza. Pomáhají nejen nové léky, ale také lepší diagnostika a také práce s pacienty.
před 12 hhodinami

„Jsme krávy budoucnosti,“ míní historik Harari. Varuje před AI migranty

Umělé inteligence mění zásadním způsobem svět, upozornil v pořadu Hyde Park Civilizace historik a intelektuál Yuval Noah Harari. Západní svět se podle něj sice obává migrantů ze zemí třetího světa, ale ve skutečnosti za mnohem nebezpečnější označil mnohem cizejší AI migranty, kteří doopravdy berou lidem práci.
před 15 hhodinami

Japonsko vyšle sondu na Phobos

Japonská agentura pro výzkum vesmíru (JAXA) se tento týden chystá vyslat sondu na jeden ze dvou měsíců Marsu – Phobos. Slibuje si od toho poznatky o vzniku obou měsíčních souputníků této planety. Mise, která má trvat pět let, by také mohla pomoci objasnit původ života ve Sluneční soustavě, napsala agentura AP.
před 17 hhodinami

Nástup bakterií odolných proti antibiotikům je pomalá pandemie, říká přední expert

Odolnost bakterií proti antibiotikům představuje rostoucí hrozbu pro globální zdraví, protože snižuje účinnost léčby zachraňující životy a současně vystavuje lidi zvýšenému riziku, ať už v souvislosti s běžnými infekcemi, nebo s rutinními lékařskými zákroky, varuje Světová zdravotnická organizace (WHO). Jak vážný je to problém a jaké možnosti má věda k dispozici, vysvětluje přední expert na toto téma.
před 18 hhodinami

Ničení amazonského pralesa v Brazílii kleslo na minimum za skoro čtyřicet let

Rozsah ničení amazonského pralesa v Brazílii klesl v uplynulých dvanácti měsících na minimum od začátku měření v roce 1988. Uvedl to brazilský ústav INPE, který tyto údaje celou dobu shromažďuje. Meziročně plocha zničeného amazonského pralesa v Brazílii klesla o 42 procent.
před 19 hhodinami

Plzeňští lékaři využívají unikátní metodu k přesnější diagnostice rakoviny slinivky

Fakultní nemocnice Plzeň oznámila světové prvenství v onkologické diagnostice. Začala kombinovat radiofarmakum 68Ga-Trivehexin s vyšetřením PET/MRI, které spojuje pozitronovou emisní tomografii a magnetickou rezonanci. Nový postup umožňuje přesněji zobrazit nádor a odlišit ho od okolní zánětlivé tkáně.
před 21 hhodinami

Napoleonův tajný dopis z roku 1809 dešifrovala AI za pár hodin

Když francouzský císař Napoleon Bonaparte nařídil sepsat válečný dopis v šifře, vznikla hádanka, která byla nevyřešená více než 200 let. Dokud ji umělá inteligence (AI) nerozluštila během několika hodin. Ať už jde o dešifrování korespondence nebo o to, aby promluvily starověké ohořelé papyry, AI otevírá nové cesty pro historický výzkum, napsala agentura AFP.
17. 10. 2026‌‌

Nejstarší vražda? Archeologové popsali neandertálce zabitého před 75 tisíci lety

Kruhový otvor v lopatce neandertálce, jehož kosti vědci našli v jeskyni v iráckém Kurdistánu, může být nejstarším známým příkladem úmyslného zabití člověka jiným člověkem. Podle nové studie se to stalo asi před 75 tisíci lety.
17. 10. 2026‌‌

Evropský pohled

ČT24 každý den vybírá z obsahu publikovaného evropskými veřejnými médii, členy Eurovize.