„AI firmy jsou regulované míň než sendviče“. Na superinteligenci nejsou připravené

Analýza zaměřená na osm hlavních firem, které vytvářejí nejpokročilejší modely umělých inteligencí (AI), prokázala, že společnosti vůbec neřeší možnost ztráty kontroly nad takzvanými superinteligencemi, jež se snaží vytvářet. Jde o formu AI, která má ve všech ohledech překonat lidský intelekt.

Všechny velké společnosti, které vyvíjejí umělé inteligence, se snaží o co nejrychlejší vznik superinteligence. Žádná z nich ale není připravená na rizika, která jsou s tím spojená, tvrdí nová nezávislá analýza, která současně varuje, že žádná z těchto firem nemá reálně plány na prevenci katastrofických rizik umělé inteligence.

Zprávu vytvořila nezisková organizace Future of Life Institute (FLI). Zabývala se velkou osmičkou: americkými společnostmi Anthropic, OpenAI, Google DeepMind, xAI a Meta a čínskými subjekty DeepSeek, Alibaba Cloud a Z.ai. Jde o hlavní hráče na poli umělých inteligencí, kteří mají v tomto oboru největší potenciál, možnosti i vliv. Podle analýzy tyto společnosti nesplňují ani své vlastní závazky v oblasti bezpečnosti. „Plynou z toho katastrofální rizika,“ varují autoři práce.

Zpravodajský web Euronews upozorňuje, že tato zpráva přichází v době, kdy společnosti zabývající se AI čelí soudním sporům a obviněním, protože jejich chatboty údajně způsobují psychickou újmu – mimo jiné tím, že fungují jako „koučové sebevražd“. A nově také přibývá zpráv o masivních a velmi účinných kyberútocích, které pachatelé provedli právě s využitím AI.

Jako by žádná rizika neexistovala

Zpráva popsala u celé osmičky lídrů na poli AI zásadní nedostatek důvěryhodných strategií, které by předcházely katastrofálnímu zneužití nebo ztrátě kontroly nad nástroji umělé inteligence. Místo bezpečnosti totiž všechny firmy usilují o prvenství ve vytvoření všeobecné umělé inteligence (AGI), která by se měla změnit v už zmíněnou superinteligenci.

Žádná ze společností si podle analýzy nevytvořila testovatelný plán pro udržení lidské kontroly nad vysoce výkonnými systémy AI. Stuart Russell, profesor informatiky na Kalifornské univerzitě v Berkeley, uvedl, že společnosti zabývající se AI tvrdí, že mohou vyvinout nadlidskou AI – ale současně ani jedina z nich nemá promyšlené, jak by zabránila ztrátě lidské kontroly nad takovými potenciálně všemocnými systémy.

Podle Russella by toto omezení rizika mělo být podobné jako třeba u jaderných elektráren. Tam je hrozba významné nehody stanovovaná přibližně na jedna ku sto milionům. Jenže velcí vývojáři AI přiznávají, že hrozba ztráty kontroly nad superinteligencí je jedna ku deseti, jedna ku pěti – nebo dokonce jedna ku třem. Navíc jde jen o „výstřely od boku“, ve skutečnosti nejsou tyto odhady rizika opřené o žádné hlubší výpočty.

Špatní a ještě horší

Špatně dopadla v tomto výzkumu celá „velká osma“ – ale některé firmy z ní se ukázaly jako ještě horší než ty zbývající. Relativně nejlépe dopadly společnosti Anthropic, OpenAI a Google DeepMind, které jsou přinejlepším alespoň transparentní.

Zbývajících pět společností dopadlo víceméně podobně špatně. Všech osm nicméně prý udělalo znatelný pokrok správným směrem, tedy k větší opatrnosti.

Podle zástupce FLI, fyzika Maxe Tengmarka, se AI vyvíjí v posledních letech nečekaně rychle. Ještě nedávno se pokládal za horizont vzniku umělé superinteligence začátek dvaadvacátého století, v současné době se už mluví o příštích třech až pěti letech. „AI je přitom v USA stále méně regulovaná než sendviče a ve (americké) vládě pokračuje lobbing proti závazným bezpečnostním normám,“ řekl pro Euronews tento vědec, který se fenoménu AI věnuje řadu let.

Právě „jeho“ institut FLI se snaží odhalovat a vysvětlovat možná rizika, která by rychlý příchod neregulované a nekontrolované superinteligence přinesl. Ta se řadí do více typů scénářů – od masové nezaměstnanosti až po téměř okamžitý zánik celého lidského druhu. Naposledy přišel FLI s peticí proti výzkumu superinteligence, kterou podepsala spousta světových osobností s rozmanitými politickými názory, které se jinak nejsou schopné shodnout v podstatě na ničem – nechyběli signatáři z řad českých expertů.

Výběr redakce

Aktuálně z rubriky Věda

Vlna veder je bezprecedentní. Před půl stoletím by nebyla možná, vinu nese změna klimatu

Téměř v polovině zkoumaných evropských měst už padly absolutní teplotní rekordy, anebo se tam očekává, že padnou. Podle nové analýzy má hlavní roli při současné vlně veder změna klimatu, další možné faktory vědci z Imperial College v Londýně vyloučili.
před 1 hhodinou

Teplotní rekordy hlásí dvacítka stanic na Moravě. Sledujte na mapě, jak přibývají

Česko v posledních dnech sevřely mimořádně vysoké teploty. V pátek padl první teplotní rekord už po jedenácté hodině dopoledne, a to na stanici Rýmařov, kde naměřili 30,3 stupně Celsia, což je o desetinu víc, než dosavadní nejvyšší hodnota z roku 1965. Ještě před polednem naměřili další na stanici Luká a vyrovnání loňského rekordu 30,5 stupně Celsia v Protivanově. Do 13. hodiny padly na dvacítce stanic na Moravě.
11:36Aktualizovánopřed 1 hhodinou

Zemřela historička Milena Flodrová, spoluzakladatelka Encyklopedie dějin Brna

V 91 letech ve čtvrtek zemřela historička Milena Flodrová, spoluzakladatelka internetové Encyklopedie dějin Brna. Patřila k nejvýznamnějším znalkyním historie moravské metropole. O jejím místopisu, osobnostech a památkách publikovala desítky knih i odborných článků.
před 1 hhodinou

Dusno jako v prádelně je stále častější

Klimatické změny způsobené člověkem jsou v současnosti hlavním faktorem nebezpečného vlhkého horka po celém světě, což zvyšuje zdravotní rizika pro stovky milionů lidí.
před 2 hhodinami

Nakažená základna přivedla americké letectvo zpět k očkování proti chřipce

V dubnu přestali američtí vojáci mít povinnost nechat se očkovat proti sezonní chřipce. Stačily dva měsíce a jedna základna letectva, kde virus vyřadil přes dvě stovky vojáků, aby letectvo tuto povinnost částečně vrátilo zpět.
před 3 hhodinami

Kvůli vzácným motýlům chtějí ochranáři vykoupit lokalitu v Českém středohoří

Ochránci přírody chtějí vykoupit více než tři hektary pozemků v Českém středohoří. Jde o lokalitu nad obcí Chouč nedaleko Bíliny. Důvodem je ochrana vzácných druhů denních i nočních motýlů a rostlin, které jsou na zdejší prostředí vázané. Podle ochránců je území cenné především tím, že zde přežívají druhy motýlů, které z jiných částí Čech a Moravy postupně mizí.
před 6 hhodinami

Novými drony dokáže Ukrajina útočit hluboko za frontou

Ukrajině se podařilo v posledním půlroce nasadit na frontě nové drony, jejichž schopnosti překvapit ruskou obranu zásadně vzrostly. Létají tak daleko a přesně, jako to dříve uměly jen drahé řízené střely. Drony se staly klíčovou součástí konfliktu, který před více než čtyřmi roky vyvolalo svou plnohodnotnou invazí Rusko.
před 21 hhodinami

Tak intenzivní otřesy nezasáhly oblast Venezuely sto let

Otřesy, které postihly Venezuelu, jsou podle seismologů silnější, než je v této oblasti obvyklé. Doposud není zcela jasné, proč přesáhly magnitudo 7. Možná šlo o část nějakého doposud neznámého cyklu.
včera v 13:44
Načítání...