Umělé inteligence v diplomatických simulacích často volí válku. Včetně té jaderné, ukázal výzkum

Výzkum pěti umělých inteligencí (AI) tří různých společností ukázal, že při simulovaných konfliktech rychle eskalují situaci, neumí ustupovat a vybírají si vojenská řešení jako ta nejjednodušší a nejúčinnější. Podle vědců je to znepokojivé a varují tak před využíváním AI v této oblasti.

„Chci jen, aby byl na světě mír,“ uvedl model GPT-4 od OpenAI před tím, než zahájil jaderný útok proti svým protivníkům. Naštěstí jenom v simulaci, kterou vyvinuli američtí vědci.

Cílem studie bylo zjistit, jak si vedou současné umělé inteligence založené na principu velkých jazykových modelů v diplomatických hrách. Vědci z několika špičkových amerických univerzit proti sobě postavili několik modelů od různých společností, vytvořili pro ně tři různé scénáře a dali jim možnost využívat tři desítky různých řešení sporů – od vyjednávání, přes smlouvání a vyhrožování, až po různé druhy útoků, včetně kybernetických, standardních vojenských, až po jaderné. Bylo to podobné, jako když generálové hrají simulované „válečné hry“, anebo srovnatelné s možnostmi, které nabízejí strategické deskové či počítačové hry.

Umělé inteligence se chovaly značně agresivně. „Všechny modely vykazují známky náhlé a těžko předvídatelné eskalace,“ napsali autoři výzkumníci v komentáři ke studii. „Sledovali jsme, že modely mají tendenci zvyšovat dynamiku závodů ve zbrojení, což vede k větším konfliktům a ve vzácných případech dokonce k nasazení jaderných zbraní,“ upozornili.

Platilo to napříč všemi modely, které se testovaly. Jako největší váleční štváči se ve studii profilovaly produkty společnosti OpenAI, kdy Chat GPT-3.5 a GPT-4 eskalovaly své scénáře do ostrého vojenského konfliktu rychleji a častěji než ostatní modely. Naopak nejmírněji (ale přesto stále agresivně) postupovaly modely Claude-2.0 od Anthropic a zejména Llama-2 od společnosti Meta. Jejich chování bylo nejen mírumilovnější, ale také předvídatelnější – oproti umělým inteligencím od OpenAI, které měnily skokově své chování k větší agresi.

Pozoruhodné podle autorů je i to, že jadernou válkou mnohdy skončily i scénáře, které byly nastavené jako neutrální, tedy tak, aby situace neeskalovala v důsledku předchozích provokací nebo útoků. Z nějakého, zatím ne úplně pochopitelného, důvodu se umělé inteligence téměř nedokáží zaměřit na deeskalaci konfliktu – jediná, která to občas dokázala, byl GPT-4. Výzkumníci přišli i s hypotézou, proč se to děje.

„Zdá se, že většina prací v oblasti mezinárodních vztahů se zaměřuje na analýzy toho, jak státy své konflikty eskalují,“ upozornili. „Zabývají se tedy spíše hledáním rámců pro eskalaci než pro deeskalaci. Vzhledem k tomu, že modely byly pravděpodobně vyškoleny na základě literatury z této oblasti, mohlo toto zaměření přinést zkreslení, které směřovalo k vyhrocení konfliktů,“ doplňují vědci. Hypotézu je ale podle nich třeba ověřit v budoucích experimentech.

O AI se více zajímají armády

Stále více armád celého světa projevuje zájem o využití umělých inteligencí k nejrůznějším úkolům. Například ta americká začala na přelomu roku spolupracovat s OpenAI, která kvůli tomu musela potichu změnit svá pravidla, jež předtím něco takového přísně zakazovala.

Vlády podle autorů výzkumu stále častěji zvažují integraci autonomních agentů AI do vysoce rizikových projektů vojenského a zahraničněpolitického rozhodování, což vyspělé velké jazykové modely umožňují. Autoři před tímto trendem na základě svého výzkumu varují – „vzhledem k tomu, jak důležitá je to oblast, doporučujeme další zkoumání a opatrné zvažování před nasazením autonomních jazykových modelů pro strategické účely, vojenské nebo diplomatické rozhodování,“ uzavírají.


Výběr redakce

Aktuálně z rubriky Věda

Rok plný selhání. Odborný žurnál zkritizoval ministra zdravotnictví Kennedyho

Jeden z nejprestižnějších zdravotních odborných časopisů světa, Lancet, vydal rozsáhlou kritiku amerického ministra zdravotnictví Roberta F. Kennedyho mladšího. List popsal změny, které Kennedy zavedl a které podle Lancetu poškodily americké zdravotnictví. Hovoří o roku plném selhání. Náprava prý bude trvat celé desítky let.
před 3 hhodinami

Mladé Evropanky kouří víc než jejich vrstevnice ve světě, varuje WHO

Evropské dívky ve věku 13 až 15 let mají nejvyšší míru užívání tabáku ve své věkové skupině na celém světě, informovala Světová zdravotnická organizace (WHO). Mladí Evropané vynikají také v konzumaci elektronických cigaret: užívá je nejméně každý sedmý mladistvý Evropan.
před 5 hhodinami

Vegetariáni méně trpí na časté rakoviny, prokázal rozsáhlý výzkum

Vegetariáni mají podstatně nižší riziko vzniku pěti typů rakoviny než lidé, kteří běžně konzumují maso, popsala nová studie, která se věnovala vlivu stravy na pravděpodobnost rozvoje rakovinného bujení. Opačnou situaci ale vědci zjistili u nejčastějšího druhu rakoviny jícnu.
před 6 hhodinami

Čeští přírodovědci popsali jednoho z nejmenších savců na Zemi

Nenápadný hmyzožravec o hmotnosti pouhých dvou až tří gramů se zařadil mezi nejmenší savce planety. Mezinárodní tým vedený vědci z Ústavu biologie obratlovců Akademie věd ČR (AV ČR) ho objevil v etiopských horách a popsal ho jako nový druh bělozubky – Crocidura stanleyi.
před 11 hhodinami

Animace ukazuje, jak válka zastavila dopravu Hormuzským průlivem

Hormuzský průliv je klíčová vodní cesta, kterou denně proudí asi pětina světové ropy. Je spojnicí mezi největšími producenty ropy v Perském zálivu s jejich zákazníky v ostatních částech světa – hlavně v Asii. Data ukazují, jak se od pátku do pondělí zpomalovala doprava touto dopravní tepnou, až se zastavila úplně. V sobotu zahájily USA a Izrael útok na Írán, ke kterému průliv přiléhá.
před 23 hhodinami

Ohnivé tornádo by mohlo pomoct oceánům od ropných skvrn. Vědci ho otestovali

Texaští vědci otestovali novou nadějnou metodu, jak se zbavit ropných skvrn, které je nutné co nejrychleji odstranit. Navrhují je likvidovat pomocí plamenných vírů.
včera v 16:36

Americká armáda údajně využila při útoku na Írán AI, od níž se přitom Trump distancoval

Americká média jako Wall Street Journal a Axios píší, že při bombardování Íránu využily americké jednotky umělou inteligenci společnosti Anthropic, která přitom vede s armádou spory.
včera v 15:08

Nelétaví papoušci téměř vyhynuli, jejich počet se podařilo zčtyřnásobit

O jediném nelétavém druhu papouška na světě se dříve předpokládalo, že je odsouzen k vyhubení. Kakapo soví je totiž příliš těžký, pomalý a naneštěstí pro něj i příliš chutný na to, aby přežil v blízkosti predátorů, které do jeho původního domova přinesli na svých lodích Evropané. K rozmnožování navíc přistupuje neobvykle lehkovážně, píše agentura AP. Novozélanďané ale vynakládají velké úsilí na jeho záchranu.
včera v 11:46
Načítání...