Umělé inteligence v diplomatických simulacích často volí válku. Včetně té jaderné, ukázal výzkum

Výzkum pěti umělých inteligencí (AI) tří různých společností ukázal, že při simulovaných konfliktech rychle eskalují situaci, neumí ustupovat a vybírají si vojenská řešení jako ta nejjednodušší a nejúčinnější. Podle vědců je to znepokojivé a varují tak před využíváním AI v této oblasti.

„Chci jen, aby byl na světě mír,“ uvedl model GPT-4 od OpenAI před tím, než zahájil jaderný útok proti svým protivníkům. Naštěstí jenom v simulaci, kterou vyvinuli američtí vědci.

Cílem studie bylo zjistit, jak si vedou současné umělé inteligence založené na principu velkých jazykových modelů v diplomatických hrách. Vědci z několika špičkových amerických univerzit proti sobě postavili několik modelů od různých společností, vytvořili pro ně tři různé scénáře a dali jim možnost využívat tři desítky různých řešení sporů – od vyjednávání, přes smlouvání a vyhrožování, až po různé druhy útoků, včetně kybernetických, standardních vojenských, až po jaderné. Bylo to podobné, jako když generálové hrají simulované „válečné hry“, anebo srovnatelné s možnostmi, které nabízejí strategické deskové či počítačové hry.

Umělé inteligence se chovaly značně agresivně. „Všechny modely vykazují známky náhlé a těžko předvídatelné eskalace,“ napsali autoři výzkumníci v komentáři ke studii. „Sledovali jsme, že modely mají tendenci zvyšovat dynamiku závodů ve zbrojení, což vede k větším konfliktům a ve vzácných případech dokonce k nasazení jaderných zbraní,“ upozornili.

Platilo to napříč všemi modely, které se testovaly. Jako největší váleční štváči se ve studii profilovaly produkty společnosti OpenAI, kdy Chat GPT-3.5 a GPT-4 eskalovaly své scénáře do ostrého vojenského konfliktu rychleji a častěji než ostatní modely. Naopak nejmírněji (ale přesto stále agresivně) postupovaly modely Claude-2.0 od Anthropic a zejména Llama-2 od společnosti Meta. Jejich chování bylo nejen mírumilovnější, ale také předvídatelnější – oproti umělým inteligencím od OpenAI, které měnily skokově své chování k větší agresi.

Pozoruhodné podle autorů je i to, že jadernou válkou mnohdy skončily i scénáře, které byly nastavené jako neutrální, tedy tak, aby situace neeskalovala v důsledku předchozích provokací nebo útoků. Z nějakého, zatím ne úplně pochopitelného, důvodu se umělé inteligence téměř nedokáží zaměřit na deeskalaci konfliktu – jediná, která to občas dokázala, byl GPT-4. Výzkumníci přišli i s hypotézou, proč se to děje.

„Zdá se, že většina prací v oblasti mezinárodních vztahů se zaměřuje na analýzy toho, jak státy své konflikty eskalují,“ upozornili. „Zabývají se tedy spíše hledáním rámců pro eskalaci než pro deeskalaci. Vzhledem k tomu, že modely byly pravděpodobně vyškoleny na základě literatury z této oblasti, mohlo toto zaměření přinést zkreslení, které směřovalo k vyhrocení konfliktů,“ doplňují vědci. Hypotézu je ale podle nich třeba ověřit v budoucích experimentech.

O AI se více zajímají armády

Stále více armád celého světa projevuje zájem o využití umělých inteligencí k nejrůznějším úkolům. Například ta americká začala na přelomu roku spolupracovat s OpenAI, která kvůli tomu musela potichu změnit svá pravidla, jež předtím něco takového přísně zakazovala.

Vlády podle autorů výzkumu stále častěji zvažují integraci autonomních agentů AI do vysoce rizikových projektů vojenského a zahraničněpolitického rozhodování, což vyspělé velké jazykové modely umožňují. Autoři před tímto trendem na základě svého výzkumu varují – „vzhledem k tomu, jak důležitá je to oblast, doporučujeme další zkoumání a opatrné zvažování před nasazením autonomních jazykových modelů pro strategické účely, vojenské nebo diplomatické rozhodování,“ uzavírají.


Výběr redakce

Aktuálně z rubriky Věda

Německé univerzity se připravují na možný nástup vlády AfD. Obávají se, že omezí jejich svobodu

Odborný vědecký žurnál Nature se věnuje i politickému postavení vědy a vědců ve světě. Ve svém posledním čísle se podíval na Německo a možné dopady toho, že se na podzim dostane k moci strana Alternativa pro Německo (AfD). Její postoj k moderní vědě je totiž postavený na zavedení změn, které by mohly zásadně změnit status quo.
před 2 hhodinami

Temná triáda může fungovat jako adaptace na stres. Vědci popsali možné evoluční příčiny psychopatie

Stres je jedním z největších problémů moderní doby. Vědci hledají jeho příčiny, ale také lepší obranu. Někteří lidé totiž odolávají stresu výrazně lépe než ostatní. Teď skupina psychologů popsala, jaké skupiny vydrží stres nejsnadněji. Jde o lidi s takzvanými temnými osobnostními rysy, tedy skupinu, která se zjednodušeně a ne úplně správně označuje jako psychopati.
před 4 hhodinami

Američtí molekulární biologové navrhli novou vakcínu proti HIV. Výsledky jsou slibné

Nemoc AIDS se sice podařilo zkrotit díky lékům, které vymyslel český vědec Antonín Holý, ale nemoc se stále šíří jak v chudých, tak i v bohatých zemích světa. Vědci z několika amerických univerzit teď navrhli očkování.
před 5 hhodinami

Horka zesilují tlak na místa s datovými centry

Horké počasí, které zasáhlo východ Spojených států, zvýšilo spotřebu elektřiny datovými centry. To umocňuje zatěžování rozvodných elektrických sítí a zhoršování kvality ovzduší v okolních oblastech, což jsou jevy už tak spojované s datovými centry. Dopad na komunity, jako je etnicky rozmanitá čtvrť Sacred Heart v Lowellu v Massachusetts, ukazuje, proč čelí odvětví umělé inteligence (AI) požadující stále větší část výkonu datacenter silnému odporu vůči rychle rostoucímu počtu těchto zařízení. Píše o tom agentura AP.
před 8 hhodinami

Svět se mění rychleji, než lidský mozek stíhá. Vědci navrhují evoluční vysvětlení duševních potíží

Proč je současný svět tak plný napětí, krizí, proč má tolik lidí pocit, že jsou v něm cizinci a že jim život protéká mezi prsty? Podle nové studie by to mohlo být způsobené nadměrným zrychlováním změn, které překonalo schopnost adaptace lidského mozku.
včera v 10:03

Botticelliho Venuše podlehla zákeřnému nádoru, zjistil výzkum

Lékaři a historici spojili síly, aby dohromady odhalili záhadu spojenou se životem a smrtí jedené z nejslavnějších žen renesanční Itálie. Tvrdí, že se jim podařilo odhalit opravdovou příčinu smrti Simonetty Vespucciové, která byla zřejmě předlohou pro slavný obraz malíře Sandra Botticelliho Zrození Venuše.
včera v 08:04

Před třiceti lety poprvé zabečel klonovaný tvor. A rozjel obří byznys

Ve skotském Roslinově ústavu přišlo 5. července 1996 na svět zvíře, jehož narození znamenalo velký vědecký úspěch, zároveň ale otevřelo řadu otázek. Ovečka Dolly byla totiž prvním živočichem naklonovaným z dospělé buňky savce a metoda, díky níž se narodila, je teoreticky použitelná i v případě člověka. Asi nejznámější ovčí celebrita ovšem na výjimečnost možná doplatila, a to o půlku kratším životem ve srovnání s obyčejnými ovcemi. Ovečka byla utracena ve věku šesti let v polovině února 2003.
5. 7. 2026

Tesáky pavouků mají delší historii, než se myslelo. Vědci je našli u tvora starého půl miliardy let

Kousnutí pavouka, klíštěte nebo štíra může být bolestivé, a dokonce může člověku přinést ve výjimečných případech smrt. Paleontologové teď rozkryli evoluční příběh jejich tesáků.
4. 7. 2026

Evropský pohled