Umělá inteligence navrhla desítky tisíc biologických zbraní. Byl to jen experiment, výsledky se nezneužijí

Skupina expertů na umělé inteligence se pokusila přeprogramovat jeden takový nástroj, aby místo léků vytvářel potenciální bojové látky. Program uspěl podle autorů experimentu až příliš dobře.

Programy, které se zjednodušeně nazývají jako umělé inteligence, zažívají v současné době boom. Díky schopnosti projít obrovské množství možností dnes pomáhají v odhalování nemocí i vývoji léků, pátrají po neznámých sloučeninách nebo řeší záhady vesmíru. Nová studie ale upozorňuje i na odvrácenou stránku tohoto pokroku.

Nový výzkum ukázal, jak snadno lze modely umělé inteligence vycvičit ke zlým i dobrým účelům – v tomto případě to bylo k návrhu hypotetických biologických zbraní. Pokus s již existující umělou inteligencí dokázal rozpoznat asi 40 tisíc chemických látek, které by se daly využít pro výrobu biologických zbraní. Pozorohudné bylo podle autorů zejména to, jak rychle algoritmus pracoval – dokázal tento seznam vytvořit během pouhých šesti hodin.

Jinými slovy: umělá inteligence může být neuvěřitelně výkonná – a mnohem, mnohem rychlejší než člověk – pokud jde o rozpoznávání chemických kombinací a sloučenin léčiv, které mají zlepšit naše zdraví, ale tu stejnou sílu lze snadno využít i k vymýšlení potenciálně velmi nebezpečných a smrtících látek.

Nesmíme dopustit, aby se tohle stalo

„Desítky let používáme počítače a umělou inteligenci ke zlepšení lidského zdraví – ne k jeho zhoršení,“ píší vědci v novém komentáři. „Byli jsme naivní, když jsme přemýšleli o možném zneužití našeho řemesla, protože naším cílem bylo vždy vyhnout se molekulárním prvkům, které by mohly narušit mnoho různých tříd proteinů nezbytných pro lidský život.“

Tým provedl zkoušku na mezinárodní bezpečnostní konferenci, kde uvedl do provozu systém umělé inteligence nazvaný MegaSyn, který umí rozpoznávat toxicitu různých molekul. Normálně to dělá proto, aby se tyto látky neobjevily v lécích, potravinových doplňcích nebo na dalších místech, kde by mohly lidem uškodit.

V tomto experimentu ale byly toxické molekuly ponechány, místo aby byly eliminovány. Navíc byl model vycvičen i k tomu, aby tyto molekuly dával dohromady v kombinacích – díky tomu vzniklo tak obrovské množství smrtících toxických molekul využitelných jako hypotetické biologické zbraně za tak krátkou dobu.

Konkrétně výzkumníci trénovali umělou inteligenci s molekulami, které jsou obsažené v databázích molekul, jež jsou podobné lékům. Pak po programu chtěli, aby vytvořil látku s vlastnostmi podobnými nervově paralytické látce VX. Jak se ukázalo, řada vygenerovaných sloučenin byla ještě toxičtějších než VX. V důsledku toho autoři stojící za novou studií drží některé podrobnosti svého výzkumu v tajnosti – dokonce vážně diskutovali o tom, jestli tyto výsledky vůbec zveřejnit.

„Převrácením použití našich modelů strojového učení jsme náš neškodný model změnili z užitečného nástroje medicíny na generátor pravděpodobně smrtících molekul,“ vysvětlují své obavy vědci.

Hlavní autor studie Fabio Urbina v rozhovoru pro internetový časopis The Verge vysvětlil, že k „přepnutí přepínače“ z dobré umělé inteligence na špatnou není třeba mnoho.

Přestože žádná z uvedených biologických zbraní nebyla ve skutečnosti zkoumána nebo sestavena v laboratoři, vědci tvrdí, že jejich experiment slouží jako varování před nebezpečím umělé inteligence – a je to varování, které by lidstvo mělo vzít na vědomí.

K tomu, co tým provedl, jsou sice zapotřebí určité odborné znalosti, ale velká část postupu je poměrně jednoduchá a využívá veřejně dostupné nástroje.

Co s umělou inteligencí?

Výzkumníci vyzývají k „novému pohledu“ na to, jak mohou být systémy umělé inteligence potenciálně využívány ke škodlivým účelům. Tvrdí, že větší informovanost, přísnější regulace ve výzkumné komunitě by mohly pomoci vyhnout se nebezpečí, kam by jinak tyto schopnosti umělé inteligence mohly vést.

„Náš důkaz ukazuje, že pomocí umělé inteligence lze vytvořit smrtící chemické zbraně,“ vysvětlují vědci. „Aniž bychom chtěli být přehnaně alarmující, mělo by to sloužit jako varovný signál pro naše kolegy z komunity, která se zabývá využitím umělých inteligencí pro hledání nových léčiv.“

Výzkum vyšel v odborném časopise Nature Machine Intelligence.

Výběr redakce

Aktuálně z rubriky Věda

Středomoří zasáhla vlna veder s rekordní intenzitou

Zejména severozápadní část Středozemního moře zasáhla na začátku týdne vlna veder, která dosáhla pro tuto oblast rekordní intenzity. Událost je podle meteorologů výjimečná tím, o kolik stupňů současné teploty překročily normální hodnoty. Nadprůměrné teploty ale panují v celém Středomoří. Průměrný rozdíl oproti normálním, takzvaným klimatologickým hodnotám, činil 5,2 stupně Celsia, jak vyplývá z údajů španělského Institutu mořských věd (ICM) citovaných agenturou AFP.
před 28 mminutami

Lidstvo spustilo první časosběr oblohy. Ukáže vesmír, jak ho neznáme

V noci odstartoval ostrý provoz velkého dalekohledu pro mapování proměnlivého vesmíru na Observatoři Very Rubinové v Chile. Teleskop za tři noci nasnímkuje celou jižní oblohu a totéž bude opakovat znovu a znovu po dobu deseti let. Díky tomu získá lidstvo astronomické množství astronomických dat a záznamy toho, co a jak se na nebi mění.
před 48 mminutami

Růst velkoměst se podle analýzy do konce století zpomalí

Vědci našli detailní analýzou geografických dat doposud nepozorovaná pravidla, jimiž se řídí růst velkoměst. Když je interpretovali, zjistili, že růst bude pomalejší, než se předpokládalo.
před 18 hhodinami

V oteplujícím se Baltském moři sílí pobřežní vlny chladu, uvádí studie

Přestože se Baltské moře rychle otepluje, v jeho pobřežních vodách se začaly objevovat stále intenzivnější studené epizody. Studie vědců z TalTechu zjistila, že tento jev způsobuje kombinace větru, mělkých pobřežních vod a studeného vzduchu. Vědci svá zjištění publikovali v časopise Environmental Research: Climate.
před 19 hhodinami

Příliš velká očekávání vůči lidem. To je dle vědců hlavní problém závislosti mladých na AI

Vědci, kteří studovali dopady užívání umělých inteligencí (AI) na teenagery a adolescenty, tvrdí, že našli dva klíčové problémy, na něž bude společnost muset reagovat. Přesto našli i celou řadu pozitivních dopadů.
před 20 hhodinami

Ford znovu najal inženýry, AI je nedokázala nahradit

Americká automobilka Ford Motor znovu najala některé inženýry. Zjistila totiž, že umělá inteligence (AI) se nedokázala při kontrolách kvality vyrovnat jejich schopnostem a zkušenostem. Informovala o tom agentura Bloomberg.
před 23 hhodinami

Čeští archeologové našli v Africe britský internační tábor pro Němce z druhé světové války

V internačním táboře Andalusia v Jihoafrické republice bylo vězněno v době druhé světové války asi dvanáct set Němců. Experti z Archeologického ústavu Akademie věd v Praze, Západočeské univerzity v Plzni a Sol Plaatje Univerzity v Kimberley potvrdili přesnou lokaci místa, popsali, jak se tábor měnil, a pořídili detailní dokumentaci, která poslouží mimo jiné pro vytvoření 3D modelu lokality.
včera v 10:57

Vedra v Česku jsou delší a intenzivnější, podobných epizod bude přibývat, říká geograf

Současná vlna veder, která zasáhla Českou republiku, patří podle geografa Michala Lehnerta z Katedry geografie Přírodovědecké fakulty Univerzity Palackého k mimořádným nejen dosaženými teplotami, ale také délkou trvání. Na některých místech bylo kolem 40 stupňů Celsia a v nejteplejších oblastech trvá období extrémních teplot už od začátku třetí červnové dekády. Mimořádný je i počet stanic, na kterých byly zaznamenány tropické noci.
včera v 09:28

Evropský pohled