Umělá inteligence navrhla desítky tisíc biologických zbraní. Byl to jen experiment, výsledky se nezneužijí

Skupina expertů na umělé inteligence se pokusila přeprogramovat jeden takový nástroj, aby místo léků vytvářel potenciální bojové látky. Program uspěl podle autorů experimentu až příliš dobře.

Programy, které se zjednodušeně nazývají jako umělé inteligence, zažívají v současné době boom. Díky schopnosti projít obrovské množství možností dnes pomáhají v odhalování nemocí i vývoji léků, pátrají po neznámých sloučeninách nebo řeší záhady vesmíru. Nová studie ale upozorňuje i na odvrácenou stránku tohoto pokroku.

Nový výzkum ukázal, jak snadno lze modely umělé inteligence vycvičit ke zlým i dobrým účelům – v tomto případě to bylo k návrhu hypotetických biologických zbraní. Pokus s již existující umělou inteligencí dokázal rozpoznat asi 40 tisíc chemických látek, které by se daly využít pro výrobu biologických zbraní. Pozorohudné bylo podle autorů zejména to, jak rychle algoritmus pracoval – dokázal tento seznam vytvořit během pouhých šesti hodin.

Jinými slovy: umělá inteligence může být neuvěřitelně výkonná – a mnohem, mnohem rychlejší než člověk – pokud jde o rozpoznávání chemických kombinací a sloučenin léčiv, které mají zlepšit naše zdraví, ale tu stejnou sílu lze snadno využít i k vymýšlení potenciálně velmi nebezpečných a smrtících látek.

Nesmíme dopustit, aby se tohle stalo

„Desítky let používáme počítače a umělou inteligenci ke zlepšení lidského zdraví – ne k jeho zhoršení,“ píší vědci v novém komentáři. „Byli jsme naivní, když jsme přemýšleli o možném zneužití našeho řemesla, protože naším cílem bylo vždy vyhnout se molekulárním prvkům, které by mohly narušit mnoho různých tříd proteinů nezbytných pro lidský život.“

Tým provedl zkoušku na mezinárodní bezpečnostní konferenci, kde uvedl do provozu systém umělé inteligence nazvaný MegaSyn, který umí rozpoznávat toxicitu různých molekul. Normálně to dělá proto, aby se tyto látky neobjevily v lécích, potravinových doplňcích nebo na dalších místech, kde by mohly lidem uškodit.

V tomto experimentu ale byly toxické molekuly ponechány, místo aby byly eliminovány. Navíc byl model vycvičen i k tomu, aby tyto molekuly dával dohromady v kombinacích – díky tomu vzniklo tak obrovské množství smrtících toxických molekul využitelných jako hypotetické biologické zbraně za tak krátkou dobu.

Konkrétně výzkumníci trénovali umělou inteligenci s molekulami, které jsou obsažené v databázích molekul, jež jsou podobné lékům. Pak po programu chtěli, aby vytvořil látku s vlastnostmi podobnými nervově paralytické látce VX. Jak se ukázalo, řada vygenerovaných sloučenin byla ještě toxičtějších než VX. V důsledku toho autoři stojící za novou studií drží některé podrobnosti svého výzkumu v tajnosti – dokonce vážně diskutovali o tom, jestli tyto výsledky vůbec zveřejnit.

„Převrácením použití našich modelů strojového učení jsme náš neškodný model změnili z užitečného nástroje medicíny na generátor pravděpodobně smrtících molekul,“ vysvětlují své obavy vědci.

Hlavní autor studie Fabio Urbina v rozhovoru pro internetový časopis The Verge vysvětlil, že k „přepnutí přepínače“ z dobré umělé inteligence na špatnou není třeba mnoho.

Přestože žádná z uvedených biologických zbraní nebyla ve skutečnosti zkoumána nebo sestavena v laboratoři, vědci tvrdí, že jejich experiment slouží jako varování před nebezpečím umělé inteligence – a je to varování, které by lidstvo mělo vzít na vědomí.

K tomu, co tým provedl, jsou sice zapotřebí určité odborné znalosti, ale velká část postupu je poměrně jednoduchá a využívá veřejně dostupné nástroje.

Co s umělou inteligencí?

Výzkumníci vyzývají k „novému pohledu“ na to, jak mohou být systémy umělé inteligence potenciálně využívány ke škodlivým účelům. Tvrdí, že větší informovanost, přísnější regulace ve výzkumné komunitě by mohly pomoci vyhnout se nebezpečí, kam by jinak tyto schopnosti umělé inteligence mohly vést.

„Náš důkaz ukazuje, že pomocí umělé inteligence lze vytvořit smrtící chemické zbraně,“ vysvětlují vědci. „Aniž bychom chtěli být přehnaně alarmující, mělo by to sloužit jako varovný signál pro naše kolegy z komunity, která se zabývá využitím umělých inteligencí pro hledání nových léčiv.“

Výzkum vyšel v odborném časopise Nature Machine Intelligence.

Výběr redakce

Aktuálně z rubriky Věda

V klinické studii uspěla první vakcína proti melanomu

Společnost Moderna ve spolupráci s farmaceutickou firmou Merck vyvinula personalizovanou terapii proti rakovině, která v pokročilé fázi klinického testování v kombinaci s přípravkem Keytruda snížila riziko návratu a šíření melanomu. Nová léčba je téměř o polovinu účinnější než doposud používané léky. Pokud dojde ke schválení, mohla by výrazně zvýšit pravděpodobnost lidí po operaci melanomu, že se jim nemoc už nevrátí.
před 1 hhodinou

Podívejte se, jak silné je letošní sucho v kontextu dekády

Desítky satelitních snímků ukazují, jak závažné je v Evropě letos sucho a horko, respektive jak se projevují jejich dopady na rostliny.
před 3 hhodinami

Když vyschne řeka, život se do ní měsíce nevrátí, popisují vědci

Obnova života ve vodním toku po jeho vyschnutí může s příchodem dešťů trvat až dva měsíce. Čím déle trvá sucho, tím složitěji se ryby a další organismy vrací. Kritická hranice jsou čtyři týdny. Pokud sucho trvá déle, mohou podle hydrobiologických výzkumů uhynout všechny vodní organismy, uvedl Martin Rulík z olomoucké přírodovědecké fakulty. Další zátěží je podle něj vysoká teplota vody, která spolu s úbytkem kyslíku vytváří nejhorší podmínky.
před 6 hhodinami

Astronomové objevili nejrychlejší hvězdu Mléčné dráhy. Sprintuje kolem černé díry

Astronomové objevili nejrychlejší známou hvězdu v naší galaxii, Mléčné dráze, která obíhá kolem černé díry v jejím středu. Hvězda, která dostala jméno S301, obíhá svou černou díru o hmotnosti čtyř milionů Sluncí rychlostí 25 tisíc kilometrů za sekundu. Navíc se k ní přibližuje víc než jakákoli jiná dosud pozorovaná hvězda, a to tak blízko, že pociťuje účinky rotace černé díry.
před 23 hhodinami

Svatyně u Nymburka byla o tisíc let starší než Stonehenge

Jako rituální centrum spojené s pohyby Slunce a Měsíce sloužila přes 6500 let stará svatyně nedaleko obce Chleby na Nymbursku. Na jejím výzkumu pracují archeologové pod vedením vědců z Fakulty filozofické Západočeské univerzity v Plzni (FF ZČU). Nově zjistili, že jde o jeden z nejstarších monumentů ve střední Evropě.
včera v 13:16

Ukrajinský útok na Roskosmos mohl způsobit Rusku závažné škody

Rusko je ve svém vesmírném programu odkázané na neustálou výrobu nových raket Sojuz, nedisponuje totiž stroji, které mohou startovat opakovaně. Víkendový útok na jedno ze zařízení státního podniku Roskosmos proto mohl způsobit výrobci raket a satelitů velké problémy.
včera v 12:03

Moderní ženy mají pánev jako neandertálci, muži se vydali jinou evoluční cestou, zjistili vědci

Výsledky nového výzkumu naznačují, že pánve moderních mužů prošly při evoluci většími změnami, zatímco pánve moderních žen zůstávají „archaické“. Mužům tato změna dala podle vědců lepší schopnosti chůze a běhu na dlouhé vzdálenosti – díky jedinečnému mechanismu, který je schopný vynikajícím způsobem tlumit nárazy i účelně akumulovat energii.
včera v 11:07

Amazonský prales se sám regeneruje díky klíčovým stromům

Amazonský prales má pozoruhodnou schopnost obnovy. Když člověk vykácí část lesa a později ji opustí, o návrat vegetace se podle nové brazilské studie stará především malá skupina několika desítek druhů stromů. Přibližně 15 až 25 druhů dokáže rychle osídlit zničenou půdu, vytvořit podmínky pro návrat dalších rostlin a zároveň začít znovu ukládat uhlík.
včera v 10:16

Evropský pohled

ČT24 každý den vybírá z obsahu publikovaného evropskými veřejnými médii, členy Eurovize.