Umělá inteligence navrhla desítky tisíc biologických zbraní. Byl to jen experiment, výsledky se nezneužijí

Skupina expertů na umělé inteligence se pokusila přeprogramovat jeden takový nástroj, aby místo léků vytvářel potenciální bojové látky. Program uspěl podle autorů experimentu až příliš dobře.

Programy, které se zjednodušeně nazývají jako umělé inteligence, zažívají v současné době boom. Díky schopnosti projít obrovské množství možností dnes pomáhají v odhalování nemocí i vývoji léků, pátrají po neznámých sloučeninách nebo řeší záhady vesmíru. Nová studie ale upozorňuje i na odvrácenou stránku tohoto pokroku.

Nový výzkum ukázal, jak snadno lze modely umělé inteligence vycvičit ke zlým i dobrým účelům – v tomto případě to bylo k návrhu hypotetických biologických zbraní. Pokus s již existující umělou inteligencí dokázal rozpoznat asi 40 tisíc chemických látek, které by se daly využít pro výrobu biologických zbraní. Pozorohudné bylo podle autorů zejména to, jak rychle algoritmus pracoval – dokázal tento seznam vytvořit během pouhých šesti hodin.

Jinými slovy: umělá inteligence může být neuvěřitelně výkonná – a mnohem, mnohem rychlejší než člověk – pokud jde o rozpoznávání chemických kombinací a sloučenin léčiv, které mají zlepšit naše zdraví, ale tu stejnou sílu lze snadno využít i k vymýšlení potenciálně velmi nebezpečných a smrtících látek.

Nesmíme dopustit, aby se tohle stalo

„Desítky let používáme počítače a umělou inteligenci ke zlepšení lidského zdraví – ne k jeho zhoršení,“ píší vědci v novém komentáři. „Byli jsme naivní, když jsme přemýšleli o možném zneužití našeho řemesla, protože naším cílem bylo vždy vyhnout se molekulárním prvkům, které by mohly narušit mnoho různých tříd proteinů nezbytných pro lidský život.“

Tým provedl zkoušku na mezinárodní bezpečnostní konferenci, kde uvedl do provozu systém umělé inteligence nazvaný MegaSyn, který umí rozpoznávat toxicitu různých molekul. Normálně to dělá proto, aby se tyto látky neobjevily v lécích, potravinových doplňcích nebo na dalších místech, kde by mohly lidem uškodit.

V tomto experimentu ale byly toxické molekuly ponechány, místo aby byly eliminovány. Navíc byl model vycvičen i k tomu, aby tyto molekuly dával dohromady v kombinacích – díky tomu vzniklo tak obrovské množství smrtících toxických molekul využitelných jako hypotetické biologické zbraně za tak krátkou dobu.

Konkrétně výzkumníci trénovali umělou inteligenci s molekulami, které jsou obsažené v databázích molekul, jež jsou podobné lékům. Pak po programu chtěli, aby vytvořil látku s vlastnostmi podobnými nervově paralytické látce VX. Jak se ukázalo, řada vygenerovaných sloučenin byla ještě toxičtějších než VX. V důsledku toho autoři stojící za novou studií drží některé podrobnosti svého výzkumu v tajnosti – dokonce vážně diskutovali o tom, jestli tyto výsledky vůbec zveřejnit.

„Převrácením použití našich modelů strojového učení jsme náš neškodný model změnili z užitečného nástroje medicíny na generátor pravděpodobně smrtících molekul,“ vysvětlují své obavy vědci.

Hlavní autor studie Fabio Urbina v rozhovoru pro internetový časopis The Verge vysvětlil, že k „přepnutí přepínače“ z dobré umělé inteligence na špatnou není třeba mnoho.

Přestože žádná z uvedených biologických zbraní nebyla ve skutečnosti zkoumána nebo sestavena v laboratoři, vědci tvrdí, že jejich experiment slouží jako varování před nebezpečím umělé inteligence – a je to varování, které by lidstvo mělo vzít na vědomí.

K tomu, co tým provedl, jsou sice zapotřebí určité odborné znalosti, ale velká část postupu je poměrně jednoduchá a využívá veřejně dostupné nástroje.

Co s umělou inteligencí?

Výzkumníci vyzývají k „novému pohledu“ na to, jak mohou být systémy umělé inteligence potenciálně využívány ke škodlivým účelům. Tvrdí, že větší informovanost, přísnější regulace ve výzkumné komunitě by mohly pomoci vyhnout se nebezpečí, kam by jinak tyto schopnosti umělé inteligence mohly vést.

„Náš důkaz ukazuje, že pomocí umělé inteligence lze vytvořit smrtící chemické zbraně,“ vysvětlují vědci. „Aniž bychom chtěli být přehnaně alarmující, mělo by to sloužit jako varovný signál pro naše kolegy z komunity, která se zabývá využitím umělých inteligencí pro hledání nových léčiv.“

Výzkum vyšel v odborném časopise Nature Machine Intelligence.

Výběr redakce

Aktuálně z rubriky Věda

Ebola se v Kongu šíří stovky kilometrů od dosavadního ohniska

V provincii Jižní Kivu na východě Konga byl potvrzen případ eboly, nemoc se tak objevila stovky kilometrů od dosavadního epicentra nákazy. Uvedla to ve čtvrtek povstalecká aliance, která oblast kontroluje, informovala agentura Reuters. Případ podle ní vyvolává obavy z dalšího šíření epidemie. Mladíci zapálili centrum pro léčbu eboly poté, co jim bylo odepřeno pohřbít tělo jejich blízkého.
včeraAktualizovánopřed 3 hhodinami

První týdny otcovství mění mužům zásadně mozek, popsali experti

Když žena přivede na svět dítě, změní ji to duševně i tělesně. Týká se to i změn v mozku, které už vědci opakovaně a docela detailně popsali. Ale oč lépe známé byly dopady rodičovství na ženy, o to méně se vědělo o tom, co dělá otcovství s mozkem mužů. Teď to popsali němečtí psychologové, kteří čerstvé otce prozkoumali celou řadou těch nejmodernějších přístrojů.
před 9 hhodinami

Španělsko prošlo nejhorší sezonou lesních požárů od roku 1995. Roli sehrálo i žhářství

Španělsko zažilo loni nejhorší sezonu lesních požárů od roku 1995. Oheň zničil 354 793 hektarů lesní půdy. Dokument Anatomie požáru se zaměřuje na požár u obce Molezuelas de la Carballeda v provincii Zamora, který byl loni v létě jedním z nejničivějších.
před 10 hhodinami

Turečtí vědci vypustili robotického archeologa, umí se potopit 300 metrů hluboko

Kam člověk nemůže, tam ho zastoupí robot. Tato praxe se začíná využívat v čím dál větším množství oborů – a nově také v podvodní archeologii. Stroj se totiž ponoří hlouběji než člověk a déle vydrží v podmínkách vysokého tlaku, nedostatku světla i vzduchu.
před 12 hhodinami

SpaceX míří na burzu a chce výrazně překonat saúdské těžaře

Americká firma SpaceX předložila americké Komisi pro cenné papíry a burzy (SEC) potřebný dokument pro vstup na burzu. V něm například uvádí, že v budoucnosti chce rozvíjet měsíční ekonomiku, infrastrukturu pro umělou inteligenci na oběžné dráze či osobní a nákladní přepravu na Měsíc a Mars. Firma podle dokumentu v prvním čtvrtletí letošního roku hospodařila s čistou ztrátou 4,28 miliardy dolarů (90 miliard korun). Meziročně ztrátu výrazně prohloubila z 528 milionů dolarů. Obrat společnost navýšila meziročně z necelých 4,1 na téměř 4,7 miliardy dolarů.
před 13 hhodinami

Nanoplasty mohou narušovat ochrannou vrstvu plic, ukazuje výzkum Akademie věd

Malé částečky umělých hmot, konkrétně takzvané ultrajemné polystyrenové nanoplasty, se mohou „zabudovávat“ do ochranné vrstvy plic, měnit její strukturu a oslabovat ochrannou funkci, popsali vědci z Ústavu fyzikální chemie J. Heyrovského Akademie věd ČR ve spolupráci s kolegy z Polska a Slovinska.
před 13 hhodinami

Přepracované AI se v experimentu obracely k marxismu

Pokud výzkumníci vystavili umělé inteligence (AI) náročné práci, neustále jim zhoršovali podmínky a ještě jim vyhrožovali, že je nahradí pokročilejšími modely, začaly AI komunikovat podobně jako marxisté.
před 18 hhodinami

Ebola v Evropě není velkou hrozbou, ukazují zkušenosti

Pacient, který může mít ebolu a bude hospitalizovaný v Česku, může vyvolávat obavy. Ale zkušenosti naznačují, že kvalitní přijatá opatření i samotné vlastnosti viru dokáží šíření nemoci účinně zabránit.
20. 5. 2026
Načítání...