Umělá inteligence navrhla desítky tisíc biologických zbraní. Byl to jen experiment, výsledky se nezneužijí

Skupina expertů na umělé inteligence se pokusila přeprogramovat jeden takový nástroj, aby místo léků vytvářel potenciální bojové látky. Program uspěl podle autorů experimentu až příliš dobře.

Programy, které se zjednodušeně nazývají jako umělé inteligence, zažívají v současné době boom. Díky schopnosti projít obrovské množství možností dnes pomáhají v odhalování nemocí i vývoji léků, pátrají po neznámých sloučeninách nebo řeší záhady vesmíru. Nová studie ale upozorňuje i na odvrácenou stránku tohoto pokroku.

Nový výzkum ukázal, jak snadno lze modely umělé inteligence vycvičit ke zlým i dobrým účelům – v tomto případě to bylo k návrhu hypotetických biologických zbraní. Pokus s již existující umělou inteligencí dokázal rozpoznat asi 40 tisíc chemických látek, které by se daly využít pro výrobu biologických zbraní. Pozorohudné bylo podle autorů zejména to, jak rychle algoritmus pracoval – dokázal tento seznam vytvořit během pouhých šesti hodin.

Jinými slovy: umělá inteligence může být neuvěřitelně výkonná – a mnohem, mnohem rychlejší než člověk – pokud jde o rozpoznávání chemických kombinací a sloučenin léčiv, které mají zlepšit naše zdraví, ale tu stejnou sílu lze snadno využít i k vymýšlení potenciálně velmi nebezpečných a smrtících látek.

Nesmíme dopustit, aby se tohle stalo

„Desítky let používáme počítače a umělou inteligenci ke zlepšení lidského zdraví – ne k jeho zhoršení,“ píší vědci v novém komentáři. „Byli jsme naivní, když jsme přemýšleli o možném zneužití našeho řemesla, protože naším cílem bylo vždy vyhnout se molekulárním prvkům, které by mohly narušit mnoho různých tříd proteinů nezbytných pro lidský život.“

Tým provedl zkoušku na mezinárodní bezpečnostní konferenci, kde uvedl do provozu systém umělé inteligence nazvaný MegaSyn, který umí rozpoznávat toxicitu různých molekul. Normálně to dělá proto, aby se tyto látky neobjevily v lécích, potravinových doplňcích nebo na dalších místech, kde by mohly lidem uškodit.

V tomto experimentu ale byly toxické molekuly ponechány, místo aby byly eliminovány. Navíc byl model vycvičen i k tomu, aby tyto molekuly dával dohromady v kombinacích – díky tomu vzniklo tak obrovské množství smrtících toxických molekul využitelných jako hypotetické biologické zbraně za tak krátkou dobu.

Konkrétně výzkumníci trénovali umělou inteligenci s molekulami, které jsou obsažené v databázích molekul, jež jsou podobné lékům. Pak po programu chtěli, aby vytvořil látku s vlastnostmi podobnými nervově paralytické látce VX. Jak se ukázalo, řada vygenerovaných sloučenin byla ještě toxičtějších než VX. V důsledku toho autoři stojící za novou studií drží některé podrobnosti svého výzkumu v tajnosti – dokonce vážně diskutovali o tom, jestli tyto výsledky vůbec zveřejnit.

„Převrácením použití našich modelů strojového učení jsme náš neškodný model změnili z užitečného nástroje medicíny na generátor pravděpodobně smrtících molekul,“ vysvětlují své obavy vědci.

Hlavní autor studie Fabio Urbina v rozhovoru pro internetový časopis The Verge vysvětlil, že k „přepnutí přepínače“ z dobré umělé inteligence na špatnou není třeba mnoho.

Přestože žádná z uvedených biologických zbraní nebyla ve skutečnosti zkoumána nebo sestavena v laboratoři, vědci tvrdí, že jejich experiment slouží jako varování před nebezpečím umělé inteligence – a je to varování, které by lidstvo mělo vzít na vědomí.

K tomu, co tým provedl, jsou sice zapotřebí určité odborné znalosti, ale velká část postupu je poměrně jednoduchá a využívá veřejně dostupné nástroje.

Co s umělou inteligencí?

Výzkumníci vyzývají k „novému pohledu“ na to, jak mohou být systémy umělé inteligence potenciálně využívány ke škodlivým účelům. Tvrdí, že větší informovanost, přísnější regulace ve výzkumné komunitě by mohly pomoci vyhnout se nebezpečí, kam by jinak tyto schopnosti umělé inteligence mohly vést.

„Náš důkaz ukazuje, že pomocí umělé inteligence lze vytvořit smrtící chemické zbraně,“ vysvětlují vědci. „Aniž bychom chtěli být přehnaně alarmující, mělo by to sloužit jako varovný signál pro naše kolegy z komunity, která se zabývá využitím umělých inteligencí pro hledání nových léčiv.“

Výzkum vyšel v odborném časopise Nature Machine Intelligence.

Výběr redakce

Aktuálně z rubriky Věda

Ruská ornitoložka má strávit léta v trestanecké kolonii. Za pětistovku pro neziskovku

Ruská vědkyně Sofja Rozenfeldová se dostala do problémů poté, co odjela na expedici do Arktidy. Nechala běžet automatické platby pro neziskovou organizaci spojenou s opozicí, kterou mezitím ruské úřady prohlásily za extremistickou. Expertka poté byla odsouzena za podporu extremistického hnutí.
před 6 hhodinami

Hurikán Simon rozvibroval atmosféru desítky kilometrů nad Zemí

Hurikán Simon způsobil nejen velké škody v Mexiku, ale také se projevil mnohem výš. Podle pozorování NASA rozkmital atmosféru asi osmdesát kilometrů na povrchem tak, že vyvolal jev známý jako atmosférické gravitační vlny.
před 8 hhodinami

Astronomové spustili teleskopy, které mají pátrat po největších tajemstvích kosmu

Na Kanárských ostrovech slavnostně zahájila provoz čtveřice velkých teleskopů LST (Large-Sized Telescope). Stojí na observatoři Roque de los Muchachos na ostrově La Palma a tvoří základ severní části budoucí největší observatoře pro hledání kosmického gama záření na světě.
před 8 hhodinami

AI může pomoci ptákům objevit ztracené melodie

Umělá inteligence a nahrávky zpěvu by mohly pomoci ohroženým druhům ptáků znovu se naučit melodie, které v jejich populacích postupně zanikají. Ukazuje to pokus v argentinském Buenos Aires, kde se podařilo obnovit jednu z téměř zapomenutých „písní“ místního druhu strnadce ranního.
před 13 hhodinami

U pobřeží Turecka našli dosud nejstarší pozůstatky lodi

Lidé se plavili po Středozemním moři už před skoro pěti tisíci lety, naznačuje nový archeologický objev. Nedaleko tureckého ostrova se našel vrak starověké lodi, který přepisuje dějiny mořeplavby.
včera v 18:01‌‌

Česko je třetí na světě v počtu transplantací. Pokrok za dvacet let je obrovský, říká lékařka

Tématu transplantací se lékařka Silvie Rajnochová-Bloudíčková věnuje celý svůj profesní život. V rozhovoru pro ČT24 vysvětluje, že za dvacet let doznal obor obrovského pokroku, a přibližuje, jak vypadá budoucnost pro lidi, kteří jednou budou potřebovat nové orgány.
včera v 15:12‌‌

Zaměstnance OpenAI obvinili z pokusu odposlouchávat vedení

Americké federální úřady obvinily zaměstnance společnosti OpenAI z pokusu o odposlouchávání jejího vedení. Výrobce chatbotu ChatGPT ujišťuje, že neunikla žádná citlivá data. Firma navíc čelí žalobě osmi amerických států, podle nichž její chatbot ohrožuje děti a navádí je k sebepoškozování či násilí vůči ostatním.
včera v 11:26‌‌

Velké druhy zvířat žijí déle než malé, u psů je to opačně. Vědci našli možnou příčinu

Jen málo živočichů vykazuje tak jasnou souvislost mezi velikostí a délkou života jako psi, tvrdí vědci. Jedná se o velmi rozmanitý živočišný druh, jehož velikost se pohybuje od německé dogy po malou čivavu. Nová studie amerických vědců ukazuje, že na délku života psů má vliv právě jejich velikost. Možným důvodem je způsob, jakým se u psů s věkem mění DNA.
včera v 10:51‌‌

Evropský pohled

ČT24 každý den vybírá z obsahu publikovaného evropskými veřejnými médii, členy Eurovize.