Umělá inteligence navrhla desítky tisíc biologických zbraní. Byl to jen experiment, výsledky se nezneužijí

Skupina expertů na umělé inteligence se pokusila přeprogramovat jeden takový nástroj, aby místo léků vytvářel potenciální bojové látky. Program uspěl podle autorů experimentu až příliš dobře.

Programy, které se zjednodušeně nazývají jako umělé inteligence, zažívají v současné době boom. Díky schopnosti projít obrovské množství možností dnes pomáhají v odhalování nemocí i vývoji léků, pátrají po neznámých sloučeninách nebo řeší záhady vesmíru. Nová studie ale upozorňuje i na odvrácenou stránku tohoto pokroku.

Nový výzkum ukázal, jak snadno lze modely umělé inteligence vycvičit ke zlým i dobrým účelům – v tomto případě to bylo k návrhu hypotetických biologických zbraní. Pokus s již existující umělou inteligencí dokázal rozpoznat asi 40 tisíc chemických látek, které by se daly využít pro výrobu biologických zbraní. Pozorohudné bylo podle autorů zejména to, jak rychle algoritmus pracoval – dokázal tento seznam vytvořit během pouhých šesti hodin.

Jinými slovy: umělá inteligence může být neuvěřitelně výkonná – a mnohem, mnohem rychlejší než člověk – pokud jde o rozpoznávání chemických kombinací a sloučenin léčiv, které mají zlepšit naše zdraví, ale tu stejnou sílu lze snadno využít i k vymýšlení potenciálně velmi nebezpečných a smrtících látek.

Nesmíme dopustit, aby se tohle stalo

„Desítky let používáme počítače a umělou inteligenci ke zlepšení lidského zdraví – ne k jeho zhoršení,“ píší vědci v novém komentáři. „Byli jsme naivní, když jsme přemýšleli o možném zneužití našeho řemesla, protože naším cílem bylo vždy vyhnout se molekulárním prvkům, které by mohly narušit mnoho různých tříd proteinů nezbytných pro lidský život.“

Tým provedl zkoušku na mezinárodní bezpečnostní konferenci, kde uvedl do provozu systém umělé inteligence nazvaný MegaSyn, který umí rozpoznávat toxicitu různých molekul. Normálně to dělá proto, aby se tyto látky neobjevily v lécích, potravinových doplňcích nebo na dalších místech, kde by mohly lidem uškodit.

V tomto experimentu ale byly toxické molekuly ponechány, místo aby byly eliminovány. Navíc byl model vycvičen i k tomu, aby tyto molekuly dával dohromady v kombinacích – díky tomu vzniklo tak obrovské množství smrtících toxických molekul využitelných jako hypotetické biologické zbraně za tak krátkou dobu.

Konkrétně výzkumníci trénovali umělou inteligenci s molekulami, které jsou obsažené v databázích molekul, jež jsou podobné lékům. Pak po programu chtěli, aby vytvořil látku s vlastnostmi podobnými nervově paralytické látce VX. Jak se ukázalo, řada vygenerovaných sloučenin byla ještě toxičtějších než VX. V důsledku toho autoři stojící za novou studií drží některé podrobnosti svého výzkumu v tajnosti – dokonce vážně diskutovali o tom, jestli tyto výsledky vůbec zveřejnit.

„Převrácením použití našich modelů strojového učení jsme náš neškodný model změnili z užitečného nástroje medicíny na generátor pravděpodobně smrtících molekul,“ vysvětlují své obavy vědci.

Hlavní autor studie Fabio Urbina v rozhovoru pro internetový časopis The Verge vysvětlil, že k „přepnutí přepínače“ z dobré umělé inteligence na špatnou není třeba mnoho.

Přestože žádná z uvedených biologických zbraní nebyla ve skutečnosti zkoumána nebo sestavena v laboratoři, vědci tvrdí, že jejich experiment slouží jako varování před nebezpečím umělé inteligence – a je to varování, které by lidstvo mělo vzít na vědomí.

K tomu, co tým provedl, jsou sice zapotřebí určité odborné znalosti, ale velká část postupu je poměrně jednoduchá a využívá veřejně dostupné nástroje.

Co s umělou inteligencí?

Výzkumníci vyzývají k „novému pohledu“ na to, jak mohou být systémy umělé inteligence potenciálně využívány ke škodlivým účelům. Tvrdí, že větší informovanost, přísnější regulace ve výzkumné komunitě by mohly pomoci vyhnout se nebezpečí, kam by jinak tyto schopnosti umělé inteligence mohly vést.

„Náš důkaz ukazuje, že pomocí umělé inteligence lze vytvořit smrtící chemické zbraně,“ vysvětlují vědci. „Aniž bychom chtěli být přehnaně alarmující, mělo by to sloužit jako varovný signál pro naše kolegy z komunity, která se zabývá využitím umělých inteligencí pro hledání nových léčiv.“

Výzkum vyšel v odborném časopise Nature Machine Intelligence.

Výběr redakce

Aktuálně z rubriky Věda

Čeští vědci prozkoumali možnosti genetické úpravy lidských embryí

Odborný vědecký časopis Nature zveřejnil studii, na které se podíleli i čeští vědci. Přinesli v ní přelomové poznatky o možnostech opravy genetických chorob v raném embryonálním vývoji.
před 16 mminutami

Vyvráceno. Přehled nejznámějších dezinformačních a konspiračních teorií o 11. září

Od teroristických útoků na Světové obchodní centrum uplynulo čtvrt století. Šlo o tak výjimečnou událost, že se kolem ní rozšířila celá řada konspiračních teorií a dezinformací. I po pětadvaceti letech se nepravdivá vysvětlení šíří po internetu a sociálních sítích. Tento článek uvádí na pravou míru ty nejrozšířenější.
před 9 hhodinami

Vědci z Akademie věd vytvořili nejmenší QR kód světa. Z jednotlivých atomů

Je víc než tisíckrát menší, než je šířka lidského vlasu, a téměř osmsetkrát menší než současný držitel Guinnessova rekordu. Okem je neviditelný, k jeho spatření ale nestačí ani většina normálních mikroskopů. Tak vypadá nejmenší QR kód na světě, který vytvořili vědci Benjamin Lowe a Oleksandr Stetsovych z Fyzikálního ústavu Akademie věd s Julianem Ceddiou z australské Monash University.
před 9 hhodinami

El Niño se potká s Indickooceánským dipólem. Meteorolog popisuje důsledky

V Tichém oceánu rychle sílí El Niño, které by se během letošního podzimu mělo stát vůbec nejsilnějším ve známé historii. Současně probíhá zajímavá změna o několik tisíc kilometrů západněji, v Indickém oceánu. Tam se rozvíjí kladná fáze takzvaného Indickooceánského dipólu. A souběh těchto dvou jevů může v následujících měsících výrazně ovlivnit počasí od Austrálie přes Indii a východní Afriku až po vzdálenější části světa.
před 10 hhodinami

Vzpomínky na 11. září jsou stále živé. A často nepravdivé, vysvětluje psycholog

Doba kolem roku 2000 patřila přes obavy spojené s přelomem milénia k těm nejklidnějším v dějinách lidstva. O to silnějším šokem byl teroristický útok na Světové obchodní centrum (WTC), který se odehrál před čtvrtstoletím, 11. září 2001. Vzpomínky lidí na tento den nevybledly ani po 25 letech.
před 11 hhodinami

Studie spojuje nadměrné noční osvětlení se změnami ve struktuře a funkci srdce

Podle studie zveřejněné v časopise European Heart Journal, oficiálním časopise Evropské kardiologické společnosti, je vystavení světlu v noci spojeno s významnými a potenciálně škodlivými změnami ve struktuře a funkci srdce.
včera v 15:11

Srpen byl celosvětově nejteplejším měsícem historie, uvedl Copernicus

Letošní srpen byl celosvětově nejteplejším měsícem historie, když vyrovnal rekord července 2023. Průměrná teplota vzduchu u zemského povrchu činila 16,96 stupně Celsia a byla o 0,85 stupně nad průměrem z let 1991 až 2020, uvedla ve čtvrtek služba Evropské unie pro sledování klimatu Copernicus. Letní období od června do srpna vyrovnalo rekord průměrné celosvětové teploty z roku 2024.
včera v 10:05

Na Pálavě se šíří invazní kaktus. Může vytlačovat původní rostliny

V Chráněné krajinné oblasti Pálava se šíří nepůvodní mrazuvzdorný kaktus – opuncie. Ochranáři ho po Děvíně a Tabulové letos zaznamenali v další tamní rezervaci, na Svatém kopečku u Mikulova. Severoamerická rostlina představuje hrozbu pro původní vzácné druhové složení pálavských stepí, informovali zástupci Správy CHKO Pálava na facebooku.
včera v 09:37

Evropský pohled

ČT24 každý den vybírá z obsahu publikovaného evropskými veřejnými médii, členy Eurovize.