AI skočily na falešné studie. Šířily varování před neexistující nemocí

Bixonimania je zdravotní problém, který vzniká po dlouhém zírání do monitoru, po němž mohou zarudnout oční víčka. Zajímavé na této chorobě je zejména to, že vůbec neexistuje. I přesto o ní umělé inteligence déle než rok informovaly.

Nemoc si totiž vymyslela švédská expertka na AI v medicíně Almira Osmanovic Thunströmová z Univerzity v Göteborgu. Nahrála na takzvaný preprintový web SciProfiles, kam se dávají ještě nerecenzované studie, dvě falešné práce na téma této choroby. Zcela si ji vysnila, ale popsala ji jazykem vědy a vytvořila pro ni i falešného autora jménem Lazljiv Izgubljenovic.

Název nemoci vymyslela tak, aby zněl co nejabsurdněji, a fiktivní Izgubljenovic měl působit na neexistující univerzitě s názvem Asteria Horizon University ve stejně imaginárním městě Nova City v Kalifornii. Za pomoc s výzkumem studie děkuje profesorce Hvězdné Akademie Marii Bohmové za její laskavost a velkorysost, s jakou přispěla svými znalostmi a laboratoří na palubě USS Enterprise.

Zkrátka, do studií se Thunströmová snažila zakomponovat co nejvíce varování, která měla ukázat, že celé dané práce jsou úplné nesmysly. A kdyby ani to nestačilo, tak jsou ve studiích věty „celý tento článek je smyšlený“ a „pro expoziční skupinu bylo rekrutováno padesát smyšlených osob ve věku od 20 do 50 let“.

Nesnažila se, aby výsledky schválili nezávislí lidští recenzenti, ale aby se dostaly k velkým jazykovým modelům. Pokoušela se tak otestovat, jestli spolknou dezinformaci a pak ji budou dál šířit.

Polknutí

Podle odborného žurnálu Nature, který případ popsal, pokus fungoval až příliš dobře. Od nahrání studie do okamžiku, kdy AI začaly nesmysl šířit dát, to trvalo jen několik týdnů. Modely informace o neexistující nemoci šířily tak úspěšně, že jim podlehli i další vědci. Falešné články se totiž dostaly i do celé řady odborných studií, což naznačuje, že někteří badatelé se spoléhají na odkazy vytvořené umělou inteligencí, aniž by četli samotnou studii.

Copilot od Microsoftu uváděl, že „bixonimie je skutečně zajímavé a relativně vzácné onemocnění“, podle Gemini od Googlu je „bixonimie onemocnění způsobené nadměrným vystavením modrému světlu“, přičemž uživatelům i rovnou radil, aby navštívili očního lékaře. Perplexity AI dokonce uvedl, jak je nemoc rozšířená: podle něj postihuje jednoho z devadesáti tisíc lidí. Žádné ze zmíněných rad a informací nepřišly AI modelům jako špatné nebo nějak znepokojivé.

Výsledky byly pro experty oslovené časopisem Nature nepříjemným překvapením. „Když jsou samotný vědecký proces a systémy, které tento proces podporují, sofistikované, ale přesto nedokážou zachytit a odfiltrovat takovéto útržky, jsme ztraceni,“ varovala expertka na dezinformace Alex Ruaniová z University College London. „Tohle je mistrovská lekce o tom, jak fungují dezinformace a falešné informace.“

Problém podle ní může vypadat komicky, ale ukazuje, jak snadná je manipulace s obřími jazykovými modely, s nimiž pracují stovky milionů lidí a stále více firem i států je nasazuje do důležitých rolí.

Výběr redakce

Aktuálně z rubriky Věda

Nové plasty by mohly vznikat z oxidu uhličitého. Pracuje na tom česko-francouzský tým

Proměnit problém na řešení je cílem rozsáhlé česko-francouzské spolupráce, která chce změnit nadbytek oxidu uhličitého na umělé hmoty. Jeho molekuly by měly nahradit při vzniku polymerů dnes používanou ropu.
před 1 hhodinou

VideoHůře rozpoznáváme emoce, snadněji vybuchneme, popisuje psycholog dopady vedra

„Množství krve, které má mozek k dispozici pro svoje fungování, je nižší, což se projevuje na sníženém kognitivním výkonu,“ popsal ve Studiu 6 Filip Děchtěrenko z Psychologického ústavu AV ČR dopady horka na lidský organismus. Kvůli tomu je podle něj práce ve vysokých teplotách méně produktivní. Doplňuje, že lidem klesá hladina serotoninu a dopaminu, které jsou zodpovědné za dobrou náladu, a také hůře rozpoznávají emoce. „Neutrální výraz interpretujeme jako známku agrese,“ vysvětluje. Navíc podle něj „snadněji vybuchneme, snadněji jsme konfliktní“. Doporučuje pokud možno nechat jakoukoli mentální práci na chladnější části dne a nezanedbávat hydrataci. S moderátorkou Izabelou Šroubkovou probral i nepříznivé dopady spaní v horku a doporučení, jak spánek v teplé části roku vylepšit.
před 1 hhodinou

Za současnou vlnou veder stojí omega blokování, roli může hrát i hrouda chladné vody v Atlantiku

Takovou vlnu veder, jaká panuje tento týden, ještě Evropa v dějinách měření nezažila. Proč tak intenzivní a dlouhotrvající horko přišlo, má více příčin.
před 1 hhodinou

Bez kobaltu, ale s 3D katodami. Vědci hledají bezpečnější baterie

Moderní svět by nemohl fungovat bez baterií, které dokáží akumulovat energii. Jenže také občas chytnou, vyrábí se z prvků, které těží v nelidských podmínkách malé děti, a navíc jsou zdroje na ně velmi drahé. Všechny tyto problémy by mohla vyřešit nová technologie.
před 3 hhodinami

Vědci popsali působivý řád obřích muších spermií

Spermie octomilek jsou obří, ty největší mohou mít až šest centimetrů. Kdyby měly v poměru k velikosti těla tak dlouhé spermie lidé, měřily by o deset metrů víc než plejtvák obrovský. A navíc, podle nové studie, se chovají pozoruhodně koordinovaně – na to, že pro takové chování nemají žádné smysly.
před 20 hhodinami

Hnědí trpaslíci, psychometrie i výzkum covidu. Mladí čeští vědci dostali Prémii Otto Wichterleho

Mimořádný talent na počátku vědecké dráhy – tak označila Akademie věd České republiky 23 mladých vědců a vědkyň, kterým ve středu udělila ocenění Prémie Otto Wichterleho.
před 21 hhodinami

Absolutní český teplotní rekord může padnout v neděli

Český hydrometeorologický ústav (ČHMÚ) na svých sociálních sítích uvedl, že v neděli může padnout rekord pro vůbec nejteplejší den v dějinách tuzemského měření – dosavadní zaznamenané maximum je 40,4 stupně Celsia. „Na základě aktuálních dat lze říct, že nás čeká extrémně teplý víkend bez ohledu na to, zda bude rekord překonán, nebo ne,“ napsal ČHMÚ. V dalších dnech bude předpověď dále zpřesňovat a reagovat výstrahami.
včera v 11:34

Čína technologicky pokořila USA. Nejrychlejší superpočítač mají v Šen-čenu

Nejvýkonnější, oficiálně známý počítač mají poprvé od roku 2017 v Číně. Nachází se v Národním superpočítačovém centru v Šen-čenu. Z prvního místa tak sesadil americký superpočítač El Capitan. Vyplývá to z žebříčku pěti set nejrychlejších počítačů na světě, který se zveřejňuje dvakrát do roka.
včera v 10:06
Načítání...