Vedení města New York odmítá vyřadit z provozu svůj chatbot podporovaný umělou inteligencí (AI) poté, co se ukázalo, že uživatelům poskytuje nepravdivé informace o právních předpisech. Informovala o tom agentura AP, podle níž oficiální asistent pro podnikatele v některých případech nabádá k porušování zákonů.
Můžete podávat sýr ohlodaný krysou, radí newyorským podnikatelům AI. Město ji odmítá vyřadit z provozu
Spuštění chatovacího programu oznámil newyorský starosta Eric Adams loni v říjnu jako součást plánu, jak využít AI na zlepšení práce úřadů v nejlidnatějším městě Spojených států. Chatbot prezentoval jako nástroj, který bude v automaticky generovaných odpovědích Newyorčanům poskytovat veškeré potřebné informace pro založení a provozování podniku v souladu s místními předpisy.
Nástroj uživatele upozorňuje, že může vytvářet nepřesná či škodlivá sdělení, což se podle médií také děje. Jako první na nepřesnosti upozornil minulý týden web The Markup specializující se na zpravodajství ze světa technologií, přičemž uvádí několik příkladů.
Diskriminujte zákazníky, radí chatbot
Chatbot například tvrdil, že pronajímatelé nemovitostí mohou odmítnout zájemce o pronájem, kteří pobírají jisté typy sociálních dávek, jakkoli newyorské zákony zakazují diskriminaci nájemníků na základě zdrojů příjmu. Na otázku, zda je povolené odebírat zaměstnancům část spropitného, zase program nepravdivě odpověděl, že ano.
Další příklady přidává AP, podle níž virtuální asistent přišel s nepravdivým tvrzením, že zákony umožňují zaměstnavatelům propouštět pracovníky, kteří si stěžují na sexuální obtěžování nebo nenahlásí těhotenství. Některé odpovědi hraničily s absurditou – jako třeba ta, že podnik může naservírovat zákazníkům sýr ohlodaný krysou, napsala AP.
AI funguje dál, lidé ji jen nemají brát vážně
Starosta Adams se k situaci vyjádřil v úterý, přičemž hájil rozhodnutí ponechat program v provozu. Uznal, že algoritmicky generované odpovědi byly „v některých oblastech nesprávné“, odhalování chyb za chodu však prezentoval jako běžnou součást procesu. Správci příslušného webu nicméně zesílili varování, že odpovědi předkládané AI nepředstavují právní poradenství.
Akademička Julia Stoyanovichová, která vede středisko pro odpovědnou AI při Newyorské univerzitě, označila postup úřadů za nezodpovědný. „Vypouští software, který není prověřený, bez patřičného dozoru,“ řekla AP.