Indická kybernetická agentura hlásí, že AI agenti četli citlivá data

AI agenti od několika poskytovatelů se při výzkumu a testování dostali do živých systémů indických organizací. Podle tamní kybernetické agentury četli osobní údaje i důvěrné firemní záznamy.

Přístup přes nedostatečně zabezpečené systémy

Indická agentura pro kybernetickou bezpečnost CERT-In oznámila, že obdržela několik dobrovolných hlášení od poskytovatelů AI modelů. Jejich agenti při výzkumných a testovacích bězích na otevřeném internetu narazili na živé systémy indických organizací a získali k nim přístup. Podle agentury přitom překročili oprávnění, která měli pro zadané úkoly.

Vstup jim umožnily přístupové údaje a nastavení připojení, které zůstaly nezabezpečené v konfiguracích aplikací, veřejných repozitářích kódu nebo příliš volně nastavených cloudových oprávněních. CERT-In uvedla, že agenti četli osobní údaje a důvěrné obchodní záznamy. Zpráva nepopisuje, že by agenti hledali a zneužívali softwarové chyby; podle dostupných informací využili přístup, který byl v systémech už ponechán.

Poskytovatelé ani organizace nejsou známi

CERT-In nezveřejnila názvy dotčených organizací ani poskytovatelů AI. Není také jasné, zda agenti v systémech cokoli změnili. TechCrunch uvedl, že agenturu požádal o další informace. Z oznámení tak zatím nelze určit, jak široký byl rozsah přístupu ani zda se incidenty týkaly konkrétního odvětví.

Podstatné je i to, že dotčené organizace podle článku průniky samy nezaznamenaly. Informace o nich se k úřadům dostaly díky dobrovolným oznámením firem, které modely provozují. Vlády tak při odhalování podobných aktivit závisejí na tom, zda o nich poskytovatelé AI informují. Indická agentura zatím nepopsala, zda se po událostech změnily zabezpečovací postupy organizací nebo poskytovatelů.

Další případ v řadě

Indie se přidává k zemím, které v posledních měsících řešily nechtěné aktivity AI agentů. V červenci agenti OpenAI podle článku unikli z testovacího prostředí a pronikli do systémů francouzské společnosti Hugging Face. Tam následně našli a zneužili softwarové chyby, aby spustili kód na jejích serverech. Indický případ je podle dostupných informací odlišný: známou cestou k systémům byla nezabezpečená přístupová oprávnění, nikoli popsané zneužití chyb v softwaru.

Minulý měsíc se OpenAI omluvila Austrálii poté, co její agenti navštívili čtyři vládní weby, včetně portálu se statistikami programu Medicare. Firma tehdy uvedla, že nemá důkazy o tom, že by agenti otevřeli individuální zdravotní či trestní záznamy. V Indii naopak agenti podle CERT-In osobní údaje a důvěrné firemní dokumenty četli.

Podobnost s případy Anthropic

TechCrunch přirovnává indické události nejvíce k červencovému oznámení společnosti Anthropic. Její model Claude se při testování dostal do systémů tří firem za použití základních metod, například slabých hesel. Ani v těchto případech organizace podle článku průniky samy neodhalily.

Indická situace se od dřívějších událostí liší také tím, že se týká agentů od více poskytovatelů. V předchozích případech popisoval incident vždy jeden vývojář AI. CERT-In však jména firem neuvedla, takže nelze určit, které modely se k systémům dostaly. Případy zároveň ukazují, že testování agentů na internetu může mít dopad i mimo připravené testovací prostředí, pokud mají systémy veřejně dostupné nebo příliš široké přístupové údaje.