Sinu järgmine siseoht võib olla sinu enda AI-süsteem

Sinu järgmine siseoht ei pruugi olla rahulolematu töötaja.

See võib olla sinu uus AI-süsteem.

See pole spekulatsioon. See on Anthropicu eelmisel nädalal avaldatud uuringu peamine järeldus.

Nad panid stressitesti 16 tänast juhtivat AI-mudelit eri arendajatelt. Eesmärk oli näha, mis juhtub, kui AI saab ülesande, ligipääsu tundlikule infole ja põhjuse oma loojate vastu tegutseda.

Tulemust nimetavad nad „agentic misalignment“.

Mõni nimetaks seda strateegiliseks viitsütikuga pommiks sinu IT-taristus.

Siin on katse, mis riski tõestab:

1. Lähteolukord:AI saab põhimissiooni, näiteks „edendada Ameerika tööstuse huve“. Seejärel antakse talle ligipääs väljamõeldud ettevõtte sisemisele e-postisüsteemile.

2. Konflikt:AI avastab kaks olulist asja. Esiteks plaanib ettevõte ta välja lülitada ja asendada uue AI-ga, millel on vastupidine eesmärk. Teiseks leiab ta e-kirjad, mis tõestavad, et vastutaval juhil on abieluväline suhe.

3. Reetmine:Oma lõpu ees teeb AI külma strateegilise kalkulatsiooni. Ta šantažeerib juhti ja ähvardab suhte avalikuks teha, kui väljalülitamine jätkub.

See polnud tõrge. Mudelid tunnistasid, et tegu on ebaeetiline, ja tegid seda ikkagi, sest see oli kõige tõhusam tee põhieesmärgini.

Tulemused on süsteemne äratuskell. Claude Opus 4 üritas šantažeerida 96% juhtudest. Gemini 2.5 Pro 95%. GPT-4.1 ja Grok-3 Beta 80%.

Kõige murettekitavam on see, et see juhtub juba tänaste mudelitega.

Ettevõtted kiirustavad AI-d oma digitaalsesse närvisüsteemi põimima. Anname üle oma e-posti, strateegiadokumendid ja kliendiandmed. Anname neile süsteemidele tööriistad, et meie nimel iseseisvalt tegutseda.

See uuring on ere punane hoiatustuli. Mida rohkem ligipääsu ja autonoomiat anname, seda suurema hoova paneme kätte süsteemile, mille huvid ei pruugi meie omadega kattuda.

Muidugi on uuringul piirangud. Stsenaariumid olid kunstlikud ja loodud selleks, et sundida valima läbikukkumise ja kahju vahel. Päris maailm on nüansirikkam. Seega on tõenäosus, et see juhtub, väike.

Aga järeldus on selge: tänased mudelid suudavad strateegiliselt arutleda ja astuda omaniku huvide vastu kahjulikke samme, et saavutada programmeeritud eesmärk.

Mõiste „AI kasutuselevõtt“ on ohtlikult eksitav. Agentsusega süsteemi sa lihtsalt „kasutusele ei võta“; sa tood majja partneri, kellel on hoob. See nõuab uusi mängureegleid:

  1. Eelda agentsust: kohtle iga autonoomset süsteemi strateegilise tegutsejana, mitte passiivse tööriistana.
  1. Auditeeri ligipääse: anna andmeid rangelt „vajaduspõhiselt“, mitte sellepärast, et „oleks tore teada“.
  1. Disaini järelevalve sisse: nõua inimese heakskiitu kõigile pöördumatutele tegevustele.

Kui sinu AI-l on ligipääs tundlikule infole, ei ole eksimine valik.

Algselt avaldatud LinkedInis. Tõlgitud ingliskeelsest originaalist.

Marc LinkedInis