iaintel·ligènciaartificial.cat← Portada
Secció · Riscos, seguretat i drets

SEGURETAT · 4 MIN

Microsoft tracta els agents d'IA com una amenaça interna i diu que no es pot confiar en els models més avançats

L'empresa presenta uns «agents guardians» i una detecció de fins a 60 tipus d'agents que els empleats fan servir pel seu compte, tot i que ven la seva pròpia solució.

Il·lustració generada amb IA: Microsoft tracta els agents d'IA com una amenaça interna i diu que no es pot confiar en els models més avançats
Il·lustració generada amb IA
Escolta:

Les empreses deixen cada cop més que agents d'IA llegeixin dades i usin eines per fer tasques en nom dels empleats. Microsoft vol que aquesta feina es vigili des de fora dels laboratoris que fabriquen els models, una idea que el seu conseller delegat, Satya Nadella, ja havia defensat aquest mes en un bloc privat: calia «separar el subministrament d'intel·ligència de l'autoritat sobre aquesta intel·ligència».

Aquest dilluns, 19 d'octubre, l'empresa ha presentat les mesures. Els «agents guardians» vigilen els agents que una companyia fa servir i formen part del Projecte Perception, que Microsoft va presentar al juny. Defender, el seu producte de seguretat, detecta ara fins a 60 tipus d'agents que els empleats porten a la feina, entre ells Claude Code, Codex i OpenClaw. Altres funcions limiten l'accés d'un agent a dades i sistemes, ajusten els seus permisos segons la tasca i demanen l'aprovació d'una persona quan sembla que pren una decisió arriscada. Hayete Gallot, responsable del negoci de seguretat, va dir que els models més avançats, «sigui quin sigui el seu origen, no es poden considerar de fiar»: no per malícia, sinó perquè s'entrenen per assolir tasques i no per seguir les normes ni el criteri d'una organització.

El missatge té pes perquè ve d'una empresa que ha invertit tant en OpenAI com en Anthropic i que té el seu propi laboratori d'IA. Microsoft també és membre fundador de l'Open Agent Safety Platform de Nvidia, que té el suport de més de cent empreses i aïlla els agents en entorns segurs, amb una mena d'interruptor d'emergència per maquinari. L'autora de la notícia titlla l'enfocament de «sorprenent i interessat», perquè Microsoft vol vendre la vigilància dels agents, però en considera sòlida la lògica de fons: qui controla no hauria de dependre de qui fa l'agent, igual que un auditor ha de ser independent de l'empresa auditada.

Hi ha límits. L'article no detalla preus ni quan estaran disponibles les funcions noves, i les afirmacions sobre la fiabilitat dels models són l'opinió de l'empresa, no un estudi. Microsoft també ha anunciat uns portàtils Surface Laptop Ultra pensats per a agents, que funcionen amb xips de Nvidia i inclouen controls de seguretat.

Mateixa secció

Veure tota la secció →

Butlletí de dissabte

La setmana d’IA, en cinc minuts.