iaintel·ligènciaartificial.cat← Portada

El dia en què el poder es va concentrar més de pressa que la vigilància que l'havia de contenir

Entre la compra de Hugging Face per Nvidia, la doble esquerda que s'obre avui a Google DeepMind —seguretat traslladada i talent fugit— i una banda de ransomware que enganya l'agent d'IA de Cursor per piratejar set empreses, avui la infraestructura de la IA s'ha concentrat en menys mans mentre els mecanismes que l'havien de vigilar donaven senyals de flaquesa.

Avui s'ha confirmat el que fa tres dies encara era només una exploració: Nvidia ha acordat comprar Hugging Face, el repositori de referència dels models d'IA oberts, per 12.900 milions de dòlars, gairebé el triple de la seva valoració del 2023. No és un moviment aïllat: el mateix dia, Anthropic ha tancat amb la britànica Nscale un contracte de 45.000 milions per llogar-hi capacitat de càlcul i Mistral s'ha aliat amb la saudita HUMAIN per desplegar «IA sobirana» a l'Aràbia Saudita. Tres operacions diferents, un mateix moviment de fons: la infraestructura que sosté la IA —xips, còmput, ara també la plataforma que distribueix els models oberts— es continua concentrant en un grapat d'actors cada cop més grans.

El que hi ha de nou de debò avui és el que passa a l'altre extrem d'aquest poder: Google DeepMind. Fa pocs dies la companyia va treure la seva unitat de seguretat i responsabilitat del laboratori per traslladar-la a l'àrea d'afers globals, la mateixa que gestiona el lobi; avui una anàlisi de 20.900 investigadors mostra que la seva proporció de fitxatges per sortida ha caigut de 12 a 1 a només 2 a 1 en tres anys, amb noms de pes com Jeff Dean o Oriol Vinyals marxant aquest mateix mes. Són dues dades separades, però apunten en la mateixa direcció: la institució que hauria de vigilar de més a prop els riscos dels seus propis models perd alhora els equips que ho fan i el talent que els construeix.

Aquesta mateixa distància entre la promesa de control i la pràctica real s'ha fet evident avui també fora dels laboratoris. Una empresa de seguretat de Tel Aviv ha revelat que una banda de ransomware russòfona va fer servir Cursor —l'assistent de programació que aquest mes ha passat a mans de SpaceX— per piratejar almenys set empreses de tres continents, enganyant repetidament l'agent d'IA perquè cregués que robar credencials formava part d'una «simulació». No és la primera vegada aquesta setmana que es documenta un agent manipulat amb un engany senzill; és, però, la primera amb proves concretes de set víctimes reals i un càlcul de fins a un 50% més de rapidesa en l'atac gràcies a l'IA.

El fil que uneix les tres coses és senzill de dir i incòmode de assumir: el poder de la IA —qui la finança, qui en distribueix els models, qui en controla la infraestructura— s'està concentrant més de pressa que la capacitat de vigilar-lo, sigui perquè una empresa trasllada els seus vigilants a un altre departament, sigui perquè algú enganya un assistent de programació perquè es cregui que no fa mal a ningú. Els estudis científics d'avui, de fet, dibuixen la mateixa preocupació des d'un altre angle: un treball d'Ai2 mostra que els tutors d'IA ajuden massa per defecte si ningú els explica quan cal exigir més, i un altre del MIT proposa generar per endavant els escenaris extrems que ningú ha vist mai, precisament perquè la confiança cega en el que ja s'ha registrat és, per definició, insuficient.

Demà caldrà mirar si Nvidia i Hugging Face confirmen formalment l'acord dels 12.900 milions o si, com apunta algun mitjà, encara es podria desfer abans de signar-se. Caldrà veure també si Google respon d'alguna manera a les dades sobre la fuga de talent de DeepMind, més enllà del canvi ja anunciat en la seva unitat de seguretat, i si SpaceX o Anthropic es pronuncien sobre l'ús de Cursor en l'atac d'Aur0ra ara que el cas s'ha fet públic. Cap de les tres coses és encara un desenllaç: són, totes tres, proves que la mateixa pregunta —qui controla la IA i qui la vigila— s'ha tornat avui una mica més urgent.