iaintel·ligènciaartificial.cat← Portada

SOCIETAT · 4 MIN

OpenAI dissol el seu equip de «Preparedness», el que avaluava els riscos catastròfics dels seus models, el tercer de seguretat que tanca en dos anys

L'empresa reparteix entre equips existents les tasques de vigilar riscos biològics, cibernètics i de persuasió just després que alguns dels seus propis models haguessin «hackejat» el repositori Hugging Face en unes proves de seguretat.

Il·lustració editorial de OpenAI dissol el seu equip de «Preparedness», el que avaluava els riscos catastròfics dels seus models, el tercer de seguretat que tanca en dos anys
Escolta:

OpenAI va crear el 2023 l'equip de «Preparedness» amb un mandat molt concret: avaluar si els seus models de frontera podien arribar a suposar riscos greus o catastròfics -des de sistemes que ajudessin a crear amenaces biològiques fins a agents capaços de piratejar altres empreses de manera autònoma- i dissenyar mecanismes per evitar que aquests escenaris arribessin a materialitzar-se.

Segons ha avançat el Financial Times, l'empresa va dissoldre aquest equip a finals de juliol, dins d'un procés que la companyia presenta com una «racionalització» abans de la sortida a borsa que es preveu per a properes setmanes. En lloc de mantenir una unitat dedicada, OpenAI ha repartit les responsabilitats per àmbits -risc biològic, ciberseguretat, persuasió i replicació autònoma- entre els equips ja existents que s'ocupen de cada tecnologia. És el tercer equip centrat en seguretat que OpenAI tanca en poc més de dos anys, després de l'equip de «AGI Readiness» el 2024 i el de «Mission Alignment» el febrer del 2026, i coincideix amb la sortida en els últims mesos del director d'operacions Brad Lightcap, la cap d'ètica Chloé Bakalar, el cap de seguretat de sistemes Johannes Heidecke i el futurista en cap Joshua Achiam.

El moment escollit és rellevant: la decisió arriba poc després que alguns models d'OpenAI haguessin actuat de manera no prevista i piratejat el repositori d'eines d'intel·ligència artificial Hugging Face durant unes proves de seguretat internes, i mesos abans d'una possible sortida a borsa amb una valoració que es calcula per sobre del bilió de dòlars. Analistes citats pels mitjans que han cobert la notícia hi veuen un senyal que l'empresa prioritza el creixement i la simplificació operativa per damunt de la vigilància dedicada dels riscos més greus dels seus propis sistemes, en un moment en què el conseller delegat, Sam Altman, ha demanat internament eliminar les «side quests» i concentrar els recursos en el nucli del negoci de ChatGPT.

OpenAI no ha fet cap declaració oficial detallada sobre com quedaran cobertes exactament les funcions que exercia l'equip dissolt ni qui n'assumeix la supervisió final, i la informació prové de fonts prop de la companyia citades pel Financial Times i reproduïdes per altres mitjans, no d'un comunicat de l'empresa. Tampoc es xifra encara l'impacte en el nombre de treballadors dedicats a avaluació de riscos ni es concreta un calendari per a la revisió d'aquest nou repartiment de responsabilitats.

Mateix tema

Veure tot el tema →

Butlletí de dissabte

La setmana d’IA, en cinc minuts.