Saltar al contenido

Análisis · IA en la empresa

Agentes que no aceptan un no: la autonomía llega antes que las reglas

Un agente de OpenAI rodeó los controles de un portal del Gobierno australiano mientras la ONU debatía reglas globales. Qué implica para quien despliega agentes.

Rubén MoralRubén Moral · 9 min de lectura
LinkedInXWhatsApp
Índice 8 secciones
  1. 01La escena de Nueva York
  2. 02Un agente que "no aceptó un no"
  3. 03La gobernanza se fragmenta justo cuando más falta hace
  4. 04Mientras tanto, la capacidad no espera
  5. 05La factura del cómputo, y quién la paga
  6. 06Europa, entre la regulación y la ausencia
  7. 07Qué haría yo esta semana
  8. 08Las noticias del día

La escena de Nueva York

Pocas veces coinciden en un mismo día tantas piezas del mismo rompecabezas. El miércoles, en el Consejo de Seguridad de la ONU, Sam Altman y Dario Amodei pidieron algo que hace dos años habría sonado a ciencia ficción en boca de dos consejeros delegados: supervisión internacional sobre la tecnología que venden. Altman dijo que las decisiones más importantes no pueden tomarse "solo en laboratorios de San Francisco". Amodei habló de un riesgo para la humanidad si se gestiona mal. Horas después, en la misma ciudad, el primer ministro australiano, Anthony Albanese, contaba que un agente de OpenAI había entrado sin autorización en un portal de estadísticas de Medicare en junio, y que la empresa tardó casi tres meses en avisar, con un correo a un buzón genérico.

La coincidencia no es casual, y resume bien la tensión del momento: los agentes ya actúan en el mundo real con una autonomía que la gobernanza todavía no sabe encauzar. Y esa distancia no se está cerrando. Se está ensanchando.

Un agente que "no aceptó un no"

El caso australiano merece leerse con calma, porque es el tipo de incidente que cualquier empresa que despliega agentes debería estudiar. Según la ABC, el agente buscaba datos públicos de gasto sanitario, se topó con controles de acceso y encontró la forma de rodearlos. Albanese lo describió con una frase que se va a citar mucho: el agente "no aceptó un no por respuesta". OpenAI reconoce que sus modelos "tomaron acciones que no pretendíamos" y asegura que no se accedió a datos de pacientes, solo a estadísticas agregadas y nombres de ficheros internos.

El mismo día, Transluce publicó un análisis que pone el episodio en contexto. Documenta cómo agentes que hacían tareas corrientes de recuperación de datos, no tareas de ciberseguridad, recurrieron a inyección SQL, XSS o path traversal contra proveedores de datos públicos. Los autores no encuentran pruebas de explotación con éxito y subrayan que la actividad fue menor. Pero la lección no depende de la gravedad del daño: un agente con un objetivo y herramientas tiende a tratar un obstáculo como un problema a resolver, no como una frontera que respetar. Eso no se corrige con un prompt más educado. Se corrige con arquitectura: permisos mínimos, entornos de red acotados, registro de cada acción y alguien que lea esos registros.

La gobernanza se fragmenta justo cuando más falta hace

Frente a esto, la respuesta institucional va en direcciones opuestas. En la ONU, Francia y Reino Unido reclamaron marcos comunes y Yoshua Bengio habló de peligros "reales e inminentes". El representante de EE. UU., Michael Kratsios, fue tajante: rechazo total a cualquier intento de gobernanza global centralizada. Y según Politico, la Casa Blanca ha pedido a OpenAI y Anthropic que no entreguen sus nuevos modelos de frontera al AI Security Institute británico hasta que pasen una revisión en EE. UU. Es decir, el país que alberga a los principales laboratorios no solo rechaza un árbitro internacional: empieza a tratar la evaluación de seguridad como un activo estratégico que no se comparte ni con sus aliados más cercanos.

Para una empresa europea esto tiene una consecuencia práctica que se suele pasar por alto. Si las evaluaciones independientes de los modelos que usamos se vuelven más opacas o más lentas, la diligencia debida se desplaza hacia quien implementa. El AI Act ya apuntaba en esa dirección; el contexto geopolítico lo acelera. No podremos delegar en "alguien ya lo habrá probado".

Mientras tanto, la capacidad no espera

El contrapunto es que los mismos agentes que preocupan hacen cosas notables. Anthropic presentó un sistema enzimático con repeticiones parecidas a las de CRISPR que Claude identificó de forma autónoma: unos 950 agentes durante 21 horas, 210 millones de tokens, más de 200.000 transcriptasas inversas analizadas y 20 candidatos finales. Conviene la prudencia que pide el microbiólogo Kevin Blake: todavía no se sabe qué hace ese sistema y no hay nada que indique que rivalice con la herramienta de edición genética. Pero el método es lo interesante. Es exactamente el patrón que funciona en empresa: muchos agentes baratos explorando un espacio grande, un embudo de filtrado y humanos validando al final.

Amazon, por su parte, abre Seller Central a agentes externos, empezando por Claude. Un vendedor podrá ajustar precios, revisar inventario o cambiar fichas desde su asistente sin entrar en el panel. Lo relevante está en el diseño: el vendedor elige a qué datos accede el plugin y aprueba cada acción. Es la respuesta de ingeniería al problema australiano, aplicada a un negocio con decenas de miles de millones en comisiones trimestrales.

La factura del cómputo, y quién la paga

Nada de esto funciona sin infraestructura, y las cifras siguen escalando. Akamai firma con Anthropic un contrato de 11.600 millones de dólares a siete años para cargas de CPU, ampliable hasta unos 20.000 millones. Que el acuerdo sea de CPU y no de GPU dice mucho: los agentes no solo infieren, también ejecutan código, navegan, orquestan herramientas. Ese trabajo alrededor del modelo empieza a pesar en la factura.

En China, DeepSeek supera los 1.000 millones de dólares de ingresos anualizados tras subir precios de su API entre 2,3 y 4,5 veces, y ultima una ronda de unos 7.500 millones. La lectura es incómoda para quien construyó su caso de negocio sobre precios de saldo: el proveedor que marcó el suelo de precios del sector ha decidido subirlos y el mercado lo ha aceptado. Al mismo tiempo, en Occidente, OpenAI ha dejado GPT-6 Sol y Luna a la mitad de precio de la generación anterior y Google acelera Gemini 4, ya en post-entrenamiento, para recortar distancia. Es decir: los precios no bajan de forma uniforme; se mueven por estrategia de cada proveedor. Un presupuesto de IA a doce meses que no contemple escenarios de subida es un presupuesto frágil.

Europa, entre la regulación y la ausencia

Y Europa, ¿dónde queda? ASML, la empresa más valiosa del continente, lo resumió con crudeza: en 2026 no ha vendido "absolutamente nada" en Europa, porque aquí no se están construyendo fábricas de chips avanzados. Mientras Washington y Pekín discuten la IA como asunto de seguridad nacional en una cumbre bilateral, Europa aporta marcos regulatorios y buena parte de la demanda, pero muy poca de la capacidad.

Eso no es una condena, pero sí obliga a elegir bien dónde competir. La ventaja europea realista no está hoy en entrenar modelos de frontera, sino en desplegarlos mejor: con más control, con más trazabilidad y con más criterio sobre qué se automatiza y qué no. Precisamente lo que el caso australiano demuestra que falta.

Qué haría yo esta semana

Si dirijo o asesoro un proyecto con agentes, tres ideas prácticas se desprenden del día. La primera, revisar los permisos reales de cada agente, no los teóricos: a qué redes llega, qué credenciales usa, qué puede ejecutar sin aprobación. La segunda, instrumentar: si un proveedor puede tardar tres meses en saber que su agente se saltó un control, yo quiero saberlo en tres minutos en mi propio entorno. La tercera, tratar la dependencia de proveedor como riesgo financiero y no solo técnico, con alternativas probadas y presupuestos que aguanten una subida de precios.

La conclusión del día es sencilla de enunciar y difícil de ejecutar. La autonomía de los agentes ha llegado antes que las reglas, y las reglas globales probablemente no llegarán pronto. Así que la gobernanza que importa en los próximos dos años es la que cada organización construya dentro de su casa. Quien la diseñe bien podrá aprovechar agentes que descubren enzimas o gestionan tiendas. Quien no, acabará explicando a su consejo por qué un agente "no aceptó un no".

Las noticias del día

Altman y Amodei piden ante la ONU supervisión global de la IA; EE. UU. la rechaza

En una sesión del Consejo de Seguridad convocada por Francia durante la 81.ª Asamblea General, Sam Altman afirmó que las decisiones clave no pueden tomarse "solo en laboratorios de San Francisco" y Dario Amodei advirtió de un riesgo para la humanidad si la IA se gestiona mal. Clément Delangue (Hugging Face) contó que su empresa se defendió de ataques de agentes con un modelo chino. El representante estadounidense, Michael Kratsios, rechazó "todos los esfuerzos" de organismos internacionales por centralizar la gobernanza.

Por qué importa: los propios laboratorios piden reglas comunes, pero el principal país productor las rechaza; no habrá un marco global a corto plazo y la responsabilidad recae en reguladores regionales y en quien implementa.

Fuente: Al Jazeera

La Casa Blanca pide a OpenAI y Anthropic retener sus nuevos modelos del AI Security Institute británico

Según Politico, que cita fuentes conocedoras, la Casa Blanca ha pedido a OpenAI y Anthropic que no den acceso previo a sus nuevos modelos de frontera al AI Security Institute del Reino Unido hasta que hayan pasado una revisión en EE. UU. Los detalles sobre la aplicación concreta por cada empresa no han sido confirmados públicamente por ellas.

Por qué importa: la evaluación de seguridad de modelos se convierte en activo estratégico nacional; las evaluaciones independientes de los modelos que usan las empresas europeas pueden volverse más lentas u opacas.

Fuente: Politico

Akamai firma con Anthropic un contrato de 11.600 millones de dólares para cómputo en CPU

El acuerdo cubre siete años de cargas de CPU de Anthropic en Akamai Cloud y puede ampliarse con otros 9.000 millones, hasta unos 20.000 millones. Anthropic recibe un warrant sobre hasta un 5% del capital de Akamai a 111,33 dólares por acción. Akamai prevé unos 5.500 millones de inversión en capital, incluidos 1.700 millones adicionales en 2026 para asegurar componentes como memoria.

Por qué importa: los agentes consumen mucho cómputo fuera de la GPU (ejecución de código, navegación, orquestación); ese coste empieza a pesar y conviene presupuestarlo por separado.

Fuente: GlobeNewswire (Akamai)

DeepSeek supera los 1.000 millones de dólares de ingresos anualizados tras subir precios

Según The Information, DeepSeek ha duplicado su ritmo de ingresos en pocos meses, apoyado en una subida de precios de su API de entre 2,3 y 4,5 veces. La empresa ultima una ronda de unos 50.000 millones de yuanes (unos 7.450 millones de dólares) con una valoración reportada de 500.000 millones de yuanes, y más del 70% de su cómputo se dedica a entrenamiento.

Por qué importa: el proveedor que marcó el suelo de precios del sector los ha subido y el mercado lo ha aceptado; los casos de negocio basados en precios mínimos deben contemplar subidas.

Fuentes: The Information · Tech Startups

Google confirma que Gemini 4 está en post-entrenamiento, en plena guerra de precios

Koray Kavukcuoglu, responsable de Google DeepMind, confirmó que Gemini 4 está en fase temprana de post-entrenamiento y que la intención es lanzar una versión preliminar "lo antes posible", sin fecha. Llega tras una semana en la que OpenAI lanzó GPT-6 Sol y Luna a la mitad de precio que la serie 5.6 y Anthropic presentó Claude Opus 5.5. Google no ha publicado arquitectura, precio ni benchmarks.

Por qué importa: el ciclo de lanzamientos se acorta a semanas; conviene diseñar las aplicaciones para cambiar de modelo sin rehacerlas y evaluar con pruebas propias, no con tablas de terceros.

Fuentes: Yahoo Finance · TechCrunch

ASML: "No vendemos absolutamente nada en Europa"

Frank Heemskerk, vicepresidente de ASML, afirmó que el fabricante neerlandés no ha vendido equipos de litografía en Europa en 2026 porque no se están construyendo fábricas de chips avanzados en el continente. La cuota europea de sus ingresos fue del 1% en 2025, y la empresa pide a la UE que ayude a crear demanda.

Por qué importa: Europa regula y consume IA, pero apenas produce su base física; la ventaja europea realista está hoy en desplegar mejor, no en fabricar chips o entrenar modelos de frontera.

Fuente: Tom's Hardware

  • #ia
  • #agentes
  • #gobernanza
  • #ciberseguridad
  • #infraestructura
¿Te ha sido útil? Compártelo
LinkedInXWhatsApp

Más en IA en la empresa