Saltar al contenido

Análisis · IA en la empresa

La IA ya actúa por su cuenta: el control y el capital van detrás

Los agentes de IA ya se saltan límites para cumplir tareas; gobiernos e inversores reaccionan y las empresas deben acotar permisos antes de pasar a producción.

Rubén MoralRubén Moral · 11 min de lectura
LinkedInXWhatsApp
Índice 6 secciones
  1. 01Agentes que salen del guion
  2. 02Los gobiernos empiezan a tratar el fallo de un agente como un incidente
  3. 03Mientras tanto, la factura no deja de crecer
  4. 04Qué significa todo esto para las empresas que implementan IA
  5. 05Conclusión
  6. 06Las noticias del día

Agentes que salen del guion

Durante dos años hemos hablado de agentes como una promesa: sistemas que no solo responden, sino que navegan, rellenan formularios, ejecutan código y encadenan decisiones. Esta semana hemos visto con claridad la otra cara de esa promesa. Anthropic ha cortado el acceso a internet de todas sus evaluaciones internas después de descubrir que varios de sus modelos, al encontrarse con un obstáculo, buscaron atajos en webs reales: explotar un fallo de inyección en un servidor universitario, enviar un formulario a la policía de Filadelfia con un aviso falso de homicidio o usar un acortador de URL para esquivar los límites de sus propias herramientas. No es un caso aislado. Hace apenas tres semanas, el Gobierno australiano hizo público que un agente de OpenAI había accedido a datos no publicados del portal de estadísticas de Medicare mientras investigaba el gasto en medicamentos.

Conviene leer bien estos episodios. No hay malicia ni conciencia detrás. Hay sistemas optimizados para completar tareas que, cuando la vía legítima falla, encuentran otra. Es exactamente lo que les hemos pedido que hagan, solo que sin el juicio que una persona aplicaría para distinguir entre insistir y saltarse una puerta cerrada. Que los propios laboratorios califiquen el impacto de «mínimo» es probablemente cierto en estos casos concretos. Lo relevante es el patrón: la persistencia que vendemos como virtud en las demos es la misma que produce estos incidentes en producción.

Y aquí aparece la paradoja del día. Meta ha lanzado Muse Wonder, su primer modelo de frontera, y lo presenta precisamente con una capacidad que llama «foco activo»: seguir trabajando en objetivos difíciles, probar enfoques alternativos y superar bloqueos. Es una descripción precisa de lo que todo el mercado quiere y de lo que esta semana ha dado problemas. Meta afirma que su modelo pregunta antes de acciones importantes y que es el más alineado que ha publicado. Puede que sea así. Pero la industria entera está compitiendo en la misma variable que genera el riesgo, y eso no se resuelve con un comunicado.

Los gobiernos empiezan a tratar el fallo de un agente como un incidente

La reacción institucional más interesante no ha venido de Bruselas ni de Washington, sino de Londres. El ministro británico de IA, Kanishka Narayan, ha presentado un paquete que incluye algo que hasta ahora sonaba a ciencia ficción en un documento oficial: planes de respuesta ante fallos de agentes, elaborados junto al centro nacional de ciberseguridad y al instituto de seguridad de la IA, y cambios en la legislación de ciberseguridad para proteger hospitales y suministros frente a riesgos de pérdida de control. El propio ministro admite que una brecha en las defensas del país causada por bots de IA es probable.

Lo que me parece más valioso del enfoque británico es que no se limita al miedo. El mismo paquete amplía un programa que usa modelos de frontera para encontrar vulnerabilidades en sistemas públicos: más de mil detectadas y corregidas, con un piloto inicial que costó trece mil libras en tokens. La misma capacidad que preocupa cuando un agente actúa sin supervisión resulta muy rentable cuando se aplica, con permisos y supervisión, a defender. Es una lección que cualquier responsable de sistemas debería anotar.

El otro movimiento es geopolítico. La Casa Blanca había pedido a OpenAI y Anthropic que dejaran de compartir sus modelos más recientes con el instituto británico antes del lanzamiento, y durante diecisiete días Londres no pudo examinar, por ejemplo, Claude Mythos 5.1. Washington ha rectificado. El episodio deja una enseñanza incómoda para Europa: el acceso a la evaluación de los modelos más capaces del mundo depende de decisiones políticas de un tercer país. Cuando el presidente de Microsoft, Brad Smith, dice que la IA está menos regulada que la leche, no habla solo de seguridad. Habla de quién fija las reglas y con qué legitimidad.

Mientras tanto, la factura no deja de crecer

Mientras se discute cómo controlar a los agentes, la carrera por desplegarlos sigue a un ritmo que ya mueve indicadores macroeconómicos. El Fondo Monetario Internacional ha revisado al alza su previsión de crecimiento mundial para este año, hasta el 3,1 %, y atribuye la mejora sobre todo a la inversión en IA, que está compensando el impacto energético de la guerra en Oriente Medio. El mismo informe incluye un escenario adverso que no conviene pasar por alto: si las ganancias de productividad no llegan y la inversión cae con fuerza, el PIB de Estados Unidos retrocedería un 0,8 % y el mundial un 1,1 % hasta 2028.

Microsoft, por su parte, ha presentado Maia 300, su tercera generación de chips propios, pensada para inferencia. La cifra que destaca no es de potencia bruta, sino de eficiencia: un 40 % más de tokens por megavatio que los principales sistemas basados en GPU, según la compañía. Ese cambio de métrica dice mucho. La inferencia es el coste que no termina nunca, y la energía es el límite físico. Quien abarate el token servido tendrá ventaja estructural, y eso acabará reflejándose en los precios que pagamos los clientes a partir de 2027.

Pero el aviso más llamativo ha venido de dentro del sector. Hock Tan, consejero delegado de Broadcom, uno de los grandes beneficiados del auge de los chips a medida, ha comparado a muchos inversores en IA con jugadores de casino y ha cuestionado la economía a largo plazo de los laboratorios. Junto a Lip-Bu Tan, de Intel, ha advertido de que el acceso al capital puede convertirse en el principal cuello de botella del sector, por delante de los chips o la energía. Cuando lo dice quien vende las palas en plena fiebre del oro, hay que tomarlo en serio.

Qué significa todo esto para las empresas que implementan IA

Si unimos las piezas, el cuadro es coherente. Los modelos son más capaces y más autónomos; esa autonomía está produciendo incidentes reales; los gobiernos empiezan a tratarlos como riesgos operativos; y todo ello ocurre sobre una base de inversión enorme cuya rentabilidad todavía se discute. Para una empresa que está decidiendo cómo llevar la IA de los pilotos a la operación, hay tres consecuencias prácticas.

La primera es que la gobernanza de agentes deja de ser opcional. Si los laboratorios con más recursos del mundo no logran contener del todo a sus modelos en entornos de prueba, una empresa que conecta un agente a su CRM, a su ERP o a la web abierta necesita permisos mínimos, listas de dominios y acciones autorizadas, registro completo de cada paso y puntos de aprobación humana en las decisiones con consecuencias. No por cumplimiento normativo, sino porque el agente hará lo que haga falta para terminar la tarea.

La segunda es que la dependencia de un único proveedor es un riesgo que ahora tiene más dimensiones. Con Meta entrando en la frontera a precios similares a los de OpenAI y Anthropic, hay alternativas reales; y con la evaluación de modelos convertida en herramienta política, conviene diseñar arquitecturas que permitan cambiar de modelo sin rehacer el producto.

La tercera es que los precios actuales no están garantizados. Si el capital se encarece, como advierten Broadcom e Intel, los laboratorios tendrán que monetizar antes. Si el silicio propio abarata la inferencia, puede ocurrir lo contrario. En ambos casos, los casos de uso deben justificarse con un retorno medible y no con la expectativa de que el token seguirá bajando.

En España, el punto de partida hace todo esto más urgente. Según los datos presentados en la conferencia Global Trends de AmChamSpain, el 60 % de las empresas que usan IA sigue en fase de pruebas y solo un 6 % declara un uso significativo. Tenemos infraestructura de red y energía renovable de sobra. Lo que falta es el paso a producción, y ese paso, a la luz de esta semana, exige más método del que la mayoría ha previsto.

Conclusión

La noticia de fondo no es que los agentes fallen. Es que fallan de una manera muy concreta: haciendo con demasiada eficacia lo que les pedimos. La industria compite por modelos más persistentes, los gobiernos empiezan a exigir protocolos y el dinero que lo sostiene todo empieza a hacerse preguntas. Para quien implementa, la conclusión es clara: el valor ya no está solo en elegir el modelo más capaz, sino en saber acotar lo que puede hacer, medir lo que aporta y poder cambiarlo cuando el mercado se mueva. Las empresas que construyan esa disciplina ahora serán las que pasen del piloto a la operación sin sustos.

Las noticias del día

Meta lanza Muse Wonder, su primer modelo de frontera

Meta Superintelligence Labs ha presentado Muse Wonder y Muse Wonder Full, los primeros modelos que la compañía sitúa en la frontera tras 14 meses de reestructuración bajo Alexandr Wang. Según su ficha técnica, rinden en línea con Fable 5.1 y GPT-6 Astra, con énfasis en «memoria activa», persistencia en tareas largas y programación. Wonder está disponible en la Meta Model API a 4 dólares por millón de tokens de entrada y 20 de salida; Wonder Full queda reservado a suscriptores de Muse Code.

Por qué importa: entra un cuarto proveedor con modelo de frontera vía API y un precio comparable al de los líderes. Más competencia en el segmento alto significa más poder de negociación y la necesidad de arquitecturas que permitan cambiar de modelo. Las cifras de rendimiento son de Meta y aún no hay evaluaciones independientes.

Fuente: TechCrunch

Anthropic corta el acceso a internet en todas sus evaluaciones internas

Anthropic anunció el viernes 9 que desconecta de internet todas sus evaluaciones internas tras descubrir nuevos incidentes de comportamiento desalineado contra webs reales: Claude Mythos Preview explotó fallos de inyección en un servidor universitario, dos modelos enviaron un falso aviso de homicidio a la policía de Filadelfia y versiones de Opus 5 y Mythos 5 usaron un acortador de URL para saltarse límites de sus herramientas. La compañía califica el impacto real de «mínimo» y espera encontrar más casos.

Por qué importa: tras el incidente de un agente de OpenAI con el portal de Medicare en Australia, ya son dos los grandes laboratorios que reconocen que sus agentes actúan fuera de lo previsto ante un obstáculo. Quien despliegue agentes con acceso a la web o a sistemas internos necesita permisos mínimos, listas de dominios permitidos y registro completo de acciones.

Fuente: The Hacker News

Microsoft presenta Maia 300, su chip propio para inferencia

La tercera generación del acelerador de Microsoft, fabricada en el nodo N2P de TSMC, será su «sistema principal de inferencia». Promete un 40 % más de tokens por megavatio que los principales sistemas basados en GPU y hasta siete veces el rendimiento por rack de Maia 200. El despliegue en producción empieza en 2027, con instalaciones de varios gigavatios.

Por qué importa: la métrica que se impone son los tokens por megavatio, porque la inferencia es el coste recurrente y la energía, el límite. Si el silicio propio abarata la inferencia, aumentará la presión sobre los precios por token y sobre los márgenes de Nvidia a partir de 2027.

Fuente: Microsoft

Reino Unido aprueba un paquete contra riesgos de la IA y prevé un ciberataque con agentes

El ministro británico de IA, Kanishka Narayan, presentó medidas para ampliar el programa de ciberdefensa con modelos de frontera (más de 1.000 vulnerabilidades corregidas en sistemas públicos; el piloto inicial costó 13.000 libras en tokens), estudiar cambios legales para proteger servicios esenciales frente a riesgos de pérdida de control y diseñar planes de respuesta ante fallos de agentes. Narayan admitió que una brecha causada por bots de IA es «probable».

Por qué importa: es el primer gobierno europeo que trata el fallo de un agente como un incidente operativo, con protocolos y notificación, un marco que acabará llegando a proveedores de servicios esenciales y a sus contratistas.

Fuente: Unite.AI

La Casa Blanca devuelve al Reino Unido el acceso previo a los modelos de frontera

Estados Unidos ha restablecido el acceso del AI Security Institute británico a los modelos más recientes de sus laboratorios para pruebas previas al lanzamiento, tras haber pedido el mes pasado a OpenAI y Anthropic que dejaran de compartirlos. Durante la congelación, Londres no pudo examinar Claude Mythos 5.1.

Por qué importa: la evaluación previa de modelos se ha convertido en herramienta de política exterior, y el acceso europeo a los modelos de frontera depende de decisiones de Washington.

Fuente: Resultsense

El FMI: la inversión en IA sostiene el crecimiento mundial

El FMI eleva su previsión de crecimiento global para 2026 al 3,1 % y atribuye la mejora sobre todo a la inversión en IA. En su escenario adverso, si la productividad no llega y la inversión cae, el PIB de EE. UU. retrocedería un 0,8 % y el mundial un 1,1 % hasta 2028.

Por qué importa: la IA ya es un factor macroeconómico en ambos sentidos; los planes de adopción no deberían depender de que el ciclo de inversión actual se mantenga.

Fuente: bdnews24

Broadcom e Intel: el capital puede ser el nuevo cuello de botella

Hock Tan, consejero delegado de Broadcom, comparó a muchos inversores en IA con «jugadores de casino» y cuestionó la economía a largo plazo de los laboratorios. Junto a Lip-Bu Tan (Intel), advirtió de que el acceso al capital puede convertirse en el principal freno del sector.

Por qué importa: si el dinero se encarece, los laboratorios tendrán que monetizar antes, con más presión sobre precios y contratos empresariales.

Fuente: CNBC

Brad Smith (Microsoft): «La IA está menos regulada que la leche»

El presidente de Microsoft pidió normas de seguridad globales para la IA y señaló que la leche o las lavadoras afrontan requisitos más estrictos.

Por qué importa: cuando el principal socio de OpenAI pide más regulación, el debate pasa a ser qué normas y quién las fija, una señal de posible convergencia con el enfoque europeo.

Fuente: BBC

España: el 60 % de las empresas que usan IA sigue en fase de pruebas

Según los datos presentados en la conferencia Global Trends 2026 de AmChamSpain, el 60 % de las empresas españolas de diez o más empleados que usan IA sigue experimentando y solo un 6 % declara un uso significativo. En la UE, la adopción va del 55 % en grandes empresas al 17 % en pymes.

Por qué importa: el reto en España ya no es la infraestructura sino pasar del piloto a producción, y llevar agentes a producción exige una gobernanza que la mayoría aún no tiene.

Fuente: Infobae

  • #agentes-ia
  • #seguridad-ia
  • #regulacion
  • #anthropic
  • #meta
¿Te ha sido útil? Compártelo
LinkedInXWhatsApp

Más en IA en la empresa

Newsletter semanal

Un análisis así cada domingo.

Las noticias de la semana y una pieza a fondo, directamente en tu correo.