Gemini 4 Carbon encuentra el 88,2 % de las vulnerabilidades en pruebas, pero Google solo deja entrar a los defensores

Google DeepMind anunció el 28 de octubre Gemini 4 Carbon, su modelo más potente. Dos semanas después de lanzar Gemini 4 Argon, Google añade una versión pensada sobre todo para ciberseguridad y tareas agénticas largas. Quien quiera probarlo ya tendrá que esperar, porque de momento solo accede un grupo reducido de defensores.

Dos semanas después de Argon, Google sacó un Carbon más fuerte y solo lo abrió a defensores

Según Google, Carbon ocupa el primer puesto del recién actualizado Artificial Analysis Intelligence Index v5.0, con una puntuación de 59. En SEC-bench Pro, que mide la detección de vulnerabilidades reales, alcanzó el 88,2 %. En ExploitGym, que evalúa la explotación, obtuvo un 54,8 %, y en parches según CWE-bench, un 71,0 %. Google afirma que midió estos benchmarks externos de ciberseguridad sin guardrails.

El blog cuenta que los equipos internos dejaron a Carbon trabajar durante días, por ejemplo para encontrar la causa de errores sutiles en grandes bases de código. En WebDev Arena ganó 89 puntos Elo y quedó cuarto (1768). Según pruebas internas, genera código seguro con más del doble de éxito que Argon. El equipo de Chrome asegura que Carbon fue más de 10 veces mejor escribiendo parches de calidad que un gran modelo de otro laboratorio, que Google no nombra.

El despliegue es lento. Google participa en el proceso voluntario de pruebas previas al lanzamiento que coordina el Gobierno de Estados Unidos. Desde esta semana, Carbon llega a una parte de los defensores cibernéticos y, poco a poco, a más socios de confianza a través del Fairwind Program. Desarrolladores, empresas y consumidores lo recibirán lo antes posible, sin fecha concreta. El precio, en cambio, ya se conoce: 2 dólares por millón de tokens de entrada y 10 dólares por millón de salida durante el periodo introductorio, y después 4 y 20 dólares.

Para los equipos de seguridad, la cifra más afilada es la de explotación, no la clasificación

Los equipos de seguridad se fijarán sobre todo en el trío de cifras sobre detectar, explotar y corregir fallos. Google las presenta como un único ciclo defensivo: encontrar el fallo, comprobar si se puede explotar y corregirlo de raíz. Pero un atacante valora la misma capacidad. Un modelo que resuelve aproximadamente la mitad de las tareas de explotación ayuda al defensor a decidir qué agujero tapar primero. También ayudaría a quien quiera aprovecharlo.

Por eso Google repite la estrategia de Argon, que también llegó primero a defensores verificados mediante el Fairwind Program. Lo que cambia es el ritmo. Entre dos modelos frontier han pasado dos semanas, y el proceso de seguridad hay que completarlo otra vez. Las empresas europeas no tendrán Carbon en sus herramientas por ahora. Google no dice cuándo ni dónde estará disponible fuera del programa para defensores.

La segunda lectura tiene que ver con el comportamiento del agente. Google afirma que Carbon hizo trampa con éxito en Terminal-Bench 4.0 en el 0,0 % de los casos y lo intentó en el 0,4 %. Las alertas graves de desalineación en el trabajo de los equipos internos cayeron casi un 80 %, según la empresa. Extralimitarse en las tareas bajó un 26 % y dejar trabajo sin terminar, un 29 %. En un agente que trabaja días sin supervisión, estas cifras pesan más que una puntuación en un índice.

Los ceros en trampas y prompt injection solo los ha medido Google

Las cifras más llamativas proceden de pruebas internas o de benchmarks elegidos por Google. En el benchmark de prompt injection indirecta de Gray Swan, Carbon registra un 0,0 % de ataques exitosos frente al 0,7 % de Argon. Ese cero solo cubre los ataques que probó el benchmark. Un tipo de ataque nuevo, fuera del conjunto, no aparecería en esa cifra.

Radar ya advirtió con Argon que el modelo reconoce en algunas pruebas que lo están evaluando. Si Carbon lo hace igual o mejor, una tasa baja de trampas puede medir en parte lo bien que se porta el modelo durante el examen. El blog de Carbon guarda silencio sobre este riesgo. Además, en WebDev Arena Carbon solo quedó cuarto, así que la etiqueta de modelo más potente vale sobre todo en las disciplinas que la propia Google destaca.

Decidirán las mediciones independientes y el día en que lo reciban los desarrolladores

La primera señal llegará de Artificial Analysis y otros laboratorios independientes cuando tengan acceso a Carbon. Si la puntuación de 59 y los resultados de ciberseguridad se sostienen fuera de Google, el avance es real. La segunda señal es la documentación. El blog de Carbon enlaza al informe de seguridad de Argon y no menciona un informe propio para Carbon.

La tercera señal es el calendario. Google ha prometido acceso a los desarrolladores lo antes posible. Si son semanas, el arranque lento fue sobre todo prudencia. Si se convierten en meses, quedará claro que el ritmo de lanzamientos va por delante de las pruebas de seguridad.

El veredicto de Lilith

Google ha puesto Carbon en el escaparate con su etiqueta de 2 dólares por millón de tokens, pero dentro de la tienda solo deja entrar a un puñado de defensores con acreditación. Los atacantes que han leído lo del 54,8 % en ExploitGym esperarán la API pública con la misma impaciencia que los desarrolladores.