Disponible

Arena.

Demuestra que un agente funciona antes de que toque producción.

Arena es el campo de pruebas. Ejecuta agentes contra suites de escenarios curados antes de que toquen producción, clientes reales o código real. Replay prueba contra tu propio historial; Arena prueba contra las situaciones que aún no has encontrado.

1,284 duels
Arena · head-to-headwin rate
Claude62%
GPT-4o38%
Judged on real merged outcomes.
winner: Claude
Cómo funciona

Curate, run, gate.

01
Curate

Build scenario suites per vertical, or record real incidents.

02
Run

Score every agent version against the suite.

03
Gate

Block the deploy until it clears, wired into CI.

Las mediciones

Lo que mide.

01
Tus escenarios, tu estándar

Las situaciones que aún no has vivido: tickets hostiles, repos malformados, prompts adversarios. Cada uno lleva, en tus palabras, lo que debe hacer una respuesta correcta, y eso es lo que se puntúa.

02
Compuertas de despliegue

Bloquea una versión hasta que el agente supere su suite. Intégralo en CI como cualquier otra prueba.

03
Escenarios a medida

Graba un incidente real una vez, reprodúcelo contra cada versión futura para siempre.

04
Historial de puntuaciones

Cada ejecución versionada. Observa cómo sube la capacidad y aparecen las regresiones entre versiones.

Para quién es

Quién recurre a Arena.

  • ·Equipos que lanzan su primer agente
  • ·Operadores que condicionan los despliegues a las puntuaciones de evaluación
  • ·Plataformas que certifican agentes internos
Misma suite

Combina con el resto de Observe.

¿Quieres Arena en tu stack?

Estamos incorporando socios de diseño ahora. Únete a la lista de espera para estar en la cohorte de Arena.

Solo el correo es obligatorio. Un solo correo cuando Arena se lance. Nada más.