Representación
Compara la fuente y la salida con un tokenizador. Registra el modo de lectura, omisiones y recuperación para medir la reducción de la entrada.
Métricas y metodología
Mide la entrada.Verifica el resultado.
Compara la entrada, el esfuerzo de ejecución y la calidad de la tarea. Utiliza una línea de base reproducible para evaluar LeanCTX en tu propio trabajo.
Tres preguntas diferentes
Mide la entrada, el esfuerzo y el resultado.
Juzga la representación del contexto, el costo de prepararlo y la tarea completada por separado.
Operación
Cuente el tiempo de preparación, la sobrecarga de la herramienta, la entrada y salida del modelo, los reintentos y los efectos de caché. Separe el costo observado de las estimaciones e incógnitas.
Resultado de la tarea
Usa la misma tarea y los mismos criterios de aceptación. Las pruebas y la revisión muestran si el contexto entregado fue suficiente.
Tu repositorio
Evalúa tu repositorio.
Compara las representaciones de contexto en tus archivos. Guarda el resultado con la versión en tiempo de ejecución y la revisión del repositorio.
lean-ctx --version
lean-ctx benchmark run . --json
lean-ctx benchmark report .Estos comandos inspeccionan tu proyecto. No ejecutan un experimento de agente de extremo a extremo controlado ni establecen la calidad de la respuesta.
De diagnósticos a una decisión
Hazlo reproducible.
- Congela la línea base
- Fija la revisión del repositorio, la tarea, el modelo, la configuración de la herramienta y los criterios de evaluación. Documenta qué llamadas cubre LeanCTX.
- Incluye todo el intento
- Cuenta las lecturas de recuperación, reintentos, tiempo de revisión y fallos. Separa los ahorros de contexto de la facturación del proveedor y los descuentos por entrada en caché.
- Publica el alcance
- Indica la carga de trabajo, el tamaño de la muestra, la versión y el método de medición. Informa sobre la variación y las ejecuciones fallidas junto al titular.
Lee la evidencia
Prueba la calidad frente a la fuente.
La estructura de código preservada es evidencia útil, pero no establece una respuesta correcta ni un cambio seguro. Verifica el resultado frente al material original.
Comience con LeanCTX
Pon el contexto a trabajar.
Configura LeanCTX para tu herramienta y evalúa la diferencia en una tarea real.
Primero local. Agnóstico al modelo. Su contexto.