BC-Bench Guide

BC-Bench 路 Comparaciones e infraestructura

Revisi贸n documental: 10 de octubre de 2026. Fuente: BC-Bench 0.15.0, commit c84b793a8a9b7422af9512dfe67baeb2bc666d95. No se han ejecutado instalaciones, agentes, contenedores ni benchmarks en esta actualizaci贸n.

Dise帽o m铆nimo

Brazo Cambio controlado
A Configuraci贸n upstream sin personalizaci贸n.
B Mismo modelo, harness, tareas y categor铆a; a帽adir BCQuality.
C Mismas condiciones; a帽adir una distribuci贸n concreta de ALDC.
D Combinaci贸n ALDC + BCQuality, con revisiones y prompts registrados.

Esta tabla propone un experimento; no contiene resultados. Si cambias tambi茅n modelo, prompts, servidor MCP o instrucciones de uso, ya no puedes atribuir el cambio al plugin por s铆 solo.

Mant茅n iguales dataset, categor铆a, evaluador, infraestructura y presupuesto. Registra por separado versi贸n del benchmark y versi贸n del harness. BC-Bench impide agregar resultados de versiones de benchmark diferentes; versiones diferentes del harness forman agregados separados.

Infraestructura y scripts

No copies los workflows upstream suponiendo que funcionan en cualquier cuenta. Revisa runners, artefactos BC, autenticaci贸n de agentes, repositorios internos y publicaci贸n de resultados seg煤n CONTRIBUTING.md.

La plantilla Run-QuickEvaluation.ps1 de esta gu铆a ahora es un smoke test de generaci贸n de parche. Su nombre se conserva para enlaces existentes; no realiza evaluaci贸n ni despliegue. Los YAML baseline/full son snapshots de configuraci贸n para revisar, no entornos completos ni recomendaciones de mejora.

Haz primero una tarea, despu茅s una ejecuci贸n de prueba del workflow y finalmente las repeticiones que justifique tu objetivo. No introduzcas credenciales en archivos de configuraci贸n versionados.

Sigue con interpretaci贸n.