Colibri: expertos MoE entre disco, RAM y VRAM
Crear un registro de benchmarks de Colibri que conserve negativos
Construye trazabilidad antes de intentar otra optimización de inferencia.
Qué aprenderás
- Empezar por registros
- Validar campos engañosos
- Importar mediciones después
Antes de empezar
- Conocimientos básicos de Python y terminal
- Inventario de hardware y almacenamiento
Construye trazabilidad antes de intentar otra optimización de inferencia.
Conclusiones clave
- El registro es una extensión propuesta.
- Negativos y retractaciones se conservan.
- Lo desconocido sigue desconocido.
Empezar por registros
Crea un informe local desde CSV sintético con revisión, caché, E/S y latencia. Etiqueta valores inventados para que una captura no se confunda con un benchmark real.
Es un ejercicio propuesto alrededor del protocolo, no un notebook existente atribuido al proyecto ni una afirmación de haber ejecutado el modelo en esta serie.
Validar campos engañosos
Rechaza una fila de rendimiento sin formato de modelo o estado de caché. Conserva fallos y motivos de exclusión visibles; el gráfico no debe ocultar resultados desfavorables.
Incluye retractaciones vinculadas a hipótesis anteriores. La corrección de alineación del proyecto ilustra por qué conservar cambios de explicación ayuda a auditar conclusiones posteriores.
Importar mediciones después
Tras probar esquema y presentación, incorpora una ejecución autorizada con comando exacto y logs redactados. Alterna base y candidato con modelo y prueba de calidad fijos.
La aceptación exige que cada punto llegue a método, registro y calidad. Un dato ausente permanece desconocido; el informe no debe fabricar ahorros desde información incompleta.
Cómo elegir
| Criterio | Opción A | Opción B |
|---|---|---|
| Best when | You need predictable behavior and easy auditing | You need adaptive optimization and have reliable telemetry |
| Main risk | May leave performance on the table | Can become difficult to explain or debug |
Pasos de implementación
- 1
Crea fixtures claramente etiquetados.
- 2
Prueba campos ausentes y fallos conservados.
- 3
Vincula cada punto con método y evidencia.
Ejemplo para copiar
{"trial":"fixture-only","cache_state":"unknown","throughput":null,"publishable_benchmark":false}Preguntas frecuentes
¿La primera versión necesita pesos?
No. Los registros sintéticos bastan para probar el contrato del informe.
¿Cuál es la aceptación principal?
Cada valor mostrado se remonta a método, registro y evidencia de calidad.
Fuentes
- Colibri / docs/benchmarking.mdFuente verificada 2026-09-23
- Colibri / README.mdFuente verificada 2026-09-23