Rúbrica de evaluación y auditoría del proyecto
La rúbrica desglosa el proyecto en dimensiones observables con niveles de dominio definidos de antemano. Bien usada, no es burocracia: es el contrato entre quien construye y quien evalúa, y la herramienta de auditoría interna del propio equipo antes de entregar.
Las cinco dimensiones
- Valor del problema: decisión real que habilita, no modelo por deporte.
- Correctitud técnica: supuestos, evaluación honesta, métricas bien elegidas.
- Calidad del proceso: datos trazables, pipeline reproducible, código legible.
- Comunicación: hallazgo accionable en el artefacto correcto para la audiencia.
- Ética y seguridad: datos legitimos, sesgos revisados, riesgos mitigados.
Qué hace buena a una rúbrica
Cada nivel se describe con indicadores observables ("la división train-test respeta la serie temporal"), no adjetivos ("buen manejo de datos"). Los criterios redactados después de ver el trabajo dejan de ser criterios: son excusas con formato. La rúbrica se escribe antes, cuando todavía manda el objetivo del curso.
Escala y descriptores
- Cuatro niveles bastan: introductorio, en desarrollo, competente, ejemplar.
- Cada celda del medio se redacta como lo que se vería en el entregable.
- Evita la trampa del "aceptable": si el descriptor cabe en cualquier trabajo, no informa.
Pesos y umbrales
No todo pesa igual: ética y evaluación correctas pueden ser bloqueantes (un proyecto con datos sin licencia no se rescata con buen dashboard). Además del puntaje total, exige un mínimo por dimensión: así no se promedia una debilidad grave con cinco fortalezas cosméticas.
Cómo se audita con evidencia
- Repo en vivo: README, entorno fijo, una corrida que reproduce el resultado central.
- Datos: linaje documentado y muestra accesible con permisos revisados.
- Modelo: métricas por subgrupo y comparación contra una línea base tonta.
- Defensa: preguntas nuevas; si nadie puede explicar una decisión, esa celda no está en competente.
| Pieza de la rúbrica | Qué resuelve |
|---|---|
| Dimensión | qué aspecto del proyecto se juzga |
| Descriptor observable | cómo se ve el nivel en el entregable |
| Umbral mínimo | qué debilidad no se promedia |
| Regla bloqueante | qué falta anula el puntaje total |
Errores frecuentes
- Confundir esfuerzo con resultado: tres mil líneas no salvan una pregunta mal formulada.
- Rúbrica tan genérica que evalúa presentation skills y no ciencia de datos.
- Jueces que puntúan por separado y convergen en mesa: primero independiente, después calibración.
- Entregar solo el modelo final: sin entorno ni datos, la auditoría es imposible.
Ejemplo resuelto: auditoría de un modelo de riesgo crediticio
- Definir las cinco dimensiones y tres reglas bloqueantes (licencia de datos, testeo en futuro, datos personales expuestos).
- Redactar descriptores observables por nivel para la dimensión técnica y la de proceso.
- Dos auditores puntuan en paralelo sobre el repo y la nota, sin hablar.
- Calibrar en mesa solo las celdas con diferencia mayor de un nivel.
- Dictaminar: aprobado, condicionado a subsanar o a reponer evidencia.
- Devolver el mapa de evidencia junto con la nota: la rúbrica también enseña.
¿Para qué sirve en la realidad?
La misma rúbrica que evalúa un curso sirve de retrospectiva de proyecto, de definición de "terminado" en un sprint y de filtro de contratación en equipos de datos. Auditar con criterios es una competencia transferible del profesionista.
¿Qué distingue a un buen descriptor de rúbrica?
Un proyecto con una falta bloqueante (por ejemplo, datos sin licencia) puede aprobarse si el promedio de las demás dimensiones es alto.
La práctica de entregar la rúbrica junto con el proyecto, antes de que nadie lo empiece, es lo que se llama rúbrica .
Clasifica cada fase de la auditoría con rúbrica.
Antes
Durante
Después
Une cada elemento con su función.
Auditoría de proyectos
Rúbrica de proyecto
# Rúbrica y auditoría ## Dimensiones ### problema ### técnica ### proceso ### comunicación ### ética ## Diseño ### descriptores observables ### niveles ### pesos y bloqueantes ## Auditoría ### evidencia en repo ### jueces independientes ### calibración ### decisión y mapa
Rúbrica de evaluación (Wikipedia)
Tipos de rúbrica, analítica versus holística, y su debate psicométrico.
Evaluación de programas (Wikipedia)
Marco conceptual para juzgar calidad con criterios explícitos y evidencias.
Vas a entregar un clasificador de becas estudiantiles. Escribe los cuatro descriptores observables (del introductorio al ejemplar) para la dimensión "evaluación honesta" y define una regla bloqueante que protegería a los solicitantes aunque el modelo tuviera muy buena exactitud global.