Saltar al contenido principal
Esencial8–14 horas

Flujo de analítica con IA verificada

Construye un flujo de analítica para CSV y SQL con cálculos verificados, procedencia, controles de privacidad y un informe ejecutivo reproducible.

prompting analíticovalidación SQLcalidad de datosprocedenciaprivacidadreporting

Escenario

Tarea

Un analista recibe un CSV y una extracción SQL y debe preparar conclusiones para dirección. La IA ayuda a explorar los datos, pero cada cifra y afirmación debe verificarse y ser reproducible.

Ejecución paso a paso

1. Ejecuta una auditoría de datos

Resultado: La calidad de los datos, el significado de los campos y los riesgos de privacidad se conocen antes del análisis.

Tareas

  • Documenta el schema
  • Comprueba valores ausentes y duplicados
  • Marca PII
  • Registra definiciones de negocio

Comprobaciones

  • Las métricas tienen definiciones inequívocas
  • Los campos sensibles no se envían al modelo sin necesidad

2. Construye el plan de análisis

Resultado: Las hipótesis y los cálculos necesarios quedan separados de la narrativa generada por IA.

Tareas

  • Formula las preguntas
  • Define SQL o fórmulas
  • Añade sanity checks
  • Registra rangos esperados

Comprobaciones

  • Cada conclusión tiene evidencia planificada
  • La IA no realiza cálculos ocultos dentro del texto narrativo

3. Ejecuta y verifica el análisis

Resultado: Los resultados pueden reproducirse de forma independiente del modelo.

Tareas

  • Ejecuta cálculos en SQL o Python
  • Compara totales
  • Revisa segmentos extremos
  • Guarda queries y outputs

Comprobaciones

  • Las cifras clave tienen verificación determinista
  • No se mezclan niveles de agregación

4. Crea un informe evidence-first

Resultado: La narrativa no supera los límites de la evidencia.

Tareas

  • Vincula claims con evidencia
  • Añade caveats
  • Marca la incertidumbre
  • Realiza una revisión adversarial

Comprobaciones

  • Se eliminan los claims no respaldados
  • El informe se reproduce a partir de los artefactos

Criterios de aceptación

  • El contrato de datos y las definiciones están registrados
  • Las cifras clave se verifican con código determinista
  • Cada conclusión tiene procedencia
  • Se aplican controles de privacidad
  • El informe ejecutivo incluye caveats y confianza

Rúbrica de evaluación

Cómo se evalúa el resultado

Puntuación mínima: 70/100 · Distinción: 90/100

Data contract y calidad

El schema, las definiciones, la privacidad y las reglas de calidad son explícitos.

25 puntos

Insuficiente

Los campos y métricas son ambiguos.

Competente

Las definiciones y checks están documentados.

Sólido

Existe una capa de métricas reutilizable y tests de datos automatizados.

Evidencia requerida

  • ✓ Enlace al código o artefacto
  • ✓ README con decisiones
  • ✓ Salida de tests o evidencia de runtime
  • ✓ Data contract

Verificación de cálculos

Las cifras clave son reproducibles con código determinista.

30 puntos

Insuficiente

El modelo genera cifras en el texto.

Competente

Las métricas clave están verificadas.

Sólido

Hay reconciliación independiente y regression checks.

Evidencia requerida

  • ✓ Enlace al código o artefacto
  • ✓ README con decisiones
  • ✓ Salida de tests o evidencia de runtime
  • ✓ Cálculos SQL/Python

Provenance de conclusiones

Los claims están vinculados a una query, fórmula o source slice.

25 puntos

Insuficiente

Las conclusiones no tienen evidencia.

Competente

Cada claim clave tiene provenance.

Sólido

El lineage se genera automáticamente.

Evidencia requerida

  • ✓ Enlace al código o artefacto
  • ✓ README con decisiones
  • ✓ Salida de tests o evidencia de runtime
  • ✓ Tabla de evidencia

Calidad del executive report

El informe incluye caveats y confidence y no excede la evidencia.

20 puntos

Insuficiente

Hay claims sin respaldo.

Competente

Claims, caveats e incertidumbre son explícitos.

Sólido

Incluye adversarial review y un resumen adaptado a la audiencia.

Evidencia requerida

  • ✓ Enlace al código o artefacto
  • ✓ README con decisiones
  • ✓ Salida de tests o evidencia de runtime
  • ✓ Informe final