El Entrenador de Evaluación Kirkpatrick skill para Claude

El problema que resuelve la skill está señalado en el propio archivo y es reconocible para cualquiera que haya organizado alguna vez una formación. Una encuesta de satisfacción te dice cómo se sintió la gente. Los niveles 3 y 4 te dicen si algo ha cambiado de verdad. La mayoría de las evaluaciones se quedan en el nivel 1, y entonces solo queda un grupo de participantes contentos y una dirección que pregunta qué ha aportado. Esta skill lleva el plan de medición hasta las cifras que mira esa dirección, sin fingir que eso demuestra que la causa fue la formación.

Está escrita para formaciones, onboarding, procesos de cumplimiento y programas de adopción de IA. No hace falta conocer Kirkpatrick de antemano: los niveles, la lógica de diseño y las trampas están en el archivo. Forma parte de la biblioteca de skills NL que ponemos a disposición de forma gratuita desde el servicio IA y automatización, sin cuenta y sin correo comercial después. Si eres nuevo con las skills, qué son las skills de Claude NL explica primero qué es exactamente lo que descargas.

Hay algo que debes saber de antemano, y el archivo es estricto en esto: esto es un marco de medición, no un diseño didáctico ni una investigación científica de efectos. El plan de medición hace que el efecto sea plausible y discutible. Sin grupo de control muestra correlación y no causa, y esa frase, según la skill, también debe aparecer en tu informe.

La medición se piensa después de todo. Para entonces la formación ya está diseñada, los participantes ya están elegidos y el momento para una medición inicial ya ha pasado. El New World Kirkpatrick Model le da la vuelta a esto: empiezas por el nivel 4, el resultado de negocio deseado, y trabajas hacia atrás hasta lo que la gente debe hacer, saber y experimentar. Esa secuencia se sigue al pie de la letra: primero la pregunta de qué resultado debe tocar la formación, y solo después se construye el nivel 1.

No hay un comportamiento señalable. Sin una descripción concreta de qué hace la gente de forma distinta tras la formación, no hay nada que observar. Por eso la skill hace esa pregunta primero, y por eso no sigue adelante sin una respuesta. En el archivo está dicho sin rodeos: sin comportamiento señalable no hay plan de medición.

Los indicadores son sentimiento, no comportamiento. Muestra compromiso no es un indicador, porque dos responsables verán ahí cosas distintas. Comparte cada semana una forma de trabajar con el equipo sí lo es, porque ocurrió o no ocurrió. Se niega a entregar esquemas de observación sin comportamiento observable, y precisamente en esa diferencia se atascan la mayoría de las mediciones de comportamiento.

Y el nivel 4 se salta o se exagera. Se salta porque es difícil, o se le atribuye a la formación toda una subida de KPI. Ninguna de las dos cosas ocurre aquí, y es una elección deliberada. Vincula de tres a cinco KPI existentes con su fuente de datos y su frecuencia de medición, y señala en el mismo momento qué otros factores mueven ese mismo KPI.

En forma de diff, con indicadores del ejemplo de la skill. A la izquierda lo que suele aparecer en un formulario de observación, a la derecha lo que realmente puedes marcar.

Después viene la teoría sobre la que se apoya la skill, redactada en el propio archivo. Donald Kirkpatrick describió sus cuatro niveles de evaluación en 1959 en una serie de artículos en el Journal of the American Society of Training Directors, surgidos de su tesis. En 1994 recopiló el modelo en Evaluating Training Programs: The Four Levels. Su hijo James y su nuera Wendy lo actualizaron en 2016 como el New World Kirkpatrick Model, con más énfasis en diseñar la medición de antemano y en el apoyo después de la formación.

El núcleo del archivo es una lista de ocho acciones fijas. Primero pregunta de forma dirigida: el objetivo de la formación, el público objetivo y el tamaño del grupo, la duración y la forma, y sobre todo el cambio de comportamiento deseado en el puesto de trabajo. Trabaja hacia atrás desde el nivel 4 y busca de tres a cinco KPI existentes. Construye el nivel 1 como una encuesta corta sobre relevancia, aplicabilidad e implicación, con una puntuación objetivo que tú fijas. El nivel 2 se convierte en un conjunto de criterios de evaluación para una prueba previa y posterior que encajan con el comportamiento deseado.

Construye el nivel 3 como un esquema de observación para el día 30, 60 y 90, con tres a cinco indicadores observables por momento de medición y un formato para rellenar. El nivel 4 se convierte en el enlace entre esos indicadores y los KPI, con la frecuencia de medición, la fuente de datos y la observación de qué otros factores se mueven a la vez. Indica con honestidad los recursos necesarios: bastan una herramienta de encuestas, una hoja de cálculo y un formulario de observación. Y entrega un cronograma del día 0 al día 90, con el responsable de cada momento.

Antes de construir nada, la skill repasa una lista de comprobación de entrada obligatoria: el objetivo de la formación en una frase y el cambio de comportamiento deseado, público objetivo y número de participantes más si sus responsables quieren colaborar en la observación, duración y formato, los KPI de empresa existentes con sus valores actuales si los tienes, las herramientas disponibles, y el plazo en el que la organización quiere ver resultados más quién debe aprobar el plan de medición. Solo pregunta después por lo que falta.

La salida sigue un orden fijo de seis partes: objetivo y cambio de comportamiento con los supuestos que debes confirmar, luego los cuatro niveles cada uno con su momento de medición y su responsable, y por último el cronograma con todos los momentos de medición en fila. Si quieres aprender a escribir tú mismo este tipo de archivos, escribir un SKILL.md NL explica la estructura.

El modelo viene de Donald Kirkpatrick. Describió los cuatro niveles en 1959 en una serie de artículos en el Journal of the American Society of Training Directors, surgidos de su tesis, y los recopiló en 1994 en Evaluating Training Programs: The Four Levels. Ese sigue siendo el esqueleto de cualquier plan de medición que entrega la skill.

La lógica de diseño viene de James y Wendy Kirkpatrick. Su New World Kirkpatrick Model de 2016 pone el énfasis en dos cosas que en la versión original quedaban poco tratadas: diseñar la medición de antemano en lugar de pensarla después, y el apoyo tras la formación. De ahí viene el orden invertido de la FIG.02.

El quinto nivel viene de Jack Phillips. Return on Investment in Training and Performance Improvement Programs, de 1997, añadió el ROI por encima del nivel 4, con sus correspondientes salvedades. La skill cita esa fuente, pero no calcula ningún ROI ni se inventa ningún porcentaje. Si quieres determinar las cifras detrás de un cálculo así, te conviene más la skill Entrenador de Estrategia de Precios NL, que trata precisamente esa cuestión de valor.

La crítica viene de Alliger y Janak. Su artículo Kirkpatrick's Levels of Training Criteria: Thirty Years Later, de 1989, en Personnel Psychology, trata sobre la causalidad asumida entre los niveles: la idea de que los participantes satisfechos también aprenden, y que quien aprende también lo aplica, no resulta evidente. Esa fuente está en el archivo y explica por qué la skill nunca presenta el nivel 1 como predictor del nivel 2.

Incluso sin instalar la skill puedes mejorar tu propia evaluación con estos principios: empieza por el resultado que quieres ver, describe comportamiento que puedas marcar, acuerda un responsable por cada momento de medición, y señala en tu informe qué más presiona sobre ese KPI.

Después, el uso es simple: describe tu objetivo de formación y, sobre todo, qué debe hacer la gente de forma distinta después. Si te atascas al descomprimir o al encontrar la carpeta correcta, eso está explicado paso a paso en instalar skills de Claude NL. Y si quieres primero la explicación más amplia sobre trabajar con IA, la encuentras en la base de conocimiento NL.

También hay situaciones en las que es mejor dejarlo de lado, y el propio archivo las menciona. Diseñar la formación es una de ellas: esto es un marco de medición, no un diseño didáctico. Qué pasa en la formación y cómo se estructura el contenido es trabajo para otro tipo de ayuda, por ejemplo la skill Entrenador de la Taxonomía de Bloom, que escribe objetivos de aprendizaje y preguntas de evaluación por nivel cognitivo. La prueba estadística es el segundo límite: el plan de medición hace que el efecto sea plausible y discutible, no es una investigación científica de efectos con grupo de control. Y el tercero es la evaluación de personas: las puntuaciones de observación están ahí para evaluar la formación, no para rellenar un expediente.

Otro límite honesto que la propia skill señala: en grupos pequeños y plazos cortos, el nivel 4 a menudo no se puede demostrar con solidez. Eso no significa que lo saltes, sino que el informe cuenta con honestidad qué puedes ver y qué no. Si trabajas hacia una decisión de continuar o parar, esa distinción importa más que la cifra en sí.

La pregunta más difícil de todo este marco es la primera: qué hace la gente de forma demostrablemente distinta después de la formación. Quien tenga una respuesta clara a eso, tiene el plan de medición medio hecho y normalmente también una formación mejor. Si quieres que tu equipo se ponga con la IA y poder mostrar de inmediato qué cambia con ello, esa es exactamente la combinación que ofrecemos en las Formaciones en IA. Y si quieres seguir hablando de lo que la IA puede asumir además en tu organización, desde skills sueltas hasta automatización completa, lo hacemos sin más en una conversación.