Dias et al. (2021) — Instrumento PINTS para evaluar NTS de perfusionistas

Dias, R. D., et al. (2021). A Tool to Assess Non-Technical Skills of Perfusionists in the Cardiac Operating Room. The Journal of Thoracic and Cardiovascular Surgery, 163(4). https://doi.org/10.1016/j.jtcvs.2021.06.052

Resumen del artículo

Artículo fuente del PINTS (Perfusionists’ Intraoperative Non-Technical Skills), el primer instrumento diseñado de manera específica para evaluar las habilidades no técnicas del perfusionista en el quirófano cardíaco. Un panel de expertos construyó la herramienta a partir de las taxonomías existentes (NOTSS, ANTS, SPLINTS) y la adaptó a las funciones del perfusionista durante la circulación extracorpórea. El instrumento tiene cuatro categorías conductuales (toma de decisiones, conciencia situacional, gestión de tareas y liderazgo, trabajo en equipo y comunicación), cada una con cuatro elementos, calificados en una escala de ocho puntos que va de 0,5 a 4,0.

Según la descripción de la guía maestra, la prueba del instrumento se hizo con videos de escenarios evaluados por 60 evaluadores, con una fiabilidad interevaluador moderada (CCI 0,735) y similar entre evaluadores novatos y expertos, lo que sugiere que un entrenamiento breve puede bastar para usarlo. Es la referencia central de la tesis, porque el PINTS será la variable dependiente principal en su versión adaptada al español.

Ideas clave

1. Estructura del PINTS: 4 categorías por 4 elementos, escala de 8 puntos de 0,5 a 4,0, en la tradición de las escalas conductuales ancladas.
2. Fiabilidad moderada y homogénea: CCI de 0,735 sin diferencias claras entre evaluadores novatos y expertos.
3. Derivación de taxonomías previas: el instrumento hereda categorías de ANTS y NOTSS pero define conductas propias del manejo de la bomba.
4. Condiciones de evaluación reproducibles: uso de videos y evaluadores entrenados que la tesis debe replicar para reportar su propia fiabilidad.
5. Advertencias de los comentarios editoriales: Kilmarx et al. y Cotza et al. señalan limitaciones que conviene anticipar en la adaptación.

Citas textuales relevantes

Nota metodológica: esta nota se elaboró a partir del resumen y de la descripción detallada de la referencia en la guía maestra. No existe PDF en la carpeta de referencias, aunque es la lectura prioritaria número uno del proyecto. Se requiere el texto completo (correo al autor ya redactado) para transcribir literalmente las definiciones de las 4 categorías y los 16 elementos, indispensables para la adaptación transcultural. Las cifras (CCI 0,735; 60 evaluadores; escala 0,5 a 4,0) provienen del abstract y de la guía y deben confirmarse con página.

Conexión con la tesis de Sandra

Aporte de los autores: el único instrumento específico para NTS de perfusionistas, con estructura clara y fiabilidad inicial documentada. Lectura propia para la tesis: el PINTS atraviesa los tres capítulos. En el Cap 1 es la prueba de que el campo reconoció al perfusionista como rol con NTS propias solo en 2021, y de que aún no existe versión en español ni validación en América Latina (vacío que cubre el objetivo específico 1). En el Cap 2 sus cuatro categorías son las dimensiones del constructo que se define y se operacionaliza. En el Cap 3 es la variable dependiente: la tesis debe reproducir sus condiciones de evaluación (grabaciones de los escenarios en la plataforma virtual, dos evaluadores entrenados y cegados) y reportar fiabilidad por categoría, ya que las categorías cognitivas suelen mostrar menor acuerdo. La rúbrica del PINTS también puede convertirse en la lógica de retroalimentación de la IA adaptativa, siempre que la calificación automática se contraste con la humana. Se conecta con n-1-14 (comentarios editoriales), n-1-11 (ANTS como antecesor), n-1-1 y n-1-2 (exigencias psicométricas para instrumentos de NTS).

Preguntas orientadoras

1. ¿Qué pasos de adaptación transcultural (traducción, retrotraducción, juicio de expertos perfusionistas hispanohablantes, prueba piloto) seguirá Sandra para el PINTS en español, y con qué muestra piloto antes de los 150 participantes?
2. ¿Cómo se entrenará a los evaluadores latinoamericanos con videos de la plataforma virtual para alcanzar al menos el CCI de 0,735 reportado por los autores?
3. ¿La escala de 0,5 a 4,0 tiene sensibilidad suficiente para detectar el cambio esperado (d = 0,50) entre el grupo experimental y el de lista de espera?
4. ¿Qué elementos del PINTS pueden calificarse de manera automática por la IA a partir de las acciones y verbalizaciones del participante, y cuáles requieren juicio humano?

Conexiones

• Subárea: 1-Taxonomías NTS perfusión
• Notas relacionadas: n-1-14, n-1-11, n-1-1, n-1-2
• Autores: Dias, R. D. y colaboradores

Mi reflexión

Graba tu reflexión de voz o escríbela usando los controles que aparecen abajo.

Mi reflexión (transcripción)

Transcripción de la grabación de voz

Transcripción automática (Whisper) revisada: se corrigieron nombres propios y términos técnicos; [?] marca pasajes inciertos.

Bueno, contestando estas preguntas del instrumento PINTS, entonces dice qué pasos de adaptación transcultural se utilizará, pues voy a utilizar la herramienta de Cosmin, donde también me habla de traducción, retrotraducción, juicio de expertos, la prueba piloto, para poder continuar y obtener una muy buena validación de este instrumento a nivel de español.

¿Cómo se entrenarán los evaluadores latinoamericanos con videos de plataforma para alcanzar al menos esto reportado por los autores?

Hay un procedimiento específico, esto es asesorado por una empresa experta en hacer estos escenarios virtuales.

La escala de 05 a 4 tiene sensibilidad suficiente para detectar el campo esperado entre el grupo ¿Puedo experimentar el lista de espera?

Sí, la idea es desarrollarlo tal cual como lo manifestó el grupo del doctor Díaz, entonces se espera poder contar con ese cambio esperado.

¿Qué elementos de PINTS pueden calificarse de manera automática a partir de las acciones y la realización del participante y cuál es lo que requiere en juicio humano?

La idea es tenerlas todas, obviamente una retroalimentación muy básica, muy inmediata de la IA para motivar al perfusionista, no obstante para eso se va a hacer la preparación del evaluador para darle la retroalimentación ya con la humanización correspondiente y obviamente con el contexto.

Transcripción de la grabación del 29-09-2026

Transcripción automática (faster-whisper) revisada: se corrigieron nombres propios y términos técnicos; [?] marca pasajes inciertos.

Bueno, vamos con el instrumento de PINTS. Dice que pasos de adaptación transcultural. Seguirá Sandra para el PINTS en español y con que muestra pilotos antes de los 150. Bueno, esto ya lo habíamos contestado, pero vuelvo a decirlo. Se va a hacer todos los pasos que exigen para la validación de un instrumento, como es los que detallan ahí, la traducción, la retrotraducción, el juicio de expertos perfusionistas, la respectiva prueba piloto, y pues trabajaremos con una muestra antes de los 150 participantes de acuerdo al número de videos que vamos a escoger. Entonces, es el número de observaciones que vamos a tener. Entonces, probablemente van a ser 20 perfusionistas.

¿Cómo se entrenarán los evaluadores latinoamericanos con videos de la plataforma virtual para alcanzar un índice de correlación interevaluador de 0.7 reportada por los autores? Pues se realizará un programa como tal, con un respectivo check list para que no tengamos ningún error y poder disminuir al máximo posible los sesgos. La escala de 0.5 a 4, perdóname, pero si tienes alguna lista de chequeo o algún programa específico para entrenar estos evaluadores, similar al que hizo PINTS, que es lo que pienso seguir, te agradecería que me lo enviaras. La escala de 0.5 a 4 tiene sensibilidad suficiente para detectar el cambio esperado de 0.5 entre grupo experimental y lista de espera. Vamos a hacer una prueba de estadística, primero con los 10 evaluadores primeros y luego con los otros 10 para ver si puede aumentar. Se cree que sí tiene ese cambio esperado.

¿Qué elementos de PINTS pueden calificarse de manera automática por la IA a partir de las acciones y actualizaciones del participante y cuáles requieren juicio aparte? Creemos que la IA nos puede ayudar con la parte más técnica, no obstante lo que es liderazgo, trabajo en equipo, comunicación, si consideramos que lo debe hacer un par o un evaluador para sobre todo rescatar esa parte emocional del participante.