Recomendados
Recomendados
Más contenido relacionado
Similar a Fiabilidad de la escala evem para medir la entrevista motivacional en atencion primaria
Similar a Fiabilidad de la escala evem para medir la entrevista motivacional en atencion primaria (10)
Fiabilidad de la escala evem para medir la entrevista motivacional en atencion primaria
- 1. Fiabilidad de la escala EVEM para medir la Entrevista Motivacional en Atenció n primaria Manuel Campíñ ez, EBA Vallcarca Josep Maria Bosch, CAP Encants Luis Pé rula, Distrito Sanitario Có rdoba y Guadalquivir Juan Carlos Arbonies, CS Beraun Jesús Novo, CS A Milagrosa Remedios Martín, EBA Vallcarca Grupo Investigador estudio Dislip-EM
- 2. Objetivo: Valorar la fiabilidad de la Escala de valoració n de la Entrevista Motivacional (EVEM ), diseñ ada para evaluar el grado de integridad de una Entrevista Motivacional (EM) por parte de los profesionales de Atenció n Primaria (AP).
- 3. Marco teó rico MISC !!! • BECCI ??? Se detecta la necesidad de disponer de una escala de medida de la integridad de la EM en el á mbito de la AP en nuestro entorno.
- 4. Mé todos • Se diseñ a la escala y se valora su validez de constructo y de contenido • Se obtiene una escala multidimensional de 25 ítems que sigue un modelo teó rico de EM
- 5. CICAA-M 2008
- 6. Mé todos • Despué s de un proceso de refinamiento de la escala, se obtiene la escala multidimensional EVEM 3.0. • Se trata de una escala con 12 items, y con valoraciones de 0-4..
- 8. Mé todos • Para valorar la fiabilidad de la escala EVEM 3.0 se evalú finalmente 10 entrevistas videograbadas de an mé dicos de AP en condiciones clínicas habituales.
- 9. Mé todos • 4 expertos en entrevista motivacional, de manera ciega e independiente cumplimentan los items de la escala.
- 10. Mé todos • • • • 4 observadores. Escala con 12 items, valoraciones 0-4. 10 entrevistas para analizar. Total de 66 posibles mediciones interobservador a analizar.
- 11. Mediciones de la escala EVEM • Fiabilidad, Concordancia interobservador, mediante el Coeficiente de Correlación Intraclase (CCI). • Consistencia interna de los mediante el Alpha de Cronbach –alfa. items
- 12. Resultados • La fiabilidad de la escala es excelente, con un CCI global de 0,82. • El grado de concordancia interobservador oscila en el rango de 0,72-0,96 • La consistencia interna de la escala es muy buena con un alfa de Cronbach >0,9
- 13. Resultados. Fiabilidad. % Concordancia interobservador (CCI) 100 90 80 criterios de Jiménez. (n=66) 68 70 60 Buena-Moderada 50 Aceptable 40 Baja 30 23 20 9 10 0 Concordancia Interobservador •>0,9 muy buena reproductibilidad. •0,71-0,90 Buena •0,51-0,70 moderada •0,31-0,5 aceptable •<0,31 pobre reproductibilidad
- 14. Resultados • La fiabilidad de la escala es excelente, con un CCI global de 0,82. • El grado de concordancia interobservador oscila en el rango de 0,72-0,96 • La consistencia interna de la escala es muy buena con un alfa de Cronbach >0,9
- 15. Resultados. Consistencia interna Consistencia interna. Alfa de Cronbach (n=10) 1 0,95 Observador 1 0,9 Observador 2 0,85 Observador 3 0,8 Observador 4 0,75 0,7 Consistencia Interna (alfa de Cronbach) •alfa 0,877 •alfa 0,979 •alfa 0,856 •alfa 0,817
- 16. Conclusiones La escala EVEM se afianza como una escala fiable para evaluar la EM en encuentros clínicos de AP
- 17. !! ! s ia c ra G
Notas del editor
- En este estudio presentamos los datos referentes a la concordancia interna e interobservador de la escala EVEM, que evalúa la integridad de la EM en un contexto de Atención Primaria. Esto es, si la escala mide lo que tiene que medir (consistencia interna). Y si las mediciones son las mismas cuando la escala la utilizan diferentes observadores, es decir, si es fiable.
- Hasta ahora disponíamos esencialmente de 3 instrumentos para medir la EM. El MISC es una escala compleja que evalúa respuesta del profesional y del paciente, de difícil aplicación y que se utiliza sobre todo en investigación de tipo epistemológico. Un derivado del MISC, la MITI, es la escala que más se utiliza actualmente. Evalúa segmentos de media hora mínimo de entrevista, en transcripción de audio. No tiene en cuenta el lenguaje no verbal ni el comportamiento del paciente. El BECCI se diseñó para medir la EM en contextos de AP, pero responde a un modelo teórico que no es estrictamente EM (nosotros mismos hicimos la traducción validada al castellano) y nos resultó incompleto para valorar el método tal y como lo aplicamos (seguimos más un modelo de EM “pura”).
- El diseño de la escala se hizo partiendo del CICAA, y en 3 rondas de delphi se obtuvo una escala multidimensional de 25 ítems que inicialmente se llamó CICAA-Motivacional. Su validez de constructo y de contenido fueron presentados en el taller nacional de 2008 en Guadalajara y posteriormente en la primera conferencia internacional de EM en Suiza.
- Éste era el aspecto de la escala, con las medias de puntuaciones de los 16 observadores y sus varianzas, en 2008.
- El proceso de refinamiento ha supuesto simplificar mucho la escala, agrupar unos ítems y eliminar otros. El propio modelo de EM ha evolucionado a lo largo de estos 5 años y ha sido necesario adaptar la escala a estos cambios, de la segunda a la tercera edición del libro de EM. Se han analizado en el proceso decenas de entrevistas y se ha ido modificando en función de los resultados de psicometría que obteníamos (índices kappa) y de las opiniones de los expertos que han participado en el entrenamiento en el último año y medio. Los datos que presentamos hoy se refieren a las 10 últimas grabaciones analizadas con la escala.
- El resultado es una escala de 12 ítems (11 de estrategias + 1 de espíritu con cuatro subcategorías), que ha cambiado considerablemente desde aquel CICAA-Motivacional de 2008 y que está ya en su tercera versión.
- El proceso de refinamiento ha supuesto simplificar mucho la escala, agrupar unos ítems y eliminar otros. El propio modelo de EM ha evolucionado a lo largo de estos 5 años y ha sido necesario adaptar la escala a estos cambios, de la segunda a la tercera edición del libro de EM. Se han analizado en el proceso decenas de entrevistas y se ha ido modificando en función de los resultados de psicometría que obteníamos (índices kappa) y de las opiniones de los expertos que han participado en el entrenamiento en el último año y medio. Los datos que presentamos hoy se refieren a las 10 últimas grabaciones analizadas con la escala.
- El proceso que culmina en los datos que ofrecemos hoy se inicia hace 5 años y es el producto de un escala inicialmente diseñada por 16 expertos en EM. El refinamiento lo han realizado dos personas, y al entrenar a los observadores que iban a participar en el proceso de validación de la escala se ha continuado este proceso de refinamiento, detenido a fecha de hoy por la saturación de los datos.
- El proceso que culmina en los datos que ofrecemos hoy se inicia hace 5 años y es el producto de un escala inicialmente diseñada por 16 expertos en EM. El refinamiento lo han realizado dos personas, y al entrenar a los observadores que iban a participar en el proceso de validación de la escala se ha continuado este proceso de refinamiento, detenido a fecha de hoy por la saturación de los datos.
- El coeficiente de correlación intraclase, que mide la consistencia externa de la escala, esto es, el grado de concordancia de las puntuaciones cuando éstas son evaluadas por diferentes observadores, es de 0.82. Se considera excelente por encima de 0.75.
- El coeficiente de correlación intraclase, que mide la consistencia externa de la escala, esto es, el grado de concordancia de las puntuaciones cuando éstas son evaluadas por diferentes observadores, es de 0.82. Se considera excelente por encima de 0.75.
- Cuando analizamos ítem por ítem el CCI, hemos encontrado una concordancia interobservador baja (<0.31) en sólo el 9% de las 66 posibles mediciones.
- El coeficiente de correlación intraclase, que mide la consistencia externa de la escala, esto es, el grado de concordancia de las puntuaciones cuando éstas son evaluadas por diferentes observadores, es de 0.82. Se considera excelente por encima de 0.75.
- La consistencia interna de la escala medida con el alfa de Cronbach es excelente (por encima de 0.9 en todos los casos). Con ello destacamos que la escala mide aquello que tiene que medir, y que por tanto el proceso de refinamiento de la escala ha ido en una buena direccion.
- Sin embargo, estamos orgullosos de haber creado un instrumento nuevo que permitirá de ahora en adelante valorar la integridad de la EM en encuentros clínicos en AP. Una escala fiable y adaptada a nuestro medio, cosa de la que no disponíamos hasta ahora.
- Este trabajo ha sido posible gracias al esfuerzo desinteresado de las personas que hemos participado en él. Hemos recibido muy pocas ayudas a la investigación que hemos destinado en su mayoría a material audiovisual y al soporte logístico para el estudio de campo. Noches insomnes y fines de semana trabajando han sido y son la tónica general de nuestro método.