Original Article
Test-retest and interobserver reliability of a Spanish version (MMSE-37) of the Folstein minimental test, adapted to populations with a low level of schooling
Fiabilidad interobservador y test-retest de una versión española (MMSE-37) del test minimental de Folstein, adaptada a poblaciones de bajo nivel educativo
E.
Tapias-Merino
,
V.
Puertas-Martín
,
C.
Vera-García
,
D.
Lora-Pablos
,
A.
Revuelta-Alonso
,
F.
Bermejo-Pareja
Rev Neurol 2010
, 50(11),
646–652;
https://doi.org/10.33588/rn.5011.2009654
Abstract
INTRODUCTION Several versions of Folstein’s minimental test (MMSE, Minimental State Examination) exist in Spanish. One of them is the 37-point MMSE (MMSE-37), which is adapted to people with a low cultural level.
AIM To study the interobserver and test-retest reliability of the MMSE-37.
PATIENTS AND METHODS Interobserver reliability was studied in three professional observers who simultaneously administered the MMSE-37 to 40 patients from a community setting. Test-retest reliability was obtained in 35 patients by administering the MMSE-37 on two occasions 2-3 months apart. Statistics used: intraclass correlation coefficient (ICC), Bland-Altman difference plot method, and kappa index.
RESULTS Interobserver reliability study: multiple ICC of 0.99 (95% confidence interval, CI 95% = 0.99-0.99); kappa index of 0.84 (CI 95% = 0.72-0.97); the degree of agreement between the individual responses was 1 for ‘pathological outcome’, 0.79 for ‘probably pathological outcome’, 0.37 for ‘probably normal outcome’ and 0.89 for ‘normal outcome’; ICC > 0.99 (CI 95% = 0.99-0.99) between all the pairs of observers. The systematic differences in the mean score between the pairs of observers did not exceed the score of 0.1, which represents a bias of 0.47% after removing the scale. Test-retest reliability study: ICC of 0.92 (CI 95% = 0.87-0.96), kappa index of 0.84 (CI 95% = 0.54-1.00) and mean difference in the magnitude of disagreement of 0.34 (CI 95% = –2.80-3.49), 1% of the percent error in the magnitude of the disagreement.
CONCLUSIONS The MMSE-37 shows a high degree of test-retest reliability and reliability among professional observers, as in other versions of the MMSE.
AIM To study the interobserver and test-retest reliability of the MMSE-37.
PATIENTS AND METHODS Interobserver reliability was studied in three professional observers who simultaneously administered the MMSE-37 to 40 patients from a community setting. Test-retest reliability was obtained in 35 patients by administering the MMSE-37 on two occasions 2-3 months apart. Statistics used: intraclass correlation coefficient (ICC), Bland-Altman difference plot method, and kappa index.
RESULTS Interobserver reliability study: multiple ICC of 0.99 (95% confidence interval, CI 95% = 0.99-0.99); kappa index of 0.84 (CI 95% = 0.72-0.97); the degree of agreement between the individual responses was 1 for ‘pathological outcome’, 0.79 for ‘probably pathological outcome’, 0.37 for ‘probably normal outcome’ and 0.89 for ‘normal outcome’; ICC > 0.99 (CI 95% = 0.99-0.99) between all the pairs of observers. The systematic differences in the mean score between the pairs of observers did not exceed the score of 0.1, which represents a bias of 0.47% after removing the scale. Test-retest reliability study: ICC of 0.92 (CI 95% = 0.87-0.96), kappa index of 0.84 (CI 95% = 0.54-1.00) and mean difference in the magnitude of disagreement of 0.34 (CI 95% = –2.80-3.49), 1% of the percent error in the magnitude of the disagreement.
CONCLUSIONS The MMSE-37 shows a high degree of test-retest reliability and reliability among professional observers, as in other versions of the MMSE.
Resumen
Introducción Existen varias versiones en español del test minimental de Folstein (MMSE, Minimental State Examination); una es el MMSE de 37 puntos (MMSE-37), que está adaptado a personas de bajo nivel cultural.
Objetivo Estudiar la fiabilidad interobservador y test-retest del MMSE-37.
Pacientes y métodos La fiabilidad interobservador se estudió en tres observadores profesionales que realizaron simultáneamente el MMSE-37 en 40 pacientes de ámbito comunitario. La fiabilidad test-retest se obtuvo en 35 pacientes mediante la realización del MMSE-37 en dos ocasiones en un plazo de 2-3 meses. Estadísticos utilizados: coeficiente de correlación intraclase (CCI), método de acuerdo de Bland y Altman, e índice kappa.
Resultados Estudio de fiabilidad interobservador: CCI múltiple de 0,99 (intervalo de confianza del 95%, IC 95% = 0,99-0,99); índice kappa de 0,84 (IC 95% = 0,72-0,97); el grado de acuerdo existente entre las respuestas individuales fue de 1 para ‘resultado patológico’, 0,79 para ‘resultado probablemente patológico’, 0,37 para ‘resultado probablemente normal’ y 0,89 para ‘resultado normal’; CCI > 0,99 (IC 95% = 0,99-0,99) entre todos los pares de observadores. Las diferencias sistemáticas en la puntuación media entre las parejas de observadores no superó la puntuación de 0,1, lo que implica un 0,47% de sesgo una vez eliminada la escala. Estudio de fiabilidad test-retest: CCI de 0,92 (IC 95% = 0,87-0,96), índice kappa de 0,84 (IC 95% = 0,54-1,00) y diferencia media en la magnitud del desacuerdo de 0,34 (IC 95% = –2,80-3,49), un 1% del error porcentual en la magnitud del desacuerdo.
Conclusiones El MMSE-37 muestra alta fiabilidad entre observadores profesionales y test-retest como en otras versiones del MMSE.
Objetivo Estudiar la fiabilidad interobservador y test-retest del MMSE-37.
Pacientes y métodos La fiabilidad interobservador se estudió en tres observadores profesionales que realizaron simultáneamente el MMSE-37 en 40 pacientes de ámbito comunitario. La fiabilidad test-retest se obtuvo en 35 pacientes mediante la realización del MMSE-37 en dos ocasiones en un plazo de 2-3 meses. Estadísticos utilizados: coeficiente de correlación intraclase (CCI), método de acuerdo de Bland y Altman, e índice kappa.
Resultados Estudio de fiabilidad interobservador: CCI múltiple de 0,99 (intervalo de confianza del 95%, IC 95% = 0,99-0,99); índice kappa de 0,84 (IC 95% = 0,72-0,97); el grado de acuerdo existente entre las respuestas individuales fue de 1 para ‘resultado patológico’, 0,79 para ‘resultado probablemente patológico’, 0,37 para ‘resultado probablemente normal’ y 0,89 para ‘resultado normal’; CCI > 0,99 (IC 95% = 0,99-0,99) entre todos los pares de observadores. Las diferencias sistemáticas en la puntuación media entre las parejas de observadores no superó la puntuación de 0,1, lo que implica un 0,47% de sesgo una vez eliminada la escala. Estudio de fiabilidad test-retest: CCI de 0,92 (IC 95% = 0,87-0,96), índice kappa de 0,84 (IC 95% = 0,54-1,00) y diferencia media en la magnitud del desacuerdo de 0,34 (IC 95% = –2,80-3,49), un 1% del error porcentual en la magnitud del desacuerdo.
Conclusiones El MMSE-37 muestra alta fiabilidad entre observadores profesionales y test-retest como en otras versiones del MMSE.
Keywords
Dementia
Interobserver reliability
MMSE
Neuropsychological examination
Psychometric test
Test-retest reliability
Palabras Claves
Demencia
Exploración neuropsicológica
Fiabilidad interobservador
Fiabilidad test-retest
MMSE
Test psicométrico