Professional Documents
Culture Documents
RESUMEN
El objetivo del estudio fue determinar las propiedades psicomtricas del cuestionario Dundee Ready Education
Environment Measure (DREEM) en estudiantes de una facultad de Medicina peruana. Los participantes fueron los
alumnos de primero a sexto ao, invitados a participar mediante una plataforma web. En el anlisis se utiliz el
coeficiente alfa de Cronbach para evaluar consistencia interna. Adems, se realiz un anlisis factorial confirmatorio
para evaluar la validez de constructo de las subescalas del DREEM. Los ndices de bondad de ajuste utilizados fueron:
error cuadrtico medio de aproximacin (RMSEA), el ndice de ajuste comparativo (CFI), ndice Tucker-Lewis (TLI) y
el residuo estandarizado cuadrtico medio (SRMR). Los resultados mostraron que la dimensin Autopercepcin Social
tuvo un alfa de Cronbach menor a 0,70. Adems, los ndices de bondad no apoyaron la estructura de cinco dimensiones
del DREEM. Como conclusin, el cuestionario DREEM no tuvo un desempeo ptimo en esta muestra peruana.
Palabras Clave: Educacin Mdica, anlisis factorial, pregrado (fuente: DeCS BIREME).
ABSTRACT
The objective of the study was to determine the psychometric properties of the Dundee Ready Education Environment
Measure (DREEM) questionnaire in students of a Peruvian medical school. Participants were first-to-sixth-year students,
invited to participate through a web platform. In the analysis the alpha coefficient of Cronbach was used to evaluate
internal consistency. In addition, a confirmatory factorial analysis was performed to evaluate the construct validity of the
subscales of the DREEM. The adjustment quality indexes used were: Root Mean Square Error Approximation (RMSEA),
the Index of Benchmarking (CFI), Tucker-Lewis Index (TLI), and the Standardized Root Mean Residual (SRMR). The
results showed that the social self-perception dimension had an alpha of Cronbach of less than 0.70. In addition, the
quality indices did not support the five-dimensional structure of the DREEM. In conclusion, the DREEM questionnaire did
not perform optimally in this Peruvian sample.
Key Words: Medical education, factorial analysis, undergraduate (source: MeSH NLM).
1
Facultad de Medicina Humana, Universidad de San Martn de Porres, Lima, Per
a
Mdico cirujano, magster en Salud Global y Desarrollo; b estudiante de Medicina Humana; c mdico cirujano; d mdico cardilogo, doctor en Medicina;
e
mdico cirujano, magster en Ciencias Bsicas.
Recibido: 20/01/2017 Aprobado: 05/04/2017 En lnea: 28/06/2017
Citar como: Flores-Flores O, Lajo-Aurazo Y, Zevallos-Morales A, Rondn PL, Lizaraso-Soto F, Jorquiera T. Anlisis psicomtrico de un cuestionario para medir el
ambiente educativo en una muestra de estudiantes de medicina en Per. Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. doi: 10.17843/rpmesp.2017.342.2642
255
Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. Flores-Flores O et al.
256
Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. Evaluacin del ambiente educativo en medicina
Para este estudio se utiliz la versin en espaol de constructo. Se calcularon los coeficientes y cuatro
validada en Chile (14). Previo a la recoleccin de datos, ndices de bondad de ajuste: error cuadrtico medio
se realiz un piloto con 15 estudiantes de Medicina para de aproximacin (RMSEA); el ndice de ajuste
evaluar la adecuada comprensin de los enunciados.
comparativo (CFI); el ndice Tucker-Lewis (TLI) y el
Este piloto fue conducido de forma virtual y se les
pidi a estos estudiantes no participar en el estudio residuo estandarizado cuadrtico medio (SRMR). Un
oficial. Se realizaron mnimas modificaciones a algunos ndice SRMR menor a 0,05 indica un buen ajuste, y uno
enunciados para reforzar su comprensin en nuestro entre 0,05 y 0,08 se considera aceptable. Por otro lado,
medio (Anexo 1). un RMSEA menor 0,07 indica un ajuste adecuado (16)
.
Los valores CFI y TLI superiores a 0,90 se interpretan
ANLISIS PSICOMTRICO
como un ajuste ptimo (17)
. Finalmente, se gener una
matriz de correlacin del cuestionario para observar el
Para medir la consistencia interna de la escala global
y las subescalas, se calcul el coeficiente alfa de grado de independencia entre las dimensiones. Todos
Cronbach considerando valores aceptables entre los anlisis fueron realizados en el programa estadstico
0,70 a 0,95 (15). A continuacin, se realiz un anlisis STATA v.13 para Windows (StataCorp, College Station,
factorial confirmatorio (AFC) para evaluar la validez TX, US)
257
Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. Flores-Flores O et al.
Antes de la realizacin del estudio, el Comit Institucional Tabla 2. Coeficientes del anlisis factorial confirmatorio
de tica e Investigacin de la Universidad de San
Martn de Porres aprob la realizacin del estudio. tem Factor 1 Factor 2 Factor 3 Factor 4 Factor 5
La participacin fue voluntaria, las respuestas fueron 1 0,63
registradas y almacenadas annimamente. 7 0,72
13 0,76
RESULTADOS 16 0,76
20 0,81
De un total de 2421 estudiantes matriculados de 21 0,76
primero a sexto ao de medicina, 911 (37,6%) 24 0,75
empezaron el cuestionario, pero solo 828 (32,4%) lo 25 0,21
llenaron completamente. La tasa de respuesta por 38 0,66
ao acadmico fue: primer ao (31,2%), segundo ao 44 0,74
258
Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. Evaluacin del ambiente educativo en medicina
tiene pocos tems (15). Por ello, se podra esperar un Una solucin simple a los inconvenientes presentados
menor valor de Cronbach en la subescala con menos en la escala DREEM sera eliminar los tems con menor
tems (autopercepcin social). Sin embargo, esto no confiabilidad. Sin embargo, creemos que un cambio de
parece ser la nica razn, teniendo en cuenta que la estructura, requiere una revisin y discusin terica,
dimensin autopercepcin acadmica con solo un tem como fue inicialmente diseado el DREEM (9). Adems,
ms, alcanza un coeficiente aceptable. Adems, esta para determinar una nueva estructura se debe realizar
limitacin ha sido un hallazgo constante en los estudios un anlisis factorial exploratorio, con una muestra
que han utilizado el cuestionario DREEM (10,11,18). Por peruana ms representativa, incluyendo estudiantes de
lo tanto, los investigadores deben referirse a esta Medicina de diferentes regiones.
dimensin con mucha precaucin.
Este estudio es importante porque permitir a los
Por otro lado, la construccin de las subescalas del educadores e investigadores una mejor comprensin
cuestionario genera dudas. Aunque el ndice SRMR de las propiedades, ventajas y desventajas de usar
present valores aceptables, se recomienda que los el instrumento DREEM en el Per, lo cual, facilitar
instrumentos presenten ptimos valores en ms de un su correcto uso. Adems, este estudio plantea la
ndice, porque estos representan diferentes aspectos posibilidad de redefinir los dominios del DREEM en
del modelo (16). Adems, la alta correlacin entre las estudios posteriores, y alienta a los investigadores
dimensiones resalta su interrelacin y poca independencia. peruanos a analizar las propiedades psicomtricas de
Sin embargo, cabe resaltar que la correlacin entre los los instrumentos tipo escala de Likert que se utilizan con
factores (subescalas) en nuestro estudio fue menor que frecuencia. Nuestro estudio tiene fortalezas y debilidades.
en otro estudio realizado en una universidad de Irlanda, Como fortaleza principal destaca el anlisis detallado de
aunque con una menor muestra (11). Nuestros hallazgos las propiedades psicomtricas del instrumento, el cual se
van acordes con estudios recientes que cuestionan la limita, usualmente, a la presentacin de los coeficientes
construccin de las subescalas del cuestionario DREEM, alfa de Cronbach. Dentro de las limitaciones podemos
y que sugieren replantear o reducir las dimensiones del mencionar la baja tasa de respuesta (<40%) de los
instrumento (1,11,19), lo cual parece necesario. estudiantes, que es una limitante comn en estudios
conducidos de forma virtual. Adems, debido a que el
No creemos que nuestros resultados hayan sido DREEM consta de 50 preguntas, era esperable que un
influenciados por alguna adaptacin del lenguaje debido porcentaje no termine de llenarla.
a que se us la versin validada al espaol, bastante
extendida en Chile (2), y adems, porque en nuestro piloto Como conclusin, nuestros resultados muestran que la
mostr buen entendimiento por parte de los estudiantes. construccin de los dominios del DREEM presenta falencias,
I II III IV V
I. Percepcin de aprendizaje 1
II. Percepcin de los profesores 0,73 1
III. Autopercepcin acadmica 0,73 0,6 1
IV. Percepcin de la atmsfera 0,77 0,66 0,71 1
V. Autopercepcin social 0,68 0,55 0,63 0,72 1
259
Rev Peru Med Exp Salud Publica. 2017;34(2):255-60. Flores-Flores O et al.
especialmente en la subescala de autopercepcin social, y artculo, y en recoleccin de datos. OF-F, YLA, AZM, PLR, FLS
sugiere que el cuestionario DREEM requiere una revisin y TJ contribuyeron en el anlisis e interpretacin de datos. OFF,
YLA, AZM y PLR contribuyeron en la redaccin del artculo y
de su estructura factorial. Son necesarios estudios que FLS y TJ en la revisin crtica del contenido. Todos los autores
evalen el ambiente educativo, tomando en cuenta que aprobaron la versin final del manuscrito.
la formacin mdica repercute directamente en el sistema
de salud. Sin embargo, si investigadores o educadores Fuentes de financiamiento: estudio autofinanciado por los
deciden utilizar el DREEM en Per, deben tener en cuenta autores.
sus limitaciones, mostrar las propiedades psicomtricas
encontradas en su muestra e interpretar cuidadosamente Conflictos de inters: OF-F y PLR han sido alumnos y
los resultados. docentes de la Facultad de Medicina de la Universidad de San
Martn de Porres. YL-A y AZ-M son estudiantes de dicha casa
Contribuciones autora: OFF, YLA, AZM, TJ y PLR de estudios. TJ y FL-S son actuales trabajadores y exalumnos
contribuyeron substancialmente en la concepcin, diseo del de esta facultad.
Referencias Bibliogrficas
1. Ortega BJ, Perez VC, Ortiz ML, 8. Roff S. The Dundee Ready Educational Climate of the New Curriculum at the
Fasce HE, McColl CP, Torres AG, Environment Measure (DREEM)a Pontificia Universidad Catlica de Chile:
et al. An assessment of the Dundee generic instrument for measuring Performance of the Spanish Translation
Ready Education Environment students perceptions of undergraduate of the Dundee Ready Education
Measure (DREEM) in Chilean health professions curricula. Med Teach. Environment Measure (DREEM). Educ
university students. Rev. md. Chile. 2005;27(4):322-5. Health. 2009;22(1):112.
2015;143(5):651-7. 9. Roff S, McAleer S, Harden RM, Al- 15. Tavakol M, Dennick R. Making sense
2. Herrera C, Pacheco J, Rosso F, Cisterna Qahtani M, Ahmed AU, Deza H. of Cronbachs alpha. Int J Med Educ.
C, Aichele D, Becker S, et al. Evaluacin Development and Validation of the 2011;2:53-5.
del ambiente educacional pre-clnico Dundee Ready Education Environment 16.
Hooper D, Coughlan J, Mullen
en seis Escuelas de Medicina en Chile. Measurement (DREEM). Med Teach. M. Structural equation modelling:
Rev. md. Chile. 2010;138:677-84. 1997;19(4):295-9 Guidelines for determining model fit.
3. Miles S, Swift L, Leinster S. 10. Pales J, Gual A, Escanero J, Tomas I, Electronic Journal of Business Research
The Dundee Ready Education Rodriguez-de Castro F, Elorduy M, Methods. 2008;6(1):53-60.
Environment Measure (DREEM): a et al. Educational climate perception 17.
Fernandez-Villa T, Molina AJ,
review of its adoption and use. Med by preclinical and clinical medical Garcia-Martin M, Llorca J, Delgado-
Teach. 2012;39(9):620-34. students in five Spanish medical Rodriguez M, Martin V. Validation and
4. Palmgren PJ, Laksov KB. Exploring schools. Int J Med Educ. 2015;6:65-75. psychometric analysis of the Internet
chiropractic students experiences 11. Hammond SM, ORourke M, Kelly M, Addiction Test in Spanish among
of the educational environment in Bennett D, OFlynn S. A psychometric college students. BMC Public Health.
healthcare professional training: a appraisal of the DREEM. BMC Med 2015;15:953.
qualitative study. BMC Med Educ. Educ. 2012;12:2. 18.
Dimoliatis ID, Vasilaki E,
2015;15(1):128. 12.
Salcedo MD, Petkvoa-Guerguieva Anastassopoulos P, Ioannidis JP, Roff
5. Olave G, Perez C, Fasce E, Ortiz L, M, Sotomayor CJ, Delgadillo AJ, S. Validation of the Greek translation
Bastias N, Marquez C, et al. Factores of the Dundee Ready Education
Pineda MM, Villavicencio GJ, et al.
que afectan el ambiente educativo en Environment Measure (DREEM).
Percepcin del clima educacional por
la formacin preclnica de medicina Educ Health. 2010;23(1):348.
estudiantes de odontologa en etapa
segn sus docentes. Rev Med Chile. de transicin curricular en una muestra 19. Jakobsson U, Danielsen N, Edgren G.
2016;144:1343-50. peruana. Odontol. Sanmarquina. Psychometric evaluation of the Dundee
6. Chan DS. Combining qualitative 2014;17(1):29-34. Ready Educational Environment
and quantitative methods in assessing Measure: Swedish version. Med Teach.
13. Ministerio de Salud. No ms facultades
hospital learning environments. Int J 2011;33(5):e267-74.
de medicina y una mejor formacin de
Nurs Stud. 2001;38(4):447-59 profesionales. Lima: MINSA; 2017
7. Feletti GI, Clarke RM. Review of [cited 2107 15 Marzo]. Correspondencia: Oscar Flores-Flores
psychometric features of the Medical Direccin: Calle Fra Angelico 233, Urb. La Calera
14. Riquelme A, Oporto M, Oporto J, Mndez de la Merced, Surquillo. Lima, Per.
School Learning Environment Survey. J, Viviani P, Salech F, et al. Measuring Telfono: (+511) 934901717
Med Educ. 1981;15(2):92-6. Students Perceptions of the Educational Correo electrnico: oscargffu@gmail.com
260
Anexos 26. Lo aprendido el ao pasado fue una buena base
para el trabajo de este ao.
Anexo 1. Cuestionario DREEM en espaol 27. Soy capaz de memorizar todo lo que me es
necesario.
28. Rara vez me siento solo.
1. Se me estimula a participar en clase.
29. Los docentes son buenos dando feedback
2. Los docentes conocen las materias que dictan.
(retroalimentacin) a los estudiantes.
3. Hay un buen sistema de apoyo para los
30. Tengo oportunidades para desarrollar mis
estudiantes que sufren de estrs.
habilidades interpersonales (actividades que me
4. Estoy demasiado cansado para disfrutar los permiten relacionarme con los dems).
cursos que estoy tomando. 31. He aprendido mucho sobre la empata en mi
5. Los mtodos de estudio que tena antes todava profesin.
me sirven. 32. En la facultad, los profesores nos hacen crticas
6. Los docentes tienen paciencia con los pacientes. constructivas.
33. Me siento cmodo, socialmente, en clases.
7. La enseanza es frecuentemente estimulante.
34. El ambiente en los seminarios, clases y prcticas
8. Los docentes ridiculizan a los estudiantes.
es tranquilo.
9. Los docentes son autoritarios.
35. Hasta el momento, mi experiencia en la facultad
10. Tengo la confianza de que voy a pasar este ao. ha sido desalentadora.
11. El ambiente es relajado durante las visitas 36. En general, soy capaz de concentrarme bien.
docentes de los servicios hospitalarios. 37. Los docentes dan ejemplos claros.
12. Los horarios de la facultad estn bien 38. Tengo claros los objetivos de aprendizaje de mis
programados. cursos.
13. La enseanza es centrada en el estudiante. 39. Los docentes se molestan y alteran en clase.
14. Rara vez me aburro en los cursos que estoy 40. Los docentes estn bien preparados para sus
tomando. clases.
15. Tengo buenos amigos en la facultad. 41. La facultad me ayuda a desarrollar mis destrezas
para resolver problemas.
16. La enseanza que se me brinda me ayuda a
desarrollar mis competencias. 42. El disfrute de mis estudios en la facultad pesa
ms que la tensin que estos me generan
17. En la facultad, la copia en los exmenes constituye
un problema. 43. El ambiente de .la facultad me motiva a aprender.
18. Los docentes tienen buenas destrezas 44. La manera de ensear me estimula a aprender
comunicacionales con los pacientes. por m mismo en forma activa.
19. Mi vida social es buena. 45. Mucho de lo que tengo que aprender me parece
relevante para mi carrera como mdico.
20. La enseanza est bien enfocada.
46. Los ambientes fsicos de la facultad son
21. La enseanza en la facultad est suficientemente agradables.
preocupada de desarrollar mi confianza.
47. En la facultad, se enfatiza el aprendizaje a largo
22. Siento que me estn preparando bien para mi plazo por sobre el inmediato.
profesin.
48. La enseanza de la facultad est demasiado
23. El ambiente es tranquilo y relajado durante las centrada en los docentes.
clases tericas en el aula.
49. Los estudiantes causamos irritacin a los
24. El tiempo destinado a la docencia es bien utilizado. docentes.
25. La enseanza en la facultad pone demasiado 50. Siento que puedo hacer todas las preguntas que
nfasis en el aprendizaje de detalles innecesarios. quiero.