EL RIGOR EN LA INVESTIGACIN CUALITATIVA: TCNICAS DE ANLISIS, CREDIBILIDAD, TRANSFERIBILIDAD Y CONFIRMABILIDAD Dora M. Rada C. Subdireccin de Investigacin y Postgrado UPEL-IMPM dora_rada@hotmail.

com RESUMEN El artculo es una argumentacin documentada que tiene por propsito presentar los procedimientos centrales de la tcnica de anlisis de datos textuales y los criterios que permiten asegurar el rigor y la calidad cientfica de los estudios cualitativos. Estos criterios son: la credibilidad, la confirmabilidad, y la transferibilidad o aplicabilidad. La credibilidad se logra cuando los hallazgos del estudio son reconocidos como reales por las personas que participaron en el estudio y por quienes han experimentado, o han estado en contacto con el fenmeno investigado. La confirmabilidad se refiere a la neutralidad de la interpretacin o anlisis de la informacin. Mientras que la transferibilidad es la posibilidad de trasladar los resultados a otros contextos o grupos similares. Otros criterios tambin son mencionados. Se sugiere que ellos deben ser considerados al evaluar trabajos de investigacin, sea para ascender en el escalafn, para obtener un grado acadmico o para publicar en una revista cientfica. Descriptores: Rigor. Tcnicas. Criterios. Confirmabilidad.

THE RIGOR IN QUALITATIVE INVESTIGATION: TECHNIQUES OF ANALYSIS, CREDIBILITY, TRANSFERABILITY, AND CONFORMABILITY
Dora M. Rada C.

Sub direction of Research and Postgraduate UPEL-IMPM

dora_rada@hotmail.com ABSTRAC The work must by intention present/display some criteria that allow evaluating the rigor and the scientific quality of the qualitative studies. These criteria are: the credibility, the trustworthiness or dependency, the conformability, and the transferability or applicability. The credibility is obtained when the people who participated in the study and recognize the findings of the study like real by those who have experimented or they have been in contact with the investigated phenomenon. The conformability talks about to the neutrality of the interpretation or analysis of the information. The consistency is obtained when it is possible to be followed the track the original investigator and to be arrived at similar findings. Whereas the transferability is the possibility of transferring the results to other similar contexts or groups. These criteria must be considered when evaluating works of investigation, is for ascending in the roster, to receive an academic rank or to publish in a scientific magazine. Key words: Methodological rigor. Techniques. Criteria. Conformability.

LA RIGIDIT DANS LA RECHERCHE QUALITATIVE: TECHNIQUES D ANALYSE, CRDIBILIT, TRANSFERIBILIT ET CONFIRMABILIT Dora M. Rada C. Sous-direction Recherche et Post graduat UPEL-IMPM dora_rada@hotmail.com RSUM L'article est une argumentation documente qui a pour but de prsenter les procdures centrales de la technique d'analyse textuelle et les critres qui permettent d'assurer la rigidit et la qualit scientifique des tudes qualitatives. Ces critres sont : la crdibilit, la confirmabilit, et la transferibilit ou l'applicabilit. La crdibilit est obtenue quand les dcouvertes de l'tude seront reconnues comme rels par les personnes qu'elles ont pris part l'tude et par lesquelles ils ont prouv, ou ils ont t en contact avec le phnomne fait des recherches. La confirmabilit se rfre la neutralit l'interprtation ou l'analyse de l'information. Tandis que la transferibilit est la possibilit de transfrer les rsultats d'autres contextes ou groupes semblables. D'autres critres sont aussi mentionns. On suggre qu'ils doivent tre considrs en valuant des travaux de recherche, ou pour monter dans l'chelon, pour obtenir un degr acadmique ou pour publier dans une revue scientifique. Descripteurs: Rigidit. Techniques. Critres. Confirmabilit.

Introduccin En un proyecto de investigacin educativa se deben detallar los medios a utilizar para demostrar la rigurosidad que lo caracteriza como tal. Por ello es necesario describir los recursos y procedimientos que se utilizarn tanto para la recogida de la informacin como para su transformacin en datos durante el anlisis. Los procedimientos varan dependiendo del tipo de investigacin y de los supuestos epistemolgicos en los que se sustenta. As en las ciencias histrico- hermenuticas o interpretativas, se produce conocimiento interactivo que subyace en la vida de cada ser humano y de la comunidad donde reside, y en la ciencia social crtica se produce conocimiento reflexivo (Martnez, 2004). De all que las investigaciones educativas que siguen enfoques interpretativos y sociocrticos utilizan metodologas cualitativas que abordan el discurso de autores y actores de los contextos formativos. En educacin antes de describir y explicar es necesario explorar exhaustivamente al interior de los contextos de formacin, por ello las tcnicas de anlisis de datos cualitativos aplicadas a la investigacin educativa han aportado valiosa informacin acerca de la estructura, dimensiones y significaciones de los discursos en los procesos didcticos. Los problemas que requieren un estudio exploratorio-cualitativo pretenden conocer el discurso espontneo del grupo en relacin con: Una dificultad educativa donde emergen los ejes imaginarios y simblicos sobre los cuales dialogan espontneamente desde su propia manera de pensar y sentir. Las expectativas, demandas, opiniones en general, el grado de satisfaccin y el nivel de informacin o conocimiento sobre un aprendizaje particular. De all que los discursos se transforman en datos cualitativos expresados en forma de cadenas verbales o sintagmas lingsticos. Estos datos no solo pueden ser analizados, interpretados y modelados desde marcos tericos cualitativos, sino que se pueden complementar con tcnicas de la estadstica textual, la cual se ha constituido en una herramienta interdisciplinaria utilizada frecuentemente en las ciencias sociales. Sin embargo, el investigador no debe confiarse slo en las tcnicas sino que deben presentar los resultados a los participantes para que den conformidad a lo interpretado. Seguir estos criterios permitir que el informe de investigacin sea riguroso, creble y confiable para poder transferir derivaciones del estudio. Sobre las tcnicas de anlisis y los criterios tratar el presente artculo el cual ampla un trabajo anterior (Rada, 2006). 3

Tcnicas de Anlisis Hoy da se reconoce que la investigacin cualitativa se caracteriza por ver las cosas desde el punto de vista de quienes estn siendo estudiados; as el papel de los investigadores consiste en entender e interpretar lo que est sucediendo. Pero ello se convierte en una tarea difcil por la complejidad de los fenmenos humanos, y porque los investigadores no pueden abstraerse de su propia historia, sus creencias y su personalidad. Si embargo, los datos registrados en forma de notas tomadas durante la observacin de un proceso didctico, de las respuestas libres a preguntas abiertas sobre un tema educativo, las transcripciones de entrevistas individuales o de discusiones grupales, los contenidos de ensayos, creaciones intelectuales, mapas mentales o redes semnticas, los trozos de libros o de artculos sobre educacin, pueden ser procesados mediante el tratamiento cualitativo computarizado. En general el procedimiento interpretativo estndar comprende la reduccin de los datos, la seleccin de palabras claves, la agrupacin de frases en dimensiones, la edicin de categoras exhaustivas y la codificacin de categoras. Cuando se ha recopilado gran cantidad de datos y es necesario usar un paquete computarizado el anlisis se transforma en una cuantificacin de cdigos numricos, su recuento, y la obtencin de distribuciones de frecuencias, independientemente de la estructura y significacin del contenido de las categoras. El procedimiento tradicional es la categorizacin, la codificacin y la tabulacin, as el dato textual se reduce al tratamiento y anlisis de datos numricos, donde interesa primero la frecuencia de los cdigos y luego el propio contenido de las categoras. El Anlisis Estadstico de Datos Textuales (ADT) consiste en procedimientos que implican contar las ocurrencias de las unidades verbales bsicas y operar algn tipo de anlisis estadstico a partir de los resultados de tales recuentos. Se apela a la cuantificacin de los textos sin que medien operaciones de codificacin previas. Las tcnicas desarrolladas a partir de los aportes de Benzcri (1973, 1976, 1988) han permitido el anlisis de grandes matrices de datos, aplicacin del Anlisis Factorial a tablas de contingencia de filas (n) por (x) columnas (p), a partir de matrices extendidas y la visualizacin de resultados en un mapa perceptual. De acuerdo con Rodrguez (2006) los siete pasos para la elaboracin de documentos lexicomtricos son: 4

1. Definicin de los procedimientos asociados al data collection y data cleaning para el registro apropiado de los datos textuales. Se procede a editar el corpus (ensayos, mapas, artculos, informes, decodificar las entrevistas, respuestas libres, variables socioeducativas o actitudinales que tipifican o segmentan las entrevistas y grupos, variables que actan como predictores o de criterio). 2. Estudio de las unidades estadsticas (formas, lemas, segmentos). Los algoritmos del anlisis textual son capaces de reconocerles en los datos recolectados e identifican las frases significativas. La elaboracin de documentos lexicomtricos implica un segundo paso de segmentacin del texto en unidades. La segmentacin del corpus textual implica diferenciar las unidades elementales: la forma grfica (una secuencia de letras comprendidas entre dos espacios), el lema (todos los vocablos que cuentan con una misma raz y con significado equivalente, es decir, una familia de palabras), los segmentos repetidos (una secuencia de dos o ms palabras que aparecen ms de una vez en un corpus de datos textuales), los cuasisegmentos (palabras que aparecen en una determinada secuencia pero que presentan alguna diferencia en el gnero o el nmero). 3. Estudio de la riqueza de vocabulario o frecuencia de segmentos repetidos. Construccin del vocabulario del texto, el cual se presenta en una tabla de orden lexicomtrico donde se muestra el nmero identificador de cada palabra, la palabra del glosario del corpus, la frecuencia de aparicin y la longitud de la unidad medida en nmero de caracteres. 4. Anlisis multivariado de datos textuales . Aplicacin del Anlisis Factorial de Correspondencias sobre las tablas lexicogrficas o la Clasificacin Automtica (clasificacin jerrquica ascendente) de las formas lexicales y textos. 5. Identificacin de respuestas y/o frases modales. Combinando los resultados del anlisis textual con variables sociodemogrficas y actitudinales se obtiene una tipologa de individuos o grupos a partir de respuestas y de textos. 6. Visualizacin de los resultados del Anlisis Multivariado . Representacin de posicionamiento del corpus lexicogrfico mediante mapas preceptales.

7. Anlisis discriminante textual. Prediccin de las variables objeto del estudio (opiniones, actitudes, predisposiciones, perfil de imagen, etc.) a partir del texto. Luego del anlisis es necesario presentar los resultados. Segn Guba y Lincoln (1981) cuatro criterios deben considerarse de manera que stos se estimen como cientficos: el valor de verdad, la aplicabilidad, la consistencia y la neutralidad. Posteriormente Lincoln y Guba (1985) convienen que la calidad cientfica se evala con credibilidad, auditabilidad y transferibilidad.

Credibilidad La credibilidad se logra cuando el investigador, a travs de observaciones y conversaciones prolongadas con los participantes del estudio, recolecta informacin que produce hallazgos y luego stos son reconocidos por los informantes como una verdadera aproximacin sobre lo que ellos piensan y sienten. Es el grado o nivel en el cual los resultados de la investigacin reflejen una imagen clara y representativa de una realidad o situacin dada. Entonces, credibilidad se refiere a cmo los resultados de un estudio son verdaderos para las personas que fueron estudiadas, y para quienes lo han experimentado, o han estado en contacto con el fenmeno investigado. El criterio de credibilidad se puede alcanzar porque generalmente los investigadores, para confirmar los hallazgos y revisar algunos datos particulares, vuelven a los informantes durante la recoleccin de la informacin. Segn Castillo y Vsquez (2003) a las personas les gusta participar en la revisin para reafirmar su participacin, tambin porque desean que los hallazgos sean lo ms crebles y precisos. En este sentido pueden corregir los errores de interpretacin de los hechos dando ejemplos que ayuden a clarificar las interpretaciones del investigador. Para determinar la credibilidad de una investigacin educativa se pueden constatar los siguientes elementos: Resguardo de las notas de campo que surgieron de las acciones y de las interacciones durante la investigacin.

Uso de transcripciones textuales de las entrevistas para respaldar los significados e interpretaciones presentadas en los resultados del estudio. Consideracin de los efectos de la presencia del investigador sobre la naturaleza de los datos. Discusin de los comportamientos y experiencias en relacin con la experiencia de los informantes. Uso de la triangulacin en la recoleccin de datos para determinar la congruencia entre los resultados. Discusin de las interpretaciones con otros investigadores. Si los hallazgos se aprecian como significantes y aplicables en el propio contexto del lector.

Confirmabilidad La confirmabilidad (Leininger, 1994) o auditabilidad, se refiere a la forma en la cual un investigador puede seguir la pista, o ruta, de lo que hizo otro (Guba y Lincoln, 1981). Para ello es necesario un registro y documentacin completa de las decisiones e ideas que ese investigador tuvo en relacin con el estudio. Esta estrategia permite examinar los datos y llegar a conclusiones iguales o similares, siempre y cuando se tengan perspectivas anlogas. Los siguientes aspectos pueden ayudar a determinar si un trabajo de investigacin cualitativa cumple con este criterio: Descripcin de las caractersticas de los informantes y su proceso de seleccin. Uso de mecanismos de grabacin. Anlisis de la trascripcin fiel de las entrevistas a los informantes. Describir los contextos fsicos, interpersonales y sociales en el informe.

En los abordajes cualitativos, si se tiene la misma perspectiva del investigador original, se siguen las mismas reglas para la recoleccin y el anlisis de los datos, asumiendo que las condiciones del contexto son similares, otros investigadores deberan

ser capaces de llegar a descripciones o explicaciones similares del fenmeno bajo estudio. Transferibilidad La transferibilidad o aplicabilidad, da cuenta de la posibilidad de ampliar los resultados del estudio a otras poblaciones. Guba y Lincoln (1981) indican que se trata de examinar qu tanto se ajustan los resultados a otro contexto. Es de recordar que en la investigacin cualitativa los lectores del informe son quienes determinan si se pueden transferir los hallazgos a un contexto diferente. Para ello se necesita hacer una descripcin densa del lugar y las caractersticas de las personas donde el fenmeno fue estudiado. As el grado de transferibilidad es funcin directa de la similitud entre los contextos donde ser realiza un estudio. Para Castillo y Vsquez (2003) reproducir el fenmeno social es difcil porque pueden variar las condiciones bajo las cuales se recolectaron los datos, y resulta inverosmil controlar las variables que pueden afectar los hallazgos; sin embargo, hay modos de repensar la reproductividad para extrapolar su significado. Dos guas sirven para determinar el grado de transferibilidad de los resultados de una investigacin cualitativa: Si los investigadores indicaron lo tpico de las respuestas de los informantes. Si examinaron la representatividad de los datos como un todo. de evaluacin debe ser

Segn las autoras citadas el uso de indicadores cualitativas. Otros criterios de calidad

acompaado por criterios que permitan asegurar la calidad de las investigaciones

A pesar de lo afirmado hasta aqu, Morse, Barret, y Mayan (2002) plantean que las definiciones de confiabilidad y validez deben retomarse en la investigacin cualitativa como patrones de rigor cientfico por tres razones:

1. Validez y confiabilidad son estndares de rigor cientfico independientemente de los paradigmas que orientan la investigacin, ya que el objetivo fundamental de ella es encontrar resultados plausibles y crebles. 2. No utilizar las pautas de validez y credibilidad puede fortalecer la nocin de que un trabajo es invlido, no confiable, falto de rigor y por tanto no cientfico. 3. Los criterios de credibilidad, auditabilidad y transferibilidad propuestos por Guba y Lincoln (1981) enfatizan en la evaluacin del rigor cientfico slo en el informe de investigacin, por lo cual se corre el riesgo de que no se identifiquen las amenazas contra la validez y confiabilidad del estudio planeado. Estos autores proponen algunas estrategias de verificacin a ser usadas durante el proceso de investigacin, para obtener activamente la validez y la confiabilidad: La creatividad, sensibilidad, flexibilidad y habilidad para responder a lo que sucede durante la investigacin. La congruencia entre la pregunta o supuesto, los componentes del mtodo usado, la informacin recabada, y el anlisis de sta. La seleccin de los participantes que mejor representen, o tengan conocimiento, del fenmeno o evento que se va a investigar, para lograr la saturacin efectiva y eficiente de las categoras con informacin de calidad ptima y mnimo desperdicio. La interaccin entre la recoleccin y el anlisis de la informacin es esencial. La saturacin de la bsqueda, es decir cuando se obtiene la misma informacin o similar, porque los informantes no indican algo diferente de lo ya dicho. No slo debe generar conocimientos, sino contribuir a la solucin de problemas relevantes para los seres humanos. Todos los indicadores enumerados fomentan el rigor metodolgico entre los investigadores educativos.

Conclusiones

De la revisin realizada se puede colegir que los criterios que aseguran la rigurosidad en la investigacin cualitativa en educacin se refieren a: Credibilidad o valor de verdad. Confirmabilidad o neutralidad. Transferibilidad o aplicabilidad. Consistencia, confiabilidad o dependencia. Contribucin a la solucin de problemas.

Parafraseando a Martnez (2004), cada representacin del conocimiento tiene sus propios intereses, sus propios usos, sus propios criterios, por tanto debe ser justificada en sus propios trminos. Por ello es importante que en investigacin educativa de abordaje cualitativo se consideren los criterios descritos al evaluar los informes presentados como producto o creacin del desarrollo acadmico profesional en sus diferentes presentaciones: Trabajo de ascenso, Trabajo de grado de especializacin Trabajo de grado de maestra, Tesis doctoral, Ponencia para evento divulgativo, Artculo para publicaciones peridicas de corte cientfico.

10

REFERENCIAS Benzcri, JP. (1973): L'Analyse des Donnes, Tome I: La Taxinomie. Pars: Dunod. Benzcri, JP. (1976): L'Analyse des Donnes, Tome II: L' Analyse des Correspondances. Pars: Dunod. Benzcri, JP. (1988): Cualidad y cantidad en la tradicin de los filsofos y en Anlisis de Datos. Les Cahiers de l'Analyse des Donnes. XIII (I): 131-152. Castillo, E; Vsquez, ML. (2003). El rigor metodolgico en la investigacin cualitativa. En Colombia Mdica. Vol.34: 164-167. Cali: Universidad del Valle. Guba, EG.; Lincoln, YS. (1981). Effective evaluation: improving the usefulness of evaluation results through responsive and naturalistic approaches . San Francisco: Jossey-Bass. Leininger, M. (1994). Evaluation criteria and critique of qualitative research studies. Qualitative research methods. Beverly Hills: Sage Publications. Lincoln YS, Guba EG. (1985). Naturalistic inquiry. Beverly Hills: Sage Publications. Martnez, M. (2004). Arte y Ciencia de la Metodologa de la Investigacin Cualitativa . Mxico: Trillas. Morse J.; Barret M.; Mayan M. (2002). Verification strategies for establishing reliability and validity in qualitative research. Inst J Qual Meth [Disponible en: http://www.ualberta.ca/~ijqm] Rada, D. (2006). Credibilidad, Transferibilidad y Confirmabilidad en Investigacin Cualitativa. Revista IPASME, Vol. Mayo 2006. MED-IPASME Rodrguez, R.J. (2006). Cmo Analizar Cuantitativamente Datos Cualitativos. En http://www.gestiopolis.com/canales/demarketing/articulos/62/datoscuali.htm (Consulta, mayo 2006) ___________________________ DORA MAGALY RADA CADENAS Licenciada en Educacin, Mencin Dificultades en el Aprendizaje (UNA), Formacin Avanzada en Investigacin (SYPAL), Maestra en Ciencias Mencin Orientacin en Sexologa (CIPPSV), Especialista en Informtica y Telemtica en Educacin a Distancia (UNA), Doctoranda en Educacin (UPEL-IP Maracay). Investigadora reconocida por el Ministerio de Ciencia y Tecnologa e Innovacin en el Programa de Promocin a la Investigacin: PPI N 7341. Ponente con publicaciones nacionales e internacionales. Lnea de Investigacin: Estrategias Cognitivas y Estilos de Aprendizaje. Coordinadora Nacional de Publicaciones Especiales de la Secretara. Universidad Pedaggica Experimental Libertador, Sede Rectoral. Telf. 0582128060102.

11

dora_rada@hotmail.com

12