validacion y confiabilidad de instrumentos
DESCRIPTION
vsTRANSCRIPT
UNIVERSIDAD CESAR VALLLEJO
OFICINA DE INVESTIGACIÓN
DIPLOMADO EN INVESTIGACIÓN
INSTRUMENTOS, VALIDEZ Y
CONFIABILIDAD
M G . O LG A E S P Í R I T U AG U I R R E
INSTRUMENTOS
Los instrumentos en investigación se seleccionan en función de:
El problema de investigación
Las hipótesis planteadas
La muestra previamente determinada.
Si los datos son mal obtenidos, la investigación pierde su validez y objetividad.
1. LA ENTREVISTA COMO HERRAMIENTA DE LA CIENCIA
La entrevista es quizá el instrumento más antiguo y
utilizado por el hombre para obtener información.
Cuando se usa adecuadamente, puede proporcionar
una gran cantidad de información que por su propia
naturaleza es imposible obtener de otro modo
No debe utilizarse si existe otro método que responda
a los objetivos de la investigación.
1.1 ASPECTOS A CONSIDERAR EN UNA
ENTREVISTA
Los entrevistadores deben: Estar debidamente entrenados Poseer por lo menos una cultura media que
comprenda la importancia de cada dato recogido. Ser mentalmente ágil, y Ser capaz de dejar hablar libremente a los demás,
evitando innecesarias reacciones de temor, agresividad y desconfianza en el entrevistado.
Las preguntas deben ser probadas previamente y revisarse para descartar ambigüedades y la redacción inadecuada.
1.2TIPOS DE ENTREVISTA:
Entrevistas no estructuradas: No existe una estandarización formal, hay libertad para formular las preguntas.
Entrevista informal:
Se deja hablar al entrevistado, de modo de obtener un panorama de los problemas más importantes para él.
Es de gran utilidad en estudios exploratorios y es recomendable cuando se trata de abordar realidades poco conocidas por el investigador.
1.2 TIPOS DE ENTREVISTA
Entrevista focalizada:
Se caracteriza por tratar sobre un único tema. El entrevistador propone algunas orientaciones pero, centra siempre la conversación
Es recomendable en situaciones experimentales, con el objeto de explorar a fondo alguna experiencia vivida en condiciones precisas
Entrevistas formalizadas
Se desarrollan en base a un listado fijo de
preguntas, cuyo orden y redacción permanece
invariable.
Comúnmente se administra a un gran número
de entrevistados para su posterior tratamiento
estadístico.
1.2 TIPOS DE ENTREVISTA
ENTREVISTA PERSONAL
Contacto directo entrevistador y entrevistado
• VENTAJAS: • Porcentaje de respuestas elevado
• Permite material de apoyo
• No influencia de terceros
• Puede obtenerse más información
• Adaptable al entrevistado
• INCONVENIENTES:
• Elevado costo por recogida
• Elevado costo por tiempo
• Aparición de sesgos (entrevistador)
• Influencia sobre el entrevistado
• Incorrecta lectura
ENTREVISTA POSTAL u ONLINE VENTAJAS INCONVENIENTES • Rapidez Bajo índice de respuesta
• Accesibilidad Información no representativa
• Economía Contestación sin orden
• Ausencia de sesgos Abandono en cumplimentación
• Flexibilidad Mínimo material de apoyo
Influencias de terceros
Cambio de encuestado
No información adicional
Mala interpretación
ENCUESTA TELEFÓNICA: VENTAJAS
• Rapidez en la obtención de información
• Facilidad de organización del proceso
• Útil con individuos ocupados
• Accesibilidad a muestra dispersa
• Coste reducido y mayor respuesta
• Respuestas más fiables sin sesgos
2. La observación
Permite acumular y sistematizar información de
un hecho o fenómeno en" tiempo presente”.
Ventaja: Facilita la obtención de datos lo más
próximo a cómo ocurren en la realidad
Desventaja: Los datos obtenidos se refieren a un
solo aspecto del fenómeno observado.
2.1 PASOS A SEGUIR EN LA OBSERVACIÓN
1° Identificar y delimitar el problema de estudio.
2°Tomar contacto directo con el hecho o fenómeno,
motivo de estudio
3°Registrar lo observado, de manera veraz y lo más
objetivamente posible de forma descriptiva y
detallada.
4°Sistematizar la información en una matriz de datos,
para su análisis, estableciendo la relación entre
unidades de análisis, variables y valores o
respuestas.
3. El Cuestionario
El cuestionario y la entrevista son técnicas
de la encuesta
El cuestionario está compuesto por un
conjunto de reactivos (ítems) elaborados
cuidadosamente sobre hechos y datos de
interés en una investigación, que en
general es para todos los informantes
3.1 TIPOS DE CUESTIONARIO
Cuestionario estructurado o con preguntas
cerradas, el informante, para cada pregunta, tiene
como únicas alternativas de respuesta las que indica
el cuestionario.
Cuestionario no estructurado o con preguntas
abiertas, el informante, para cada pregunta, tienen
total libertad de expresar su propia respuesta.
Cuestionario mixto, incluye preguntas abiertas y
cerradas, es generalmente el más utilizado.
3.2 VENTAJAS DEL CUESTIONARIO
No es imprescindible la presencia del investigador o de
una persona en la aplicación del cuestionario.
Su aplicación no necesita de un personal especializado
en el tema de la investigación.
Es más uniforme en los datos que se recolecta (las
preguntas son las mismas para todos los
informantes).
Es más funcional en su aplicación a muestras grandes
Es menos costosa en la aplicación, sistematización y
procesamiento estadístico de la información, que en
el caso de la entrevista.
3.3 DESVENTAJAS DEL CUESTIONARIO
Es demasiado rígido y permite la recolección únicamente del dato al que se refiere la pregunta. Esto puede dar lugar a una pérdida de información importante para la investigación.
Es demasiado formal y puede ocasionar resistencia en el informante a contestar determinadas preguntas.
Existe mayor posibilidad, que en la entrevista, de obtener demasiadas “no respuestas” o “respuestas erróneas”; sobre todo cuando el informante no comprende el correcto sentido de la pregunta.
QUÉ PASOS DEBO SEGUIR PARA ELABORAR UN INSTRUMENTO
DE MEDICIÓN
1ºDefinición del constructo a medir: Tener una
idea muy clara de lo que queremos medir
(constructo), puede requerir revisión
bibliográfica y consultar con expertos.
2ºFinalidad del instrumento: Es conveniente una
declaración explícita y completa de sus fines o
propósitos.
3°Definición de Dimensiones o grandes aspectos
a medir: A partir de éstas identificar los
indicadores por cada dimensión
ETAPAS EN LA CONSTRUCCIÓN DE UN
INSTRUMENTO
4º Elaboración de reactivos o ítems: El proceso implica la redacción, corrección y revisión, estas etapas se repiten hasta lograr reactivos satisfactorios.
Los ítems deben ser claros y transmitir al sujeto la idea sin ambigüedades, la comunicación debe estar desprovista de complejidad.
5ºAnálisis y Comprobación de Reactivos. Se aplica el cuestionario a una muestra piloto de pequeño tamaño de personas, con características semejantes a las de la muestra o población objetivo de la investigación.
ETAPAS EN LA CONSTRUCCIÓN DE UN
INSTRUMENTO
Determinar preguntas más adecuadas y si tienen la extensión adecuada
Si el enunciado es correcto y comprensible
Si es correcta la categorización de la respuesta
Si existen resistencias psicológicas o rechazo hacia algunas preguntas
Si el ordenamiento interno es lógico, si la duración está dentro de lo aceptable para los encuestados.
LA PRUEBA PILOTO PERMITIRÁ:
ETAPAS EN LA CONSTRUCCIÓN DE UN INSTRUMENTO
6º Evaluación de las propiedades psicométricas de la escala o cuestionario
Un buen instrumento tiene que poseer dos características fundamentales: ser válido y confiable
Validez de contenido (validación por expertos)
Debe contener representados a todos los ítems del dominio de contenido de las variables a medir.
Validez de constructo o consistencia interna del instrumento: Se realiza a través del Análisis Factorial que es una técnica estadística multivariante.
Entrevistas informales
Grupos focales de la población
Encuesta sobre la comprensión de las
preguntas
LA PRUEBA PILOTO PUEDE HACERSE MEDIANTE:
PRINCIPIOS DE REDACCIÓN
Formular preguntas relevantes a la investigación
En lo posible no redactar preguntas en forma
negativa.
La redacción de las preguntas deben ser precisas y
fáciles de comprender
Ni las preguntas ni las alternativas de respuesta
pueden referirse a varias cuestiones al mismo
tiempo (principio de la idea única)
Evitar preguntas que obliguen a hacer cálculos o
esfuerzos de memoria
Evitar términos cargados de afectividad o juicios de
valor
En preguntas sensibles aumentar los intervalos de
respuesta y crear un contexto tranquilizador.
Evitar el uso de la interrogación ¿porqué ?
PRINCIPIOS DE REDACCIÓN
SESGOS EN EL DISEÑO DE LOS ÍTEMS
Error de tendencia: Consiste en elegir entre las diferentes
opciones de respuesta, las centrales
Deseabilidad social: Se responde en función de lo que se
considera socialmente aceptable.
Sesgo de aprendizaje o de proximidad: Induce a contestar
de forma similar a las respuestas anteriores.
Error lógico: El encuestado considera que todos los ítems
deben puntuarse igual
COMPOSICIÓN DE LOS REACTIVOS O ÍTEMS:
Número mínimo de ítems: Desde 10 a 90
(excepcionalmente 6). Debe abarcar de forma
proporcional cada una de las dimensiones
definidas a priori en el constructo.
PUNTUACIÓN DE LOS ÍTEMS
Ítems simples: la puntuación directa se obtiene como
la sumatoria de respuestas acertadas o de los
valores que se hayan dado a cada opción.
Ítems ponderados: el valor de cada opción de
respuesta no es la misma o no se otorga el mismo
valor a todos los aciertos.
CODIFICACIÓN DE LAS RESPUESTAS
Pueden ser:
Dicotómicas: Sólo incluye dos respuestas excluyentes
Ejemplo: Si/No, Verdadero/Falso
Policotómicas: Incluyen más de dos respuestas.
Ejemplo: En los días que vas a la escuela,
¿cúanto tiempo ves televisión?
A) No veo televisión B) Menos de 1 hora
C) 1 ó 2 horas D) 3 ó 4 horas E) 5 ó más horas
CODIFICACIÓN DE LAS RESPUESTAS
Analógica lineal: La gradación se da en una línea medida en cm (10cm)
Ejemplo: El profesor tiende a monopolizar las discusiones en clase
(línea de 10 cm)
Totalmente de acuerdo____________________ Totalmente en desacuerdo
Analógica numérica: La gradación es similar a la anterior pero con números
Ejemplo:
Totalmente de acuerdo 0 1 2 3 4 5 6 7 Totalmente en desacuerdo
Analógica verbal:
Escalas tipo Likert: generalmente las respuestas oscilan entre 5 y 7
Ejemplo: Deberían prohibirse los anuncios de tabaco
A) Muy de acuerdo B) De acuerdo C ) Ni de acuerdo, ni en desacuerdo
D) En desacuerdo E) Muy en desacuerdo
Escala del Diferencial Semántico. Consiste en una
serie de adjetivos extremos que califican al objeto de
actitud y el sujeto selecciona aquella que refleje su
actitud en mayor medida.
Ejemplo:
Respecto a la universidad de mi preferencia: UCV
La información que de ella tengo es:
Abundante --- --- --- --- --- --- --- Escasa
CODIFICACIÓN DE LAS RESPUESTAS
VALIDACIÓN DE INSTRUMENTOS
(CREACIÓN VALIDACIÓN Y OPTIMIZACIÓN
CASO 2: Si yo midiera la temperatura ambiental mediante un
termómetro y me indicara que hay 22°C. Un minuto más tarde
consultara otra vez y el termómetro me indicara que hay 5°C . Tres
minutos después observara el termómetro y ahora me indicara que
hay 40°C. Este termómetro no sería confiable. (Su aplicación
repetida produce resultados diferentes).
CASO 1: Imagina que deseas evaluar el Nivel nutricional de un
grupo de niños y el instrumento que vas a usar es una BALANZA
MALOGRADA.
No importa si tu proyecto de investigación es perfecto
No importa si tu muestra es representativa
No importa si contratas al mejor estadístico del mundo
No importa si invertiste mucho dinero y mucho tiempo.
Simplemente tus resultados no sirven ¿EVIDENTE NO?
VALIDEZ Y CONFIABILIDAD DE LOS
INSTRUMENTOS DE RECOLECCIÓN DE DATOS
1. VALIDEZ : SEGURIDAD, EXACTITUD
2. CONFIABILIDAD : PRECISIÓN REPRODUCIBILIDAD
VALIDEZ DE CONTENIDO
Obtener la validez de contenido implica:
1°Revisar cómo ha sido tratada esta variable por otros investigadores anteriormente
2° Elaborar un universo de ítems tan amplio como sea posible, para medir la variable en todas sus dimensiones.
3° Consultar con investigadores expertos en el tema para ver si el contenido es exhaustivo.
VALIDEZ DE CONTENIDO: ÍNDICE DE OSTERLIND DE CONGRUENCIA PARA LA VALORACIÓN
DE LOS JUICIOS DE EXPERTOS
Un procedimiento que permite de una forma operativa sintetizar las valoraciones hechas
por los expertos (investigadores, académicos y/o profesores) sobre la adecuación de los
indicadores o items seleccionados está dado por el Índice de Congruencia de Osterlind,
cuya ecuación es:
CONFIABILIDAD
Consistencia Interna
(Alfa de Cronbach
Implica conocer que proporción de la varianza de los
resultados obtenidos en una medición es varianza verdadera,
se asume que toda condición que no es relevante para
efectos de la medición representa varianza error. Tenemos el
Alfa de Cronbach y el Kuder – Richardson (KR-20)
Este índice presenta valores entre cero y uno.
Si su valor es cercano a la unidad se trata de un instrumento fiable
que hace mediciones estables y consistentes.
Si su valora está por debajo de 0,8 el instrumento que se está
evaluando presenta una variabilidad heterogénea en sus items y
por lo tanto nos llevara a conclusiones equivocadas.
Existen dos formas de calcularlo
ALFA DE CRONBACH
(Índice de Consistencia Interna)
ALFA DE CRONBACH
(Índice de Consistencia Interna)
VALIDEZ DE CONSTRUCTO
ANÁLISIS FACTORIAL
Consiste en establecer grupos de items
que se definirán como dimensiones.
ANÁLISIS FACTORIAL El análisis factorial es una técnica de reducción y/o
agrupación de datos que sirve para encontrar grupos
homogéneos de variables a partir de un conjunto
numeroso de variables. Estos grupos se forman con
variables que correlacionan mucho entre si y
procurando que los grupos sean independientes de
otros.
El análisis factorial puede ser exploratorio o
confirmatorio
ETAPAS EN EL ANÁLISIS FACTORIAL
1° Verificar la adecuación de los datos para aplicar el análisis
factorial
Es importante que las variables consideradas para el
análisis factorial se midan con una escala de intervalo y que el
tamaño de la muestra sea cuando menos, el quintuplo de las
variables observadas.
2° Pruebas conexas que indicarán si es pertinente llevar a
cabo el análisis factorial
2.1 El determinante de la matriz de correlaciones, que debe
tener un valor bajo (no debe ser cero)
2.2 El Test de Esfericidad de Bartlett, que se utiliza para probar
la hipótesis nula que afirma que la variables no están
correlacionadas en la población. (Significancia : P< 0,05), se
rechaza la hipótesis nula y se continua el análisis.
ETAPAS EN EL ANÁLISIS FACTORIAL
2.3 El Índice Kaiser-Meyer-Olkin, que mide la
adecuación de la muestra. Los valores entre 0,5 y
1 indican que es apropiado aplicar el análisis
factorial
2.4 Medida de adecuación de la muestra MSA:
Este índice queda reflejado en la diagonal principal
de la matriz de correlaciones anti-imagen. (verificar
si los valores son cercanos a 1), se aconseja la
aplicación de esta técnica
ETAPAS EN EL ANÁLISIS FACTORIAL
3. Extracción de factores, en el análisis factorial
existen diversos métodos para realizar la extracción
de factores. El SPSS ofrece siete métodos. El método
de Componentes principales es el más usado.
4. Número de factores a ser extraídos, se disponen
de diversas reglas y criterios, El criterio de raíz
latente es una técnica sencilla de aplicar y es la que
se usa más frecuente, se consideran los factores
que tienen raíces o autovalores mayores de 1, que
explican al menos una variable.
5. Rotación de los Factores Iniciales, con frecuencia
es difícil interpretar los factores iniciales
5. Rotación de los Factores Iniciales, con frecuencia
es difícil interpretar los factores iniciales, por lo tanto
la extracción inicial se rota con la finalidad de lograr
una solución que facilite la interpretación. El método
de rotación varimax es el más usado.
6. Denominación de los factores, la denominación
que debe adjudicarse a los factores encontrados es
algo subjetivo y requiere de una combinación de
intuición y gran conocimiento de las variables. Se
recomienda contar con la ayuda de expertos en la
materia.
Indica hasta qué punto las puntuaciones en un test
correlacionan con una variable criterio, que
generalmente es otro test que evalúa lo mismo. La
validez se obtiene averiguando la correlación de
Pearson entre las puntuaciones de ambos test. Grado
de relación entre dos instrumentos diferentes que
miden el mismo concepto y que se administran a la
misma vez. Con el SPSS se obtiene a través de la
correlación de la media de los valores de los ítems del
cuestionario con la valoración de la evaluación global
(Item criterio).
VALIDEZ CONCURRENTE
Permite determinar la eficacia del instrumento para
apreciar diferencias en el análisis del constructo.
(diferencia entre grupos o factores que componen el
instrumento), de esta forma el instrumento debe ser lo
suficientemente sensible para distinguir niveles variados
de ejecución. Se determina en base al análisis de
diferencias significativas por ejemplo: género, niveles
educativos, etc. Se obtiene a través del ANOVA de un
factor entre la media global y alguna variable del
instrumento clasificada en niveles).
VALIDEZ DIFERENCIAL
