validez y confiabilidad de un instrumento
TRANSCRIPT
Validez y Confiabilidad de un instrumento
Ricardo Vilchez
17/04/2023 2
La preocupación de los investigadores cuando utilizan instrumentos de medición es saber que confiabilidad tiene el instrumento, como se determina la validez de cada pregunta, el índice de discriminación, el grado de dificultad de la prueba y grado de dificultad de los ítems.El instrumento óptimo de medición es aquel que genera mediciones importantes, precisas, objetivas, sensibles, unidimensionales y eficientes. Ningún instrumento de medición es perfecto.
CONFIABLIDAD Y VALIDEZ
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
Confiabilidad y validez para evaluar los instrumentos de medición
Requisitos de la Medición
Validez Confiabilidad
Validez de Contenido
Validez de Criterio
Validez de Constructo
Factores Que Atentan Contra La Validez Y Confiabilidad
CONFIABILIDAD Y VALIDEZPrincipios
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
REQUISITOS DE LA MEDICIÓN
Toda medición o instrumento de recolección de datos debe reunir dos requisitos básicos: CONFIABILIDAD Y VALIDEZ.
CONFIABILIDAD DE UN INSTRUMENTO: Se refiere al grado en que su aplicación repetida al mismo sujeto u objeto produce resultados similares o consistentes con mediciones previas.
VALIDEZ DE UN INSTRUMENTO: se refiere al grado en que un instrumento de medición realmente mide la variable que pretende medir. Hernandez Sampieri
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
17/04/2023 5
CÁLCULO DE LA VALIDEZ
• La validez de contenido: Juicio de Expertos• La validez de criterio: Correlacionar la medición del
instrumento con el criterio externo para obtener el coeficiente de la validez.
• La validez de constructo: cómo una medición se relaciona con otras de acuerdo con la teoría o hipótesis que concierne a los conceptos que se están midiendo.
• Análisis factorial
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
6
JUICIO DE EXPERTOS
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
17/04/2023 7
TÉCNICAS PARA EL CÁLCULO DE LA CONFIABILIDAD
• Test re-test o Medida de Estabilidad• División por mitades o Mitades Partidas,
Spearman – Brown, de Rulon – Guttman • Coeficiente Alfa de Cronbachs• Kuder Richardson o KR-20
UNIVERSIDAD NACIONALJosé Faustino Sánchez Carrión
COEFICIENTE DE CONFIABILIDAD ALFA DE CRONBACH
Desarrollado por Cronbach (1951) y ampliado posteriormente. Puede considerarse como la medida de todas las correlaciones de división por mitades posibles, las buenas junto con las malas, corregidas por la fórmula de spearman –Brown. El coeficiente alfa también puede ser usado en pruebas con reactivos dicotómicos, además de las pruebas donde los reactivos no son dicotómicos: reactivos que pueden calificarse de una forma individual a lo largo de un rango de valores (ejemplos: encuesta de opinión y de actitudes, donde se presenta un rango de alternativas posibles, las pruebas de ensayo y respuesta corta, donde puede darse puntaje parcial). Actualmente el coeficiente alfa es la estadística preferida para obtener una medida de la consistencia interna.
t
i
S
S
m
m2
2
11
= Coeficiente de Confiabilidad Alfa de Cronbach m = Número de ítems o variables
iS 2 = Varianza de la suma del ítem i-avo
tS 2 = Varianza de la escala (Puntaje total)
Valores de cocientes de confiabilidad
VALORES INTERPRETACION
1,00 Confiabilidad perfecta
0,72 a 0,99 Excelente confiabilidad
0,66 a 0,71 Muy confiable
0,60 a 0,65 Confiable
0,54 a 0,59 Confiabilidad baja
Menos a 0,53 Confiabilidad nula
DISCRIMINACION CALIDADRECOMENDACI
ON
> 0.39 Excelente Conservar
0.30 - 0.39 BuenaPosibilidad de mejorar
0.20 - 0.29 RegularNecesidad de revisar
0.00 - 0.19 PobreDescartar o revisar
< 0.00 Pésima Eliminar
Persona Preg_1 Preg_2 Preg_3 Preg_4 Preg_5 Preg_6 Preg_7 Preg_8 Preg_9 Preg_101 4 4 3 3 4 5 5 5 4 52 5 1 5 2 4 2 4 4 4 23 5 2 3 1 4 2 4 4 4 14 5 1 5 5 5 5 5 5 5 55 3 3 3 3 3 3 4 3 3 26 4 3 4 2 3 4 5 1 4 47 5 3 5 2 5 1 5 3 5 18 5 1 5 2 4 2 3 3 4 29 5 4 1 1 5 4 5 4 5 110 4 4 4 1 5 4 4 4 4 411 5 1 5 2 4 4 5 4 5 312 5 1 4 1 4 3 5 1 5 113 2 4 2 2 4 2 4 4 5 114 5 5 4 4 5 4 5 5 5 315 5 1 5 1 5 1 5 5 5 116 5 1 5 1 5 3 5 1 5 217 3 2 4 2 4 4 4 4 4 418 4 4 4 1 4 2 5 2 4 119 4 3 4 5 4 5 5 4 4 420 4 4 4 5 5 4 5 4 4 421 4 4 5 2 4 3 4 2 4 2
Correlación Elemento-Total
Corregida0.008 -0.007 -0.062 0.617 0.36 0.56 0.372 0.355 0.062 0.604
Discriminación de ítems
Determinación del grado de dificultad del test:
DIFICULTAD DE UN ITEM• Es la proporción de sujetos que escoge la opción correcta. Se suele
obtener como el cociente entre el número de personas que lo aciertan y el número de personas que lo responden.
• La dificultad de las preguntas se mide en base al porcentaje de aciertos en la pregunta. El indicador varía entre 0 y 1. Una pregunta con una dificultad de 0.3 es más difícil que una pregunta con una dificultad de 0.8. En el primer caso solo el 30% acertaron la pregunta y en el segundo caso acertaron el 80%. Es decir, y como se ha observado en la literatura, el indicador se mide en forma inversa a la dificultad de la pregunta.
• Una pregunta tiene una dificultad media si fue respondida correctamente por aproximadamente el 50% de los examinados, o sea, su índice de dificultad es cercano a 0.5. Generalmente índices de dificultad entre 0.3 y 0.7 maximizan la información que el test provee sobre la diferencia entre los examinados.
Índice de dificultad de un ítem
¿Cómo las nuevas tecnologías están cambiando nuestra mente?
INFLUE NCIA DE LA S NUEV AS TE CNOLO GÍAS E N LA ATE NCIÓ N Y RE LAJACIÓ N E N ALUM NOS D E LA FACULTAD DE INGE NIE RIA DE LA
UNJFS C -HU AC HO E N E L S E M ES TRE 2012-II
Ricardo Vilchez Chumacero
Objetivo General
1. Estudiar el uso de aparatos electrónicos, y su influencia en la actividad de multitarea de
alumnos de ingeniería 2. Comprobar el empleo de horas on-line y su influencia en tiempo disponible para relajarse en
alumnos de Ingeniería
MATRIZ DE ANALISIS DE JUICIO DE EXPERTOS N° PREGUNTAS SI NO
1 El instrumento recoge información que permite dar respuesta al problema de investigación
2 El instrumento propuesto responde a los objetivos del estudio
3 la estructura del instrumento es adecuada
4 Los ítems del instrumento responde a los objetivos del estudio
5 La secuencia presentada facilita el desarrollo del instrumento
6 Los ítems son claros y entendibles 7 El número de ítems es adecuado para su aplicación
CUESTIONARIO SMALLI. LA MUTITAREA Y LA ATENCIÓN1. Cuando interrumpe una tarea, ¿le es difícil reemprenderla?2. Al leer o escuchar unas instrucciones, ¿se suelen pasar por alto detalles importantes? 3. Si le interrumpen mientras habla por teléfono y le dice a la persona con quien habla que volverá
a llamarla, ¿se olvida de hacerlo?4. ¿Alguna vez se encuentra con que está haciendo dos o tres cosas a la vez (por ejemplo, mirar el
correo electrónico, hablar por teléfono y firmar papeles?5. ¿La multitarea hace que cometa errores, deje las cosas fuera de su sitio u olvide información
importante?6. Cuando intenta prestar atención a algo, ¿le distraen fácilmente otras cosas de su alrededor? II. LA RELAJACION Y LAS HABILIDADES CREATIVAS off-line7. ¿Le resulta fácil descansar y relajarse sin recurrir a la tecnología? 8. ¿Sale a dar un paseo o tiene costumbre de ir al parque, la playa o cualquier otro entorno
natural? 9. ¿Le gusta pintar, la música, diseño gráfico u otras ocupaciones creativas off-line?10. ¿Le gusta leer por puro placer algo más que noticias, revistas electrónicas, blogs y redes sociales
on-line?11. ¿se reserva tiempo para reflexionar, socializar, hacer yoga, ejercicio físico, leer o participar en
otras actividades relajantes?
¿Cómo las nuevas tecnologías están cambiando nuestra mente? (Small-1)
INSTRUCCIONES: 1. La información que Ud. Nos brinde es personal, Sincera y Anónima. 2. Marque sólo una de las respuestas de cada pregunta, que Ud. Considere la opción correcta. 3. Debe contestar todas las preguntas.
ASPECTOS GENERALES
1. SEXO a) Masculino b) Femenino 2. EDAD: a) 15 a 20 años b) 21 a 25 años c) 26 a 30 años
d) 31 a 35 años e) 36 a 40 años f) 41 a más años 3. NIVEL DE INSTRUCCIÓN COMPLETA:
a) Primaria b) Secundaria c) Universitaria d) Maestría e) Doctorado 4. EXPERIENCIA EN USO DE COMPUTADORES: a) 1 año b) 2 años
c) 3 años d) 4 años e) 5 años f) más de 5 años 5. FRECUENCIA DE ACCESO A INTERNET:
a) Una vez al día b) Varias veces al día c) Una vez a la semana 6. ULTIMO DIA DE CONEXIÓN A INTERNET:
a) La semana pasada b) Hace 3 días c) Hace 2 días d) ayer
CUESTIONARIO SMALL I. LA MUTITAREA Y LA ATENCIÓN
A medida que dedicamos más tiempo al uso de aparatos electrónicos, tendemos a aumentar la actividad de multitarea y a reducir los momentos de atención exclusiva a una sola tarea.
1. Cuando interrumpe una tarea, ¿le es difícil reemprenderla? 1) SIEMPRE
2) USUALMENTE
4) RARA VEZ
3) ALGUNAS VECES
5) NUNCA
100%
75%
50%
25%
0% 2. Al leer o escuchar unas instrucciones, ¿se suelen pasar por alto detalles
importantes?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 3. Si le interrumpen mientras habla por teléfono y le dice a la persona con
quien habla que volverá a llamarla, ¿se olvida de hacerlo?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1
4. ¿Alguna vez se encuentra con que está haciendo dos o tres cosas a la vez (por ejemplo, mirar el correo electrónico, hablar por teléfono y firmar papeles?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 5. ¿La multitarea hace que cometa errores, deje las cosas fuera de su sitio u
olvide información importante?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 6. Cuando intenta prestar atención a algo, ¿le distraen fácilmente otras
cosas de su alrededor?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1
II. LA RELAJACION Y LAS HABILIDADES CREATIVAS off-line Emplear horas on-line contestando correos en un dispositivo de mano o entreteniéndose con videojuegos interactivos puede provocar tensión y ansiedad. Es evidente que las horas dedicadas a Internet reducen la cantidad de tiempo disponible para relajarse y realizar otras actividades más creativas off-line.
7. ¿Le resulta fácil descansar y relajarse sin recurrir a la tecnología?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 8. ¿Sale a dar un paseo o tiene costumbre de ir al parque, la playa o
cualquier otro entorno natural?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 9. ¿Le gusta pintar, la música, diseño gráfico u otras ocupaciones creativas
off-line?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 10. ¿Le gusta leer por puro placer algo más que noticias, revistas electrónicas,
blogs y redes sociales on-line?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1 11. ¿se reserva tiempo para reflexionar, socializar, hacer yoga, ejercicio físico,
leer o participar en otras actividades relajantes?
2 3 4 5
RARA VEZUSUALMENTE NUNCAALGUNAS VECESSIEMPRE
1