INTRODUCCIÓN A LA ASIGNATURA

OBJETIVO Y TEMARIO

Buenas tardes, te doy la más cordial  ¡bienvenida¡ a esta asignatura de Elaboración y Validación de Instrumentos aplicados a la psicología.

El Objetivo de esta asignatura es : que al término del curso comprendas y seas capaz de analizar el concepto de medición y su aplicación en el campo de la psicología para elaborar y analizar instrumentos de evaluación psicológica.

 

 Esta asignatura esta dividida en tres grandes temas que a continuación te desgloso:

 

1. LA MEDICIÓN EN EL CAMPO DE LA PSICOLOGÍA

1.1 Naturaleza de la medición en la psicología

1.2 Construcción de pruebas psicológicas : generalidades

1.3 Tipos y definición de pruebas (instrumentos)

1.4 Uso y abuso de las pruebas

1.5 Aspectos éticos y humanismo en la medición e investigación psicológica

 

2. ETAPAS DE LA ELABORACIÓN DEL ANÁLISIS DE LOS INSTRUMENTOS DE MEDICIÓN

2.1 Especificación de objetivos

2.2 Delimitación de los contenidos ( tabla de especificaciones )

2.3 Elaboración de reactivos

2.4 Tipos de reactivos

2.5 Lineamientos para la elaboración de reactivos ( redacción y ordenamiento)

2.6 Formato del instrumento

2.7 Presentación

2.8 Instrucciones

2.9 Hojas de respuestas

3. LAS ETAPAS DE ANÁLISIS DE LOS INSTRUMENTOS DE MEDICIÓN

3.1 Análisis de reactivos

3.2 ïndice de dificultad

3.3 Índice de discriminación

3.4 Análisis de preguntas abiertas ( análisis de contenido- concepto de sensibilidad)

3.5 Análisis global del instrumento

3.6 Confiabilidad

3.7 Estabilidad

3.8 Equivalencia

3.9 Partición por mitades

3.10 Validez

3.11 De contenido

3.12 De criterio ( correlación de Pearson)

3.13 De constructo ( análisis factorial exploratorio)

3.14 Transformación de puntuaciones y estandarización

3.15 Basados en normas

3.16 Percentiles

 

 

BIBLIOGRAFÍA BÁSICA PARA LA ASIGNATURA

1. IQ Y TEST PSICOMÉTRICOS. GESTION . CARTER, PHILIP. ED. GESTION 2000.

2. PSICOLOGÍA Y MEDICIÓN. HERRANS, LAURA LETICIA. ED.MC GRAW HILL 2000.

3. TÉCNICAS ESTADÍSTICAS CON SPSS . PÉREZ, C. ED. PRENTICE HALL. 2001.

INTRODUCCIÓN A LA NATURALEZA DE LA MEDICIÓN

Para poder adentrarnos en este tema es necesario entender el origen de la medición en especial dentro de la Psicología, como ya revisamos en la clase de inició, La necesidad de convertir a la Psicología en una ciencia , origina que diferentes investigadores y estudiosos de éste campo, se den a la tarea de aplicar y usar el método experimental , buscando datos y documentando a través del uso de métodos estadísticos, las diferentes variables que influyen en los eventos de carácter psicológico.

Podemos decir que a partir de 1830 el  inicia el auge de la medición  mental, como es conocido en un principio referente a procesos psicológicos internos. Países como Alemania, Inglaterra y Francia inicialmente, se interesan en el desarrollo de la psicología experimental y la medición de la misma para poder identificar, de forma observable  conductas derivadas de procesos internos que seria difícil conocer internamente, pero que a través de observar y medir su manifestación como parte de la conducta, permite entender :el pensamiento, persepción, lenguaje, memoria, etc... como parte de la conducta humana.

En Inglaterra surge un investigador y psicólogo británico que influyó directamente en la psicología diferencial y la medición, del cual ya te he hablado; Sir Francis Galton, su

interes se centro en la sensoriopercepción y en el estudio de las diferencias individuales y la evaluación de las pruebas mentales. A partir de la publicación de Charles Darwin  ( primo de Galton ), de el Origen de las Especies Galton se interesará en el estudio de la "genialidad", es decir si el que un individuo sea considerado, brillante o genio dada su inteligencia, es heredado. Y si esto es así entonces  los Genios heredan la genialidad a sus hijos, y a partir de esto crea su Obra " El Genio Heredado", posteriormente publica su Obra  "Investigacióndel Desarrollo de las Facultades Humanas". Crea el primer laboratorio  antropométrico; en el que se median las características físicas y sensoriomotoras.

Galton influyó a otros investigadores y supó rodearse de científicos brillantes que trabajaron con él como : Karl pearson, quién a partir de lo Galton establece como correlación, más a delante Pearson lo continuará; también colaborán con Galton, James Mc Keen , Charles Spearman ( teoria bifactorial de inteligencia), a partir de estos estudios se irá estableciendo su conexión con lo que se realiza en otros países.

Mientras tanto en Francia Binet  desarrolla su prueba para la medición de la inteligencia para la Secretaria de Educación de Francia, con el objeto de identificar el rendimiento escolar en niños: normales, sobresalientes y con retraso mental. En Francia  surgen otros estudiosos como: La Place, Esquirol, pineal , Charcot, Ribot, Seguin, Itard. A la par en Alemania se comienza  ha  avanzar con el desarrollo de la Psicología experimental con científicos como : Weber, Fechner y Wundt, ( en estados Unidos) quién influye directamente en el desarrollo de la psicología hacia su cientificidad.

Por la necesidad de la Psicológia en darle cientificidad y lograr predecir  o descubrir las leyes que rigen el comportamiento humano, se ha hecho necesario contar con instrumentos que nos permitan conocer esos fenómenos internos de forma observable, De tal manera que gracias a estos científicos y a otros más como  Catell debemos el desarrollo de las pruebas Psicométricas o Test  Mentales como fueron nombrados por Catell en 1890, en un principio sólo se media con ellos  aspectos sensoriomotrices : como tiempo de reacción, capacidades auditivas y visuales, sensibilidad al dolor, al gusto etc... Y en el año de 1901 Clark Wissler valida las pruebas de Catell para la selección de estudiantes universitarios. A partir de estas pruebas se puntualiza las diferencia individuales en la ejecución de la conducta como variables, en los estudios científicos.

Podemos afirmar que el uso de instrumentos de medición, como las pruebas psicológicas ha sido una de las aportaciones de la psicométria, que nos permite conocer a través de ellas procesos internos de origen psicológico, que a través de crear condiciones experimentales, nos permite medir la ejecución o desempeño de un individuo o grupos, para comparar y conocer las diferencias entre ellos y poder realizar una intervención o diagnóstico de tipo Psicológico.

Siempre debemos tener en cuenta que estas pruebas o Test deben ser debidamente validados y garantizar su confiabilidad para poder generalizar su uso en el campo de la psicología. Es por ello que deberás aprender como se elaboran y se validan y esto te ayudará a seleccionar los instrumentos adecuados en tu práctica profesional.

CONSTRUCCIÓN DE PRUEBAS PSICOLÓGICAS

LO QUE DEBES SABER DE LA CONSTRUCCIÓN DE PRUEBAS PSICOLÓGICAS

PARA ESTA ASIGNATURA ES IMPORTANTE RECORDAR ALGUNOS CONCEPTOS QUE YA HEMOS REVISADO EN LA ASIGNATURA DE EVALUACIÓN PSICOLOGICA; COMO SON: LA MEDICIÓN , SU NATURALEZA Y SU IMPORTANCIA EN EL QUEHACER DEL PSICÓLOGO COMO PARTE DEL DIAGNOSTICO, INVESTIGACIÓN O INTERVENCIÓN EN ESTE CAMPO DEL CONOCIMIENTO HUMANO.

RECORDARAS QUE UNO DE LOS OBJETIVOS QUE REVISAMOS FUE LA OBTENCIÓN DE DATOS A TRAVES DE DIVERSOS INSTRUMENTOS DE EVALUACIÓN, PARA PODER REALIZAR UNA EVALUACIÓN PSICOLOGICA QUE PERMITIERA LA ADECUADA INTERVENCIÓN. PUES BIEN UNA PARTE FUNDAMENTAL DE LA PRECISIÓN DE ESTA EVALUACIÓN PSICOLOGICA ES LA VALIDEZ Y CONFIABILIDAD DE LOS INSTRUMENTOS PSICOLÓGICOS UTILIZADOS.

 

LA PSICOLOGÍA BUSCA LA UTILIZACIÓN DE MÉTODOS Y ESTRATEGIAS QUE NOS PERMITAN CONOCER LA REALIDAD DE LOS FENÓMENOS PSICOLÓGICOS REALES, PARA PODER EXPLICAR EL COMPORTAMIENTO DE LA PERSONA O LOS GRUPOS DE PERSONAS QUE SEAN DE SU INTERES. POR ELLO HA RECURRIDO A LA UTILIZACIÓN DE LAS CIENCIAS EXACTAS COMO LAS MATEMATICAS O ESTADISTICAS PARA VALIDAR LOS INSTRUMENTOS, O MEJOR DICHO PARA ENCONTRAR A PARTIR DE ELLOS COMO ASIGNAR

VALORES O VALOR A LOS ATRIBUTOS O VARIABLES QUE ESTUDIA COMO MANIFESTACIONES DE EVENTOS PSICOLOGICOS REALES DEL COMPORTAMIENTO HUMANO

LOS INSTRUMENTOS DE EVALUACIÓN PSICOLOGICA COMO, ENTREVISTAS, TEST, CUESTIONARIOS ETC…. TIENEN COMO OBJETO MEDIR EL AVANCE DE UNA ESTRATEGIA, O LA RELACIÓN O EFECTO DE VARIABLES; A TRAVES DEL DISEÑO DE UN INSTRUMENTO PARA VALIDAR LA CONFIABILIDAD DE UNA MUESTRA OBTENIDA DE UN COMPORTAMIENTO.

PARTE DE LAS HABILIDADES DE UN PROFESIONAL DE LA PSICOLOGIA ES ENTENDERY CONOCER LA ELABORACIÓN Y VALIDACION DE DICHOS INSTRUMENTOS, PARA PODER SELECCIONAR O IDENTIFICAR LOS ADECUADOS PARA INTERPRETACIONES, O DIAGNOSTICOS O INTERVENCIONES DE CALIDAD EN EL EJERCICIO DE SU PROFESION.

 

QUE ES UN INSTRUMENTO DE EVALUACIÓN?

SEGÚN GARCÍA-MONTALVO UN INSTRUMENTO DE EVALUACIÓN PSICOLÓGICA ES

“TODO AQUELLO QUE EL EVALUADOR PUEDE UTILIZAR COMO LEGÍTIMA FUENTE DE

DATOS ACERCA DE UN SUJETO.” EN ESTE SENTIDO, UN INSTRUMENTO PUEDE

EQUIPARARSE AL VOCABLO “TÉCNICA”. DESDE NUESTRO PUNTO DE VISTA SE TRATA

DE UN CONCEPTO MÁS GENERAL PUESTO, QUE LOS INSTRUMENTOS DE EVALUACIÓN

PSICOLÓGICA SE CLASIFICAN EN FUNCIÓN DEL DISTINTO TIPO DE TÉCNICAS,

ENTENDIDAS COMO CONJUNTO DE PROCEDIMIENTOS Y RECURSOS DE QUE SE SIRVE

UNA CIENCIA O UN ARTE.

MUCHAS VECES SE UTILIZA INDISTINTAMENTE INSTRUMENTO, TÉCNICA Y TEST,

PERO NO SON IGUALES. LOS INSTRUMENTOS O TÉCNICAS PUEDEN SER

PROCEDIMIENTOS NO CUANTIFICADOS NI TIPIFICADOS COMO P. EJ LA ENTREVISTA. LOS

TESTS SON UN INSTRUMENTO SISTEMÁTICO Y TIPIFICADO QUE COMPARA LA

CONDUCTA DE DOS O MÁS PERSONAS. SIN EMBARGO, A CUALQUIER INSTRUMENTO O

TÉCNICA DE EVALUACIÓN PSICOLÓGICA SE LE DENOMINA ERRÓNEAMENTE TESTS

PSICOLÓGICO. PERO NO TODAS LAS TÉCNICAS O INSTRUMENTOS SON TESTS PUESTO

QUE PARA SERLO PRECISAN ESTAR ESTANDARIZADOS Y TIPIFICADOS. POR EL

CONTRARIO A LOS TESTS SÍ LES PODEMOS DENOMINAR INSTRUMENTOS DE

EVALUACIÓN PSICOLÓGICA.

 

EN EL CAMPO DE LA PSICOLOGIA DADA LA NATURALEZA DE LO QUE ESTUDIA Y LA COMPLEJIDAD DEL SER HUMANO, SE HA DESARROLLADO TODO UN CAMPO A TRAVES DE UNA DE SUS RAMAS CONOCIDA COMO

PSICOMETRIA CUYO OBJETO SE ENCUADRA EN EL CAMPO DE LA MEDICIÓN PSICOLOGICA, ESTA HACE USO DE CALCULOS Y ANALISIS ESTADISTICOS PARA LA EXTRACCION DE INFORMACION UTIL Y VALIDACION DE LOS DIFERENTES TEST PSICOLOGICOS . UNO DE LOS DATOS IMPORTANTES A ENTENDER ES EL ESTUDIO DE LAS DIFERENCIAS INDIVIDUALES-

EL ENFOQUE DE LA PSICOMETRIA SE ORIENTA A MEDIR ASPECTOS PSICOLOGICOS DE UNA PERSONA O CONDUCTA HUMANA COMO:

         RASGOS DE LA PERSONALIDAD

         EL CONOCIMIENTO

         LAS HABILIDADES

         CAPACIDADES MENTALES

         ESTADO DE OPINION O ACTITUD

LA PSICOMETRIA SE APLICA A TODOS LOS CAMPOS DE LA PSICOLOGIA: EDUCACIÓN, SALUD, LABORAL, SOCIAL.

 

DE LA PSICOMETRIA PODEMOS RETOMAR Y ENFATIZAR LAS SIGUIENTES APORTACIONES PARA NUESTRA ASIGNATURA:

1.       SU TEORIA DE LA MEDICION QUE ABARCA LO RELATIVO A LA FUNDAMENTACION TEORICA DE LA MEDICION.

2.       ESCALAMIENTO QUE SE REFIERE AL PROCESO DE CONSTRUCCIÓN DE ESCALAS DE MEDIDAS PSICOLOGICAS-

3.       ENTENDER Y CONOCER LA VALIDACION DE LOS TEST Y SU UTILIZACION PARA MEDIR.

 

LA ELECCIÓN DE LAS HERRAMIENTAS PSICOLÓGICAS MÁS ADECUADAS, DEPENDE DE QUÉ SE QUIERE EVALUAR, PARA QUÉ Y QUIÉN O QUIÉNES VAN A SER EVALUADOS. DEBEMOS ELEGIR AQUELLAS PRUEBAS QUE RESPONDAN A LAS NECESIDADES ESPECÍFICAS DE LA EVALUACIÓN QUE VAYAMOS A REALIZAR Y QUE POSEAN LA MAYOR FIABILIDAD Y VALIDEZ.

EN ESTA ASIGNATURA REVISAREMOS LOS TEMAS RELACIONADOS CON LOS CONOCIMIENTOS QUE REQUERIRAS PARA LA ELABORACION Y ANALISIS DE LOS INSTRUMENTOS PSICOLOGICOS DE EVALUACION

 

POR LO ANTERIOR ES IMPORTANTE QUE COMPRENDAS LA SIGUIENTE INFORMACIÓN:

 

 

PRINCIPIOS BÁSICOS Y ETAPAS EN LA ELABORACIÓN DE UN TEST

Elaboración de un Instrumento

Elaboración y definición de las variables

Para elaborar un instrumento de medición válido y confiable es recomendable seguir los siguientes pasos:

  1. Determinar cuál es la variable que se desea medir.

  2. Definir la variable.

  3. Determinar indicadores válidos de la variable

  4. Seleccionar una muestra de esos indicadores.

  5. Estructurar el Instrumento

  6. Determinar la validez y confiabilidad del instrumento.

DETERMINAR CUAL ES LA VARIABLE QUE SE DESEA MEDIR

En este caso lo que se medirá dependerá de lo que señalan los objetivos de tu constructo operacional y se realizará con el procedimiento anteriormente señalado.

DEFINIR LA VARIABLE

  El segundo paso para medir una variable es realizar una definición operacional de dicha variable.

  Se puede realizar una definición conceptual por ejemplo definir a la creatividad como la capacidad de dar respuestas únicas u originales y sobre esta definición hacer la consecuente medición, sin embargo esta definición resulta abstracta y dificultaría a dos personas ponerse de acuerdo sobre lo que se pretende medir. Por tal razón se prefieren las definiciones operacionales.

  La Definición Operacional es una definición que determina las operaciones que comprende la medición de una variable. Ejemplo de definición Operacional sería determinar diez maneras de usar ladrillos de vidrio como medida de la creatividad.

DETERMINAR INDICADORES VÁLIDOS DE LA VARIABLE

  Aquí de lo que se trata es de tomar algunas características o conductas específicas como indicadores de lo que deseamos medir.

  Si lo que deseamos es medir la inteligencia primero tendríamos que dar una definición conceptual: “capacidad para aprender de la experiencia” enseguida deberíamos señalar que variables representan un “aprendizaje por medio de la experiencia”, la memoria y la capacidad para generalizar pudieran representar solo dos de tales variables. Pero aún estas dos variables tienen un nivel de abstracción alto así que tendríamos que deducir indicadores fácilmente observables y medibles.

  La capacidad para repetir números de adelante para atrás y viceversa y la capacidad para dar información pudieran ser indicadores de la memoria, en cambio la capacidad para predecir las consecuencias de una acción inmediata pudiera ser un

indicador de la capacidad para generalizar.

  Cabe mencionar que la definición operacional simplifica las cosas porque ya indica desde la misma definición el indicador que se deberá tomar.

SELECCIONAR UNA MUESTRA DE ESOS INDICADORES

Como los indicadores de una variable son numerosos y no se podrían incluir todos en un test, es necesario realizar un muestreo para seleccionar los indicadores más representativos, los cuales serán lo que se incluirán en el test.

ESTRUCTURACIÓN DEL INSTRUMENTO

  Al estructurar el instrumento lo más importante es que se elabore un instructivo que permita que todas las veces que se aplique, se haga en las mismas condiciones, es decir que se busque estandarizar el procedimiento.

Determinar la validez y confiabilidad del instrumento.

La validez de un test se refiere al grado en que la prueba mide lo que pretende medir.

Validez de contenido

  La validez de contenido de se refiere a la pertinencia y representatividad del contenido del test con respecto a la definición de la variable que se va a medir.

  Por ejemplo un indicador válido o pertinente para medir inteligencia de acuerdo a lo revisado en el tema anterior pudiera ser la reproducción memorizada de dibujos, de la misma forma que la altura de una persona sería un indicador menos válido de inteligencia que su habilidad para resolver problemas de aritmética.

  En lo referente a la representatividad revisemos este otro ejemplo, en un test de rendimiento diseñado para medir la aptitud para la lectura, el lenguaje y la aritmética se necesitaría una muestra que representara cada aptitud. Si tal test tuviera 100 ítems, 80 para aritmética y 20 para lectura y lenguaje, la muestra de estas aptitudes sería viciada. Para que fuera representativa la muestra debiera contener una proporción igual de cada aptitud.

  La limitación indiscriminada de los indicadores de la variable reduce la validez de la medición, además las definiciones de las variables extremadamente amplias aumentan la dificultad de seleccionar los indicadores de la variable, de ahí la importancia de utilizar las definiciones operacionales.

  Por ejemplo, cuanto más amplios son los objetivos a medir ejemplo: objetivos educacionales, si fuera un constructo relacionado con la educación , mayor será el número de indicadores incluidos en el test, de lo que se desprende que la pertinencia y representatividad del contenido deberán estimarse sobre la base de los objetivos educacionales.

  El muestreo inicial de las conductas como indicadores se basa en un análisis lógico de la pertinencia de los indicadores con respecto a los objetivos educacionales. Tal análisis requiere:

   El conocimiento de los objetivos educacionales y

Indicadores potenciales de estos objetivos.

Entonces, expertos en el tema juzgan generalmente los ítems a incluirse en los test de rendimiento. Su juicio establece la validez de contenido del test.

  La validación por el consenso de expertos, es decir la validez de contenido, requiere un análisis interno del test. El consenso entre los expertos en el contenido es un proceso judicativo y no es un procedimiento experimental.

Validez concurrente

  La validez de un test por medios experimentales se hace comparando los resultados que una persona obtiene en el test con un criterio que es externo al test mismo.

  La determinación de la validez de un test usando un criterio externo constituye un proceso empírico y no intelectual. El término empírico se usa para aludir a procedimientos directos para probar la validez de un test.

   La validez de un test que se basa en la comparación de los puntajes del test con criterios externo concurrentes, es decir que se obtienen al mismo tiempo se llama validez concurrente.

  La validez concurrente de un test es un proceso empírico que consiste en comparar los puntajes que se obtiene en un test con los puntajes que se obtienen al mismo tiempo mediante el juicio de expertos o mediante un test ya validado anteriormente.

  Si los puntajes entre las dos medidas correlacionan se habla de que el test tiene una validez concurrente, si no el test carece de este criterio de validez y deberá ser modificado.

  Hay varios factores que pueden disminuir la validez concurrente de un test, dos de los más importantes son:

  El grado de concordancia entre los contenidos del test y los objetivos del mismo

  El tiempo transcurrido entre las dos mediciones.

  Por lo que es recomendable:

   Realizar una validez de contenido de los dos criterios con que se realizará la medición y

  Procurar que las dos medidas se tomen al mismo tiempo.

Validez predictiva

  A diferencia de la validez concurrente, la validez predictiva toma como criterio externo una medida que se obtendrá en el futuro y compara los resultados que un individuo obtiene en el momento actual con los que obtiene después de cierto tiempo.

  Si los resultados obtenidos en el momento actual correlacionan en un alto grado con los resultados que se obtendrán en el futuro se habla que el test tiene validez predictiva y que puede considerarse como un instrumento útil para predecir el éxito futuro de una persona.

  Las operaciones para establecer la validez concurrente y la validez predictiva son esencialmente las mismas, la diferencia reside en el intervalo entre la administración del test al individuo y la medición de su posición con respecto al criterio externo.

   Son ejemplos de pruebas con validez predictivas aquellos inventarios de intereses vocacionales utilizados para seleccionar estudiantes o trabajadores.

LA CONFIABILIDAD

  La confiabilidad de un instrumento se refiere al grado en que un individuo obtiene un puntaje en una prueba que se apegue con exactitud a la verdadera situación de la persona con respecto a la variable que se mide y si la información que se proporciona sobre esa situación es coherente.

 Cuando se aplica una prueba los resultados pueden depender de la posición de la persona con respecto a la variable que se mide, pero pueden depender también de otras situaciones ajenas a la variable

  Por ejemplo puede suceder que el puntaje que obtenga un estudiante en una prueba sea afectado por las condiciones del aula, las instrucciones que se le dieron, el estado emotivo en el que se encontraba, el material en el que se imprimió la prueba, etc. Si este fuera el caso la prueba no sería confiable y por lo tanto sus resultados carecerían

de utilidad.

 Una prueba es confiable cuando los resultados del estudiante dependen de su posición con respecto a la variable que se mide y no de otros factores.

  En la medida que los resultados de una persona ante distintos reactivos que evalúan una misma habilidad sean congruentes entre sí y con criterios externos, en esa medida se estará hablando de confiabilidad del instrumento.

 La confiabilidad de una prueba puede obtenerse a través de distintos procedimientos empíricos, por ejemplo:

  comparando los puntajes obtenidos por un mismo estudiante en una prueba que se aplica en dos momentos diferentes,

  comparando los resultados que obtiene el estudiante en dos pruebas distintas pero equivalentes

  comparando los resultados que en un estudiante obtiene en la medida realizada por dos observadores independientes pero que utilizan un mismo instrumentos o

  comparando los resultados obtenidos por un estudiante en cada una de las dos mitades de una misma prueba.

  Estos procedimientos requieren de la utilización de técnicas estadísticas, sobre todo de la utilización de un coeficiente de correlación.

   Sin embargo existen dos procedimientos sencillos de utilizar para determinar la confiabilidad de un instrumento de medición.

   Si se trata de una prueba objetiva, el procedimiento consiste en determinar el porcentaje promedio de aciertos de cada objetivo para luego revisar y modificar aquellos en los que los promedios se desvían considerablemente del resto de los promedios.

  En cambio si se trata de un registro conductual o una lista de verificación el procedimiento consiste en obtener dos medidas de dos observadores independientes que utilicen el mismo instrumento y luego utilizar esta fórmula:

   Confiabilidad = [( Número de acuerdos ) /( Número de acuerdos + Número de desacuerdos)]*100

  Si los resultados son superiores a 79% se puede decir que el instrumento es confiable, en caso contrario sería conveniente realizar una modificación en cada uno de los rasgos que se evalúan, procurando definir en términos conductuales cada uno de los

reactivos.

Una estrategia que aumenta la confiabilidad de los instrumentos, consiste en realizar su aplicación de la forma más estandarizada posible, es decir buscando que siempre se haga de la misma forma

VALIDEZ Y EL TEST

LA VALIDEZ DE UN INSTRUMENTO DE EVALUACIÓN SE REFIERE A QUE MIDA LO QUE DICE QUE MIDE, Y QUE LOS RESULTADOS PUEDAN SER ATRIBUIDOS A LA VARIABLE INDEPENDIENTE; CUANDO DISEÑAMOS UN INSTRUMENTO DE EVALUACIÓN, LA VALIDEZ DE DICHO INSTRUMENTO SE LOGRA TANTO CON LA VALIDEZ INTERNA COMO LA EXTERNA.

EXISTEN DIFERENTES FORMAS DE VALIDAR UN INSTRUMENTO:

         VALIDACIÓN POR JUECES         VALIDACIÓN POR ANÁLISIS FACTORIAL         RELACIÓN ENTRE PRUEBAS         CONSISTENCIA DE PUNTAJES A TRAVÉS DEL TIEMPO

LA VALIDEZ DEL INSTRUMENTO INICIA DESDE LA CONSTRUCCIÓN DEL CONSTRUCTO, SU DISEÑO Y ADMINISTRACIÓN DEL INSTRUMENTO.

CUANDO SE REALIZA EL DISEÑO DE ITEMS O REACTIVOS DEL INSTRUMENTO DE EVALUACIÓN PODEMOS CONSIDERAR LAS SIGUIENTES TIPOS DE VALIDEZ.

  VALIDEZ DE CONTENIDO.- ES UNA MUESTRA SIGNIFICATIVA DEL UNIVERSO DEL CONTENIDO CUBIERTO POR UNA UNIDAD DIDÁCTICA. SE DISEÑA EN BASE AL CONTENIDO MÁS IMPORTANTE Y SIGNIFICATIVO DE APRENDIZAJE-

  VALIDEZ PREDICTIVA.- CORRELACIÓN ENTRE LOS RESULTADOS OBTENIDOS EN UNA OVARIAS PRUEBAS COMBINADAS Y EL DESEMPEÑO POSTERIOR.

  VALIDEZ DE CONSTRUCTO.- SUPONE LA COHERENCIA DEL INSTRUMENTO RESPECTO AL MARCO TEORICO QUE SUSTENTA EL PROYECTO.

  VALIDEZ DE CONVERGENCIA.- ESTABLECE LA RELACIÓN QUE EXISTE ENTRE UN PROGRAMA DE EVALUACIÓN O INSTRUMENTO Y OTROS PROGRAMAS O INSTRUMENTOS DE VALIDEZ CONOCIDA.

CONSTRUCCIÓN DEL TEST

CUANDO VAMOS A CONSTRUIR EL TEST, PREVIA DEFINICIÓN DEL COSNTRUCTO Y SU OPERACIONALIDAD; DEBEMOS CONSIDERAR LA ADECAUACIÓN DEL TEST A LA POBLACIÓN QUE SE MIDE, ES IMPORTANTE RESPONDER LAS SIGUIENTES CUESTIONES:

  QUÉ MEDIR  A QUIÉN SE MIDE  PARA QUÉ SE MIDE  USOS Y DECISIONES QUE PERMITE TOMAR

LA COSNTRUCCIÓN DEL TEST DEBE ESTAR BASADA EN EL CONSTRUCTO Y SUS VARIABLES DE ESTUDIO, DEBE SER SUCEPTIBLE DE MEDICIÓN, OBSERVABLE, UNIFORME Y CONSTANTE EN EL TIEMPO, DE TAL FORMA QUE DEBE REFLEJAR DE FORMA OBSERVABLE LOS COMPORTAMIENTOS QUE NOS PERMITEN CONOCER LA EXISTENCIA DEL CONSTRUCTO.

SELECCIÓN DE LA MUESTRA

LA MUESTRA A ELEGIR DEBE REPRESENTAR UNA PEQUEÑA ESCALA DE LA POBLACIÓN A LA SE VA A MEDIR.

SE DEBE REALIZAR LA BÚSQUEDA DE INFORMACIÓN QUE AYUDE A LA IDENTIFICACIÓN DE LAS CARACTERÍSTICAS DE LA POBLACIÓN BAJO ESTUDIO.

EL MUESTREO ES UNA TÉCNICA QUE INTENTA CONSTITUIR UN MODELO DE LA REALIDAD, DEBE RESPONDER A LAS PREGUNTAS DEL INVESTIGADOR Y ESTUDIO DEL COSNTRUCTO.

PARA DAR REPRESENTATIVIDAD A LA MUESTRA ES IMPORTANTE EL GRADO DE DIVERSIDAD DE LA POBLACIÓN.

PARA LA SELECCIÓN DE LA MUESTRA SE DEBE CONTROLAR: LA ALEATORIZACIÓN, REPRESENTATIVIDAD Y REALISMO.

DEBES EVITAR LOS SESGOS DE MEDICIÓN, EVITANDO, PREGUNTAS MAL ESTRUCTURADAS, CUESTIONARIOS DEFICIENTEMENTE ORGANIZADOS, INCORRECTA CONSTRUCCIÓN DE LOS INDICADORES.

VALIDACIÓN DEL TEST

PARA LA VALIDACIÓN DEL TEST DEBEMOS TENER EN CONSIDERACIÓNLAS SIGUIENTES ETAPAS:

1 er. ETAPA

  ELABORACIÓN DE PRUEBA PILOTO

  APLICACIÓN A SUJETOS MUESTRA

  ASIGNAR UNA PUNTUACIÓN

2ª. ETAPA

  CALIDAD DE LOS ITEMS PRUEBA

  CONSTRUCCIÓN DEFINITIVA DEL TEST

3er. ETAPA

  APLICACIÓN DEL TEST MUESTRA

  ASIGNAR PUNTUACIÓN

  ESTANDARIZACIÓN DE PUNTUACIONES Y NORMAS DE INTERPRETACIÓN

  ELABORACIÓN DEL MANUAL.

TIPOS DE INSTRUMENTOS DE EVALUACIÓN

  TEST: EVALUA VARIABLES COGNITIVAS, CONOCIMIENTOS, APTITUDES, RENDIMIENTO, HABILIDADES.

  ESCALAS: MIDE VARIABLES NO COGNITIVAS, COMO ACTITUDES, INTERESES, PREFERENCIAS, OPINIONES.

  CUESTIONARIOS: SE UTILIZA PARA INVESTIGACIÓN DE ENCUESTAS.

  INVENTARIOS: SE UTILIZA PARA MEDIR VARIABLES DE PERSONALIDAD.

CARACTERÍSTICAS QUE DEBEN CONSIDERARSE PARA EL DISEÑO DE LOS TESTS

o   CONTENIDO.- DE ACUERDO A LA DEFINICIÓN DEL CONSTRUCTO Y AL DOMINIO DE LA CONDUCTA QUE SE DESEA MEDIR.

o   FORMATO DE LOS ITEMS.- CERRADOS O DE CONSTRUCCIÓN ABIERTA

o   LONGITUD DEL TEST.- DE ACUERDO A LA POBLACIÓN, TIEMPO DISPONIBLE,OBJETIVOS DEL TEST.

o   NIVEL DE DIFICULTAD.- FACILIDAD EN LA PROBABILIDAD DE RESPUESTA DEL SUJETO, VELOCIDAD, TIEMPO.

o   HOMOGENEIDAD.- SE REFIERE A QUE MIDA LO MISMO QUE ESTABLECE EL CONSTRUCTO-

o   CAPACIDAD DE DISCRIMINACIÓN.- QUE PERMITA DIFERENCIAR EL DESEMPEÑO O GRADO DE EJECUCIÓN ENTRE LOS SUJETOS EVALUADOS.

DISEÑO DE UN CUESTIONARIO

DISEÑO DE CUESTIONARIO Y MAS

Antes de entrar al tema de cómo diseñar un cuestionario me permitiré recordar contigo algunos elementos que debes considerar para diferenciar los distintos tipos de test y sus características.

DIFERENTES TIPOS DE TEST QUE PUEDEN SER UTILIZADOS COMO INSTRUMENTOS DE MEDICIÓN Y LAS CARACTERÍSTICAS DE CADA UNO DE ELLOSSe distinguen tres tipos de test:

1. TESTS DE VELOCIDAD: o Los ítems deben ser muy fáciles de resolver.o La dificultad estriba en que tienen un tiempo limitado de ejecución.o Algunos test para medir variables cognitivas lo son (tests de rapidez de cálculo).2. TESTS DE EJECUCIÓN MÁXIMA: o Utilizados fundamentalmente para la evaluación del rendimiento académico y para la medida de aptitudes y destrezas.o Los ítems presentan diferentes grados de dificultad.o El tiempo no es un factor que deba influir.3. TESTS DE EJECUCIÓN TÍPICA: o Son los test de personalidad, actitudes, intereses, etc,…o Como no hay respuestas correctas, no tiene sentido hablar de dificultad de los ítems.

CÓMO SE DEFINE EL NIVEL DE DISCRIMINACIÓN EN LA CONSTRUCCIÓN DE LOS ITEMS

El nivel de discriminación dependerá de la población a la que va dirigido el test:• Si el test está dirigido a la población general, el mayor porcentaje de ítems será de dificultad media.

• Si se quiere que el test detecte a los sujetos brillantes, los ítems deberán ser difíciles y muy difíciles.• Si se quiere discriminar entre los menos capacitados, los ítems deberán ser fáciles y muy fáciles

CUALES SON LOS DIFERENTES ITEMS DE ELECCIÓN MULTIPLE QUE PUEDEN SER UTILIZADOS EN EL TEST• Dos Alternativas • Elección Múltiple• Emparejamiento• Formato Cloze• Escalas de clasificación• Listados

CÓMO SE CLASIFICAN LOS ITEMS DE CONSTRUCCIÓN Y COMO SE CONTROLA LA SUBJETIVIDAD DE LOS MISMOS

*Ítems de Respuesta corta* Ítems de respuesta extensa

Formas de controlar esa subjetividad:

1. Método de la puntuación analítica: o Requiere definir de forma inequívoca y aislar las dimensiones que se consideren importantes.o Es necesario establecer la forma de evaluarlas.o Si se definen claramente estos criterios, las pruebas pueden ser corregidas por personas no expertas.

2. Método de la puntuación holística: o Se evalúa de una manera global la forma en que los sujetos han realizado la prueba.o La corrección debe ser hecha por expertos.

CUESTIONARIOEs un instrumento que permite recolectar datos por escrito, se utiliza en investigaciones cuantitativas como cualitativas.Para poder diseñarlo es importante definir:

Objetivo de la investigación Variables e indicadores empíricos

Tipo de población empírica de estudio Circunstancias de la aplicación

LOS PASOS PARA PLANIFICACIÓN DEL CUETIONARIO COMO INSTRUMENTO DE EVALUACIÓN SON LOS SIGUIENTES:

1. Características básicas, que mide, población, variables2. Número de preguntas 3. Formular preguntas y sus alternativas4. Establecer su ordenación y disposición en el cuestionario5. Redactar las instrucciones y editar el cuestionario6. Validación{n del cuestionario7. Elaboración del cuestionario definitivo

CARACTERÍSTICAS BÁSICAS

Tipo de preguntaSegún su naturalezaSegún su funciónSegún su respuesta

Por su naturalezaDe identificaciónDe opiniónDe aspiracionesDe expectativas ante el futuroDe motivaciones, creencias y actitudes

Función de la preguntaSustantivas, básicasFiltro, previas, eliminación de sujetos.De control, interés, buena fe, veracidad y fiabilidadDe consistencia de las preguntasDe introducción o rompehielosMuelle, colchón o amortiguadoresBaterías de preguntasDirectas o indirectas

Según la respuesta

Cerradas dicotómicasCerradas politómicas o categorizadasNúmericasAbiertas

Opciones de respuesta

ExhaustivasExcluyentes

SESGOS DEL ENCUESTADO

Conservadurismo Deseabilidad social Sesgo de cortesía Tendencia a repetir respuestas Prestigio Hostilidad/ tabú Influencia de las personalidades

ESCALAS DE ACTITUDES

LAS ESCALAS PERMITEN A LOS SUJETOS DE LA MUESTRA A ESTUDIAR ELEGIR DENTRO DE UNA SERIE GRADUADA DE ITEMS AQUELLOS QUE ACEPTAN O PREFIEREN.

 

ENSAMBLE DE INSTRUMENTOS

UNA ETAPA IMPORTANTE ES QUE UNA VEZ ELABORADA LA TABLA DE ESPECIFICACIONES, QUE COMO RECORDARÁS , NOS PERMITE PLANEAR Y ORDENAR LOS CONTENIDOS DEL INSTRUMENTO DE EVALUACIÓN, DE ACUERDO A LOS OBJETIVOS E INDICADORES DE MEDICIÓN; BIEN, YA QUE TENEMOS LA TABLA DE ESPECIFICACIONES DEL INSTRUMENTO DEBEMOS REALIZAR EL ENSAMBLAJE.

EL ENSAMBLAJE ES LA CONFORMACIÓN DEL INSTRUMENTO DE SU PROPIO FORMATO CON EL ENCABEZADO, LAS INSTRUCCIONES RESPECTIVAS DE ACUERDO AL INSTRUMENTO, LA ASIGNACIÓN DE UNA CLAVE PARA SU IDENTIFICACIÓN, EL DESGLOSE DE REACTIVOS CON SUS REQUERIMIENTOS, ENTRE LOS MÁS IMPORTANTES:

FORMATO INSTRUCCIONES INTEGRACIÓN SECUENCIAL DE REACTIVOS

QUÉ SE DEBE INCLUIR:

DÓNDE DEBEN ANOTARSE LAS RESPUESTAS Y CÓMO: POR EJEMPLO UN CIRCULO, UNA CRUZ, LLENANDO ESPACIOS, ETC. DE CUANTO TIEMPO SE DISPONE PARA LA PRUEBA ESPECIFICAR EL NÚMERO DE REACTIVOS Y HOJAS TOTALES PARA LA PRUEBA CUÁL ES EL PROPOSITO DE LA PRUEBA NIVEL DE CONFIABILIDAD.