elaboraciÓn, validez y confiabilidad de un instrumento de investigaciÓn

7/28/2019 ELABORACIN, VALIDEZ Y CONFIABILIDAD DE UN INSTRUMENTO DE INVESTIGACIN

1/34

ELABORACIN, VALIDEZ Y CONFIABILIDAD DE UN INSTRUMENTO DE INVESTIGACINMg Gladys Lujan Jhonson

Recopilador: Lic. Flix C. Rodrguez VeraCon fines de enseanza aprendizaje

1. DEFINICIN DE INSTRUMENTOS DE INVESTIGACIN O MEDICIN O DE RECOLECCINDE DATOS

Los instrumentos son entendidos como recursos tcnicos que permiten obtener informacin y quegeneralmente estn constituidos por proposiciones interrogativas, aseverativas e imperativas.

Los instrumentos, son los medios necesarios para recopilar informacin pertinente y adecuada requeridapara evaluar el aprendizaje, evaluar el programa, el sistema educativo, etc.

El instrumento es el mecanismo que utiliza el investigador para recolectar, registrar la informacin; paramedir el comportamiento o atributos de las variables. Entre estos se encuentran los formularios, laspruebas psicolgicas, las hojas de control y muchos otros.

Los instrumentos deben medir la variable que se desea estudiar para lo cual se tiene que seleccionar delos existentes aquel que mejor se adecue al propsito del estudio; en caso contrario se tiene que elaborary validar el instrumento. Es necesario precisar que para realizar una investigacin se tiene tres opcionesrespecto al instrumento de investigacin:

Elegir un instrumento ya desarrollado y disponibleDeben seleccionarse los instrumentos que reporten mayor validez y confiabilidad, que seanfavorecidos por la comparacin y adaptacin al contexto de la investigacin

Modificar y/o adaptar un instrumento existenteSi se selecciona un instrumento desarrollado en otro pas deben hacerse pruebas piloto ms

extensas para de inmediato modificarlos y/o adaptarlos al contexto de la investigacin a realizar.No debe olvidarse que traducir no es validar un instrumento, por muy buena que sea la traduccin

Elaborar un nuevo instrumentoEn caso de no encontrar un instrumento desarrollado adecuado, vlido y confiable y se quieraconstruir o desarrollar uno propio, debe pensarse en cada variable, sus categoras, los indicadoresms precisos y los items para cada uno de ellos, siguiendo los pasos que se explican en elpresente documento

2. PROCESO PARA ELABORAR UN INSTRUMENTOS DE RECOLECCIN DE DATOS

Una vez que ha sido elegida el tipo de instrumento que se utilizar en la recoleccin de datos, lo que sehace de acuerdo con una serie de consideraciones, puede pasarse a la elaboracin del instrumentopropiamente dicho, lo cual puede facilitarse siguiendo una serie de pasos algunos de los cuales puedenser los que se sealan despus del siguiente prrafo.

La elaboracin de instrumentos supone el cumplimiento de tareas previas como haber seleccionado elmtodo y la tcnica, elegido el diseo metodolgico apropiado, la muestra adecuada de acuerdo con elpropsito de la investigacin, etc. e implican actividades estrechamente vinculadas entre si. Estas son:

Precisar la(s) variable(s) y unidad de anlisis Operacionalizar la(s) variable(s)

Construir la matriz del instrumento Planificar el instrumento Elaborar el instrumento de recoleccin de informacin


2/34

Establecer la validez y confiabilidad del instrumento Probar el instrumento mediante el estudio piloto Revisar, corregir, reproducir y aplicar el instrumento

2.1. PRECISAR LA(S) VARIABLE(S) Y UNIDAD DE ANLISISEs de suma importancia precisar las variables que se pretenden observar, medir y/o interpretar

Considerar las caractersticas importantes de la unidad de observacin o sujetos con relacin alinstrumento para poder determinar la informacin que recoger

2.2. OPERACIONALIZAR LA(S) VARIABLE(S)La operacionalizacion de la(s) variable(s) se realiza en un cuadro o matriz.Es el proceso de llevar una variable de un nivel abstracto a un plano ms concreto, y su funcin bsica esprecisar o explicitar al mximo el significado que se le otorga a una variable en un determinado estudiocon la finalidad de poderlo medir empricamente, todo ello en coherencia con el marco terico yconceptual. Este proceso es necesario para variables complejas y no as para variables simples. Sitratamos de hacer la medicin de una variable antes de haberla conceptualizado y definido claramente, alfinal tendramos informacin poco valida y poco confiable.

Segn Hempel (1952), operacionalizar es definir las variables para que sean medibles y manejables,significa definir operativamente el PON (problemas, oportunidades y necesidades). Un investigadornecesita traducir los conceptos (variables) a hechos observables para lograr su medicin. Las definicionessealan las operaciones que se tienen que realizar para medir la variable, de forma tal, que seansusceptibles de observacin y cuantificacin.

La operacionalizacin de las variables est estrechamente vinculada al tipo de tcnica o metodologaempleadas para la recoleccin de datos. Estas deben ser compatibles con los objetivos de lainvestigacin, a la vez que responden al enfoque empleado, al tipo de investigacin que se realiza. Estastcnicas, en lneas generales, pueden ser cualitativas o cuantitativas.

El proceso metodolgico de la operacionalizacin de variables es el siguiente:

A.Identificar las variables, que se pretenden medir u observar. La identificacin de las variables se iniciadesde el momento que se define el problema de investigacin y se formula objetivos.

Recordemos que las variables son propiedades de los objetos o de los sujetos que adquieren distintosvalores y que son razn de nuestro estudio o fenmeno a investigar.

B. Elaborar la definicin conceptual y comprender su significado de las variables. La variable esparte de un marco terico, y, por tanto, tiene dentro de ello un significado conceptual. Del modo como el

investigador conceptualiza la variable por operacionalizar dependen los otros pasos.Bsicamente, la definicin conceptual de las variables constituye una abstraccin articulada en palabraspara facilitar su comprensin y su adecuacin a los requerimientos prcticos de la investigacin.Ejemplo: comprender qu es integracin escolar (variable compleja) y qu dimensiones o grandesaspectos abarca.

La definicin conceptual se refiere a la descripcin de la esencia o de las caractersticas propias,reconocidas por consenso de un fenmeno u objeto, a la cual se le l lama cotidianamente definicin real;se reconoce la importancia de una conceptualizacin terica, dada por autores reconocidos.

C. Definicin operacional de la variable, est constituida por una serie de operaciones o procedimientosespecficos o indicaciones que describen las actividades que un observador (investigador) debe tener encuenta o registrar para realizar la medicin de una variable definida conceptualmente o los indicadores


3/34

observables por medio de los cuales se manifiesta ese concepto. En la definicin operacional se debetener en cuenta que lo que se intenta es obtener la mayor informacin posible de la variable seleccionada,de modo que se capte su sentido y se adecue al contexto, y para ello se deber hacer una cuidadosarevisin de la literatura disponible sobre el tema de investigacin.

Una definicin operacional puede sealar el instrumento por medio del cual se har la medicin de las

variables. La definicin operativa significa cmo voy a hacer en calidad de investigador paraoperacionalizar mi pregunta de investigacin?.

Leedy (1993) dice que tiene que haber tres cosas: consenso, medicin y precisin. Solo se puedemanejar lo que se puede medir y solo se puede medir lo que se define operativamente

D. Determinacin de las dimensiones, componentes o aspectos de la variable. Las variables no soloson abstractas sino muchas de ellas son complejas, no expresan una realidad homognea y, por tanto, esposible descomponerlas analticamente en sus partes componentes para poder estudiarlas mejor.En qu clase de partes? Eso va a depender del marco terico, pues ste es el que asigna el significadoal concepto o variable. De all la necesidad del buen manejo del marco terico por parte del equipo

investigador.

E. Definir conceptualmente cada dimensin, para tener claro el significado y amplitud de cadadimensin es necesario definirlas conceptualmente, de forma lgica y coherente con la definicinconceptual de la variable de la cual se desprenden para luego de all determinar los indicadores

F. Determinacin de los indicadores de cada una de las dimensiones de la variable. Cuando nosencontramos con variables complejas, donde el pasaje de la definicin conceptual a su operacionalizacinrequiere de instancias intermedias, entonces se puede hacer una distincin entre variables, dimensiones eindicadores. A modo de sntesis, puede afirmarse que el pasaje de la dimensin al indicador hace unrecorrido de lo general a lo particular, del plano de lo terico al plano de lo empricamente contrastable.

Las dimensiones vendran a ser subvariables o variables con un nivel ms cercano al indicador. A su vez,las dimensiones, para poder ser contrastadas empricamente por el investigador, requierenoperacionalizarse en indicadores, que no son otra cosa que parmetros que contribuyen a ubicar lasituacin en la que se halla la problemtica a estudiar. En un sentido restringido, los indicadores sondatos.

Para cada una de las dimensiones se selecciona los indicadores que permitan reconocer en el mundoemprico el concepto. Al igual que en las dimensiones, el tipo de indicador seleccionado depende de lacapacidad del investigador para encontrar los mejores indicadores.

G. Indicar el nivel de medicin de cada temy por ende, el de las variables. Es muy importante anotar el nivel de medicin de los indicadores, dimensiones o variable a investigar.

Ejemplos de operacionalizacin de variables, se pueden ver en el Cuadro N 1 y el Cuadro N 2.


4/34

Cuadro N 1. Operacionalizacibn de la variable Integracin Escolar

Definicinconceptual

Dimensiones Indicadores Instrumento

Grado de aceptacin

de la comunidadescolar regular paraaprender y convivircon nios especiales

Por parte de los

Directivos

Inters y voluntad por aceptar nios

especiales en su Institucin

CuestionarioPor parte de losDocentes

Sensibilizacin y preparacin paratrabajar con nios especiales dentro deun aula regular

Por parte de losPadres

Informacin y opinin sobre el proceso deintegrar nios especiales en aulasregulares

Debemos asegurarnos de tener un nmero suficiente de tems para medir la variable en todas susdimensiones.

Cuadro N 2. Operacionalizacion de la variable Comprensin Lectora

2.3. CONSTRUCCIN DE LA MATRIZ DEL INSTRUMENTOEl primer elemento que orienta sobre las caractersticas que debe tener un instrumento lo obtenemos alidentificar los indicadores de cada dimensin de cada una de las variables, lo cual equivale a contestar alas preguntas: para que se aplicar el instrumento?; qu aprendizaje exploramos con el?

Sea cual fuere el propsito del instrumento y una vez determinados los indicadores, se hace una

representacin esquemtica de sus distribucin, a fin de no incurrir en errores surgidos del subjetivismo ola simpata por determinados indicadores. Para el efecto, se hace una breve relacin de los indicadoresque debe incluir el instrumento, anotando a continuacin un porcentaje que represente la importancia o


5/34

jerarqua de cada indicador dentro del total de indicadores (la suma de estos porcentajes deber ser el100%).

La asignacin de los porcentajes de importancia relativa es preferible que se haga mediante el acuerdo devarios expertos en investigacin, con el objeto de evitar, hasta donde sea posible, la influencia de factoresy opiniones personales en la decisin

Ejemplo para la variable Integracin Escolar

MATRIZ DEL INSTRUMENTO(Determinacin del peso relativo)

Definicin conceptual Dimensiones Indicadores Peso (%)

Grado de aceptacin dela comunidad escolarregular para aprender y

convivir con niosespeciales

Por parte de losDirectivos

Inters y voluntad por aceptar niosespeciales en su Institucin

30

Por parte de los

Docentes

Sensibilizacin y preparacin para trabajar

con nios especiales dentro de un aularegular

40


Informacin y opinin sobre el proceso deintegrar nios especiales en aulasregulares

30

TOTAL 100

Inmediatamente despus se decide, en funcin del tipo de prueba, la cantidad de indicadores por explorar,el tiempo disponible, las condiciones de aplicacin y el nmero total de reactivos que contendr la prueba.

La nica indicacin a este respecto se refiere no hacer pruebas sumarias con menos de 50 reactivossimples, ni formativos con menos de 20, pues, en trminos generales, el manejo de cifras menores a lasreferidas resta certidumbre a las conclusiones y juicios que pudieran derivarse de los resultados.

Hecho lo anterior, se calcula el nmero de reactivos que cada indicador, dimensin o variable lecorresponde, mediante una simple correlacin de proporciones entre la importancia o peso relativo decada parte y el total decidido de reactivos. En el ejemplo estamos optando por una prueba de 10reactivos, la distribucin sera:

Indicador Peso (%) Reactivos para

c/indicador

Ajuste a enteros

1 30 3 32 40 4 43 30 3 3

TOTAL 100 10 10

Por ltimo se elabora las preguntas de acuerdo a la importancia del indicador.


6/34

TABLA DE ESPECIFICACIONES (DETERMINACION DE LA ESTRUCTURA DEL INSTRUMENTO)

La aplicacin de la prueba es siempre cuestin de muestreo. En una prueba nunca se pueden hacer todaslas preguntas que uno desea. Debido a varios factores solo podremos medir algunos aspectos de lospuntos que queremos medir. De esta manera una prueba siempre presenta una muestra limitada de lasconductas que nos interesa medir.

El uso de tablas de especificaciones es una manera de asegurarnos que una prueba de rendimientoproporciona una muestra representativa de las conductas deseada, Se trata de una tabla de doble entradadonde se enumeran los indicadores de un lado, y en el otro las capacidades (los contenidos) del estudio.Las celdas que se intersecan hace posible indicar que proporcin de la prueba se debe dedicar a cadaindicador y a cada capacidad (contenido) del estudio.

Cuando ya se ha definido los indicadores y establecido las capacidades (los contenidos), debe prepararsela tabla de especificaciones. Esta tabla relaciona los indicadores con las capacidades (los contenidos) eindica la importancia relativa que se le dar a cada una de las diversas reas.

El propsito de la tabla es asegurar que la prueba medir una muestra representativa de los indicadores yde las capacidades (los contenidos).

Los nmeros de las celdas indican el nmero de reactivos que se dedicaran a un rea determinada. Elnmero de reactivos asignado a cada celda est determinada por la importancia que se confiere a cadaresultado de aprendizaje y a cada rea de la materia.

Para asignar la importancia relativa a cada resultado y a cada indicador hay que considerar varios factoresque participan en su determinacin: qu importancia tiene cada aspecto para la experiencia de

aprendizaje total?, cunto tiempo se dedic a cada aspecto durante la aplicacin del programa?, quresultados tiene el mayor grado de retencin y el valor ms alto de transferencia?, qu importanciarelativa asignan a cada aspecto los especialistas?. Para decidir la importancia relativa de cada aspecto sedeben considerar estos criterios y otros.

En resumen, la preparacin de una tabla de especificaciones incluyen los pasos siguientes:

a. Determinacin de los indicadores del aprendizaje y las capacidades (reas de contenido) que hade medir la prueba

b. Importancia de los indicadores del aprendizaje y de las capacidades (reas de contenido) que hade medir la prueba

c. Elaboracin de la tabla de acuerdo con estos valores relativos, distribuyendo los reactivos de laprueba proporcionalmente entre las celdas.

La tabla de doble entrada resultante indica el tipo de prueba que necesita para medir de manerabalanceada los resultados y las capacidades (el contenido)

La tabla de especificaciones sirve como plano al elaborador de pruebas pues especifica la naturaleza decada reactivo del mismo. Si la prueba se ha preparado cuidadosamente, su calidad depender entonces yen gran medida, de la fidelidad con que el elaborador de la prueba igualar las especificaciones, es decir,de su habilidad para elaborar reactivos que pongan de manifiesto la conducta especifica descrita en losresultados del estudio. Si bien nunca se puede estar seguro de una correspondencia perfecta, estoconstituye un aspecto clave para elaboracin de pruebas de rendimiento.


7/34

Ejemplos de Tabla de especificaciones de la variable, se puede verCuadro N 3 y el Cuadro N 4.

Cuadro N 3. Tabla de especificaciones de la variable: Integracin Escolar

IntegracinEscolar

Indicadores

Por parte de losDirectivos

Por parte de losDocentes


Total tems

1 1 1 1 32 1 2 1 43 1 1 1 3

Total tems 3 3 4 10

Cuadro N 4. Tabla de especificacionesde la variableComprensin Lectora

2.4. PLANIFICACIN Y ELABORACION DEL INSTRUMENTO

La cantidad de esfuerzo invertido en la elaboracin del instrumento vara de acuerdo con el tipo deinstrumento y los propsitos para la cual se crea. En algunos instrumentos requiere del esfuerzo individualdel investigador, en otros casos requiere del esfuerzo de ms de dos personas, es decir, trabajar enequipo y en periodos prolongados.

Los procedimientos empleados en la elaboracin de un instrumento vara de acuerdo con el tipo de test yobjetivos de la investigacin. Cualquiera que sea el tipo de instrumento o los objetivos del usuario, esnecesario cierta planeacin del contenido, antes de redactar los reactivos que esta comprende.

La elaboracin del instrumento exige que se tome en cuenta, detalladamente, los propsito especficos.

Las pruebas cumplen con muchas funciones diferentes y el proceso de elaboracin vara de acuerdo conlos propsitos particulares de la prueba. En teora, la elaboracin de cualquier prueba o instrumento


8/34

psicomtrico comienza con la definicin de la variable o constructo que se desea medir y elestablecimiento del contenido propuesto.

Para iniciar el trabajo emprico de la tesis (ejecucin de la investigacin) es necesario construir losinstrumentos que permitirn recoger informacin sobre el objeto de estudio. De acuerdo al tipo, nivel ymetodologa se seleccionan o elaboran los instrumentos adecuados para recoger la informacin. Una

vez definido el tipo de instrumento con el que se va a trabajar sugerimos considerar lo siguiente:

- Revisar la matriz de coherencia para tener muy claro el objetivo, las variables o categoras de lainvestigacin.- A partir de la matriz de coherencia elaborar otra matriz que permita organizar los tems o preguntas delinstrumento, segn variables o categoras.- Un tem o pregunta puede corresponder a un indicador o a varios indicadores.- Del mismo modo, pueden formularse varios tems, preguntas o reactivos para cada indicador. Loimportante es que los tems formulados recojan la informacin necesaria para conocer el objeto de estudioy lograr el objetivo propuesto en la investigacin.- Los tems deben formularse en forma clara y concisa, sin ambigedades.- Cuando se trata de entrevistas semi-estructuradas o el guin de focus group lo recomendable sonpreguntas abiertas. En caso de cuestionarios se puede elegir entre preguntas abiertas o cerradas. Unejercicio para probar el tem es que uno mismo responda a la pregunta y analizar si la respuesta recoge lainformacin que se necesita. Al formular las preguntas evitar insinuar la respuesta que nos gustara or oevitar dirigir la respuesta a nuestros intereses.- Para redactar los tems es importante tener en cuenta a los sujetos a quienes est dirigido el instrumento(edad, sexo, aos de estudios, cultura).- Asimismo, cuidar el vocabulario que se utiliza para asegurar la comprensin de las preguntas.- Una vez formulado el listado de los tems se procede a disear el instrumento. Para ello, es necesarioordenar los tems de acuerdo a criterios.

- Por ejemplo de los ms sencillos a los ms complejos, de los ms personales a los ms abstractos oviceversa. Se pueden organizar en reas o secciones o se pueden organizar de acuerdo a la estructura delos tems (por ejemplo, en un cuestionario primero las preguntas cerradas, y al final las preguntasabiertas). Ello supone decidir la mejor manera de presentar las preguntas de acuerdo a los objetivos de lainvestigacin y los sujetos informantes.- Asimismo, es momento de delimitar el nmero de tems lo que permitir eliminar, integrar o construirtems- Definido el orden de los tems, se define el formato y la estructura del instrumento. El formato debepermitir un fcil manejo y ptimo uso durante la aplicacin y organizacin de la informacin, ms aun encasos que el instrumento sea autoadministrado. El instrumento debe tener las siguientes partes:

Ttulo: vinculado con el objeto de estudio

Datos de identificacin: definidos de acuerdo a la informacin que se necesita para organizar lainformacin. Saludo y explicacin de los objetivos del instrumento. Agradecimiento Instrucciones: de la aplicacin. En caso de ser un instrumento que se autoadministra se debe

cuidar mucho esta parte. tems (organizados de acuerdo al criterio asumido) Observaciones, en caso de que el instrumento as lo requiera

- Cuidar la redaccin y aspectos formales del instrumento (tipo de letra, espacios) ms aun cuando se tratade un cuestionario que es auto administrado. La forma de presentacin del instrumento es importante paraque el sujeto que lo utilice se sienta motivado a responderlo. Por tanto, no debe ser de muchas pginas.

A continuacin se presentan los ejemplos de instrumentos, para la variable: Integracin Escolar(Cuestionario) y para la variable: para la variable: Comprensin Lectora (Prueba)


9/34

CUESTIONARIO

Institucin Educativa ..Fecha..EdadSexo .Cargo..

INDICACIONES:- El presente cuestionario es annimo y tiene fines de investigacin educativa, motivo por

el cual solicito su colaboracin respondiendo en forma libre y con objetividad las siguientes preguntas

A. PREGUNTAS A LOS DIRECTIVOS1. Desde hace cunto tiempo se realiza integracin escolar en esta I.E.?

.2. De quin fue la iniciativa?.3. Cules fueron las estrategias para llevar adelante este proceso?.B. PREGUNTAS A LOS DOCENTES

1. Cmo es su perfil de formacin para trabajar con estos nios?2. Qu adiestramiento ha recibido?3. Cmo planifica y evala las actividades con estos nios?..4. Qu estrategias de integracin practica?...C. PREGUNTAS A LOS PADRES1. En qu medida ha sido informado sobre el proceso de integracin escolar que adelanta la escuela?.2. Cules son a su juicio los aspectos favorables de la integracin?..3. Cules son los obstculos o dificultades de este proceso?

PRUEBA DE COMPRENSIN LECTORA

Apellidos y nombres:....,Fecha:.././

Grado: 5to grado de Educacin Primaria Seccin:..N de orden:

Lee los siguientes textos y responde:TEXTO 01

LA GALLINA DE LOS HUEVOS DE ORO

Una maana, muy temprano, un granjero se dirigi a su gallinero y qued atnito ante lo que vean susojos: una de sus gallinas haba puesto un hermoso y radiante huevo de oro.

- Pero, qu maravilla es sta? dijo el afortunado hombre, e inmediatamente corri donde estaba su

esposa y le cont lo sucedido. Todo era felicidad. El granjero y su esposa daban saltos de alegra al verque, da tras da, su querida gallinita pona un nuevo huevo de oro.


10/34

Pasado un tiempo, se volvieron muy ricos. Tuvieron todas las comodidades que siempre haban soadotener: una linda cosa, ropa fina y comida hasta saciarse.

Hasta que una noche, la esposa se encontraba muy pensativa; tanto, que no poda dormir. Entonces,despert a su esposo y le dijo:

-No te parece que perdemos mucho tiempo esperando a que la gallina ponga slo un huevo por da? Seme ocurre que deberamos matar a la gallina para sacarle todo el oro de una buena vez.

El hombre se puso a pensar. Luego de unos instantes, ambos se encontraban dirigindose al gallinero.Grande fue la sorpresa que se llevaron cuando mataron a la gallina, pues vieron que por dentro era igual atodas las dems gallinas; y del oro, no encontraron ni un gramo.

Fuente: Texto extrado de las unidades didcticas desarrolladas del 5to grado - .coleccin Ruta Pedaggica. Primera edicin 2006

Instrucciones: Responde las siguientes preguntas:LITERALIDAD1.1. Cuantos personajes presenta el texto? Quines son? (2ptos)1.2. Qu encontr el granjero en el gallinero? Y cul fue su reaccin? (2ptos)1.3. Cmo era el hogar del granjero mientras pona huevos de oro? Escribe correctamente.(2ptos)INFERENCIAL1.4. Cul es la idea principal del texto y Cul es la idea secundaria? (2ptos)

1.5. La muerte de la gallina trajo consecuencias?Qu consecuencias trajo? (2ptos)1.6. Qu significa para ti la expresin cuando mataron a la gallina, pues vieron que por dentro era igual atodas las gallinas; y del oro, no encontraron ni un gramo? Argumento coherentemente tu respuesta.(2ptos)1.7. Qu enseanza obtenemos del texto? Por qu? (2ptos)CRTICO1.8. Crees que el granjero hizo bien en matar a la gallina de los huevos de oro? Por qu? (2ptos)

1.9. La esposa del granjero fue ambiciosa al decir a su esposo que matara la gallina? Por qu? (2ptos)1.10. Con qu personaje te identificas? Por qu? (2ptos).


11/34

TEXTO N 02

EL BURRO Y LOS LIBROS

Una vez, un burro que deseaba instruirse sin esfuerzo, encontr en el campo unos libros que algn niodescuidado haba perdido; pens en comrselo y aprender de esa manera, muchas cosas sin mayor

esfuerzo ni trabajo.

Dejando la hierba se puso a masticar rpidamente hasta terminar con todos los libros. Desde ese instanteel orejudo animal se sinti lleno de sabidura. Contento y orgullosos fue donde estaban sus compaeros aquienes anunci que les iba a dar algunas lecciones. Las bestias lo rodearon, esperando con atencin supalabra, pero el asno permaneci largo rato con la boca abierta sin saber que decir; hasta que por fin, dioun rebuzno desagradable y ridculo.

Sus compaeros se burlaron del burro. Lo echaron a veces del campo y lo rechazaron para siempre porvanidoso.

Autores: Gladys Saad y Juan Jos Morillo (argentinos).

Instrucciones: Responde las siguientes preguntas:

LITERALIDAD:2.1. Cuntos personajes hay en el texto. Mencinalos. (2ptos)2.2. Qu encontr el burro en el campo? Qu pens hacer el burro con los libros? (2ptos)2.3. Cmo se sinti el burro despus de comer los libros? y Qu anunci el burro a sus compaeros?

(2ptos)INFERENCIAL2.4. El burro quiso instruirse sin esfuerzo? Por qu? (2ptos)2.5. Por qu sus compaeros se burlaron del burro? y Por qu el verdadero sabio es modesto? (2ptos)2.6. Cul es la idea principal y la idea secundaria del texto? (2ptos).2.7. Cul es el mensaje del texto? Argumenta coherentemente tu respuesta? (2ptos).

CRTICO2.8. Hizo bien el burro en comerse los libros? Por qu? (2ptos)2.9. Se puede aprender mucho ms cosas sin esfuerzo? Por qu? (2ptos)2.10. Es correcto burlarse del compaero? Por qu? (2ptos)

2.5. ESTABLECER LA VALIDEZ Y CONFIABILIDAD DE UN INSTRUMENTO DE MEDICIN

Al elaborar los instrumentos de investigacin es necesario analizar en que forma dicho instrumento demedicin cumple con la funcin para la cual ha sido diseado. Este anlisis debe realizarse antes de


12/34

iniciar la recoleccin de datos, lo que permitir introducir las modificaciones necesarias antes de suaplicacin.

Las caractersticas de cada instrumento de medicin pueden ser mltiples; sin embargo, hay tres que porsu relevancia son fundamentales, ya que si los instrumentos no llenan estos requisitos, los datosrecolectados tendrn limitaciones importantes. Las cualidades de un buen instrumento de medicin son:

validez, confiabilidad y practicable

2.5.1. VALIDEZ, entendida como el grado en que un instrumento logra medir la variable que se pretendemedir, es decir, el instrumento permite recolectar los datos que se necesitan, sin ser mezclados con datosque no se necesitan. Por ejemplo, un test de inteligencia no ser vlido, si lo que mide es realmentememoria y no inteligencia. Ciertas variables como el sexo, la nacionalidad, son muy fciles de observar ode preguntar y obtener una respuesta vlida. Pero cuando se trata de diversas variables que se trabajanen ciencias sociales como motivaciones, actitudes, sentimientos, emociones, etc, la validez de uninstrumento que pretenda medirlas se torna ms compleja, y por lo tanto, cabe preguntarse si realmenteel instrumento estar midiendo lo que pretende medir?

O sea: cuando una prueba para evaluacin de aprendizaje mide el grado en que han sido alcanzados losobjetivos educacionales establecidos previamente, esta prueba ser vlida.

La validez de un instrumento est dada por el grado en que el instrumento mide lo que el evaluador deseamedir. Validez es el criterio fundamental para valorar si el resultado obtenido en un estudio es adecuado

Esta caracterstica se considera fundamental para un instrumento pues es requisito para logar laconfiabilidad. La situacin opuesta no es necesariamente cierta, es decir, un instrumento puede serconfiable sin ser vlido.

De modo que, si se desea determinar el grado de conocimientos de un grupo de estudiantes sobre materiay energa y la prueba tiene una gran cantidad de preguntas elementos qumicos inorgnicos , la pruebase considera confiable porque sera constante en resultados bajos, pero no valida por cuanto no mide loque desea.

2.5.1.1. PROCEDIMIENTOS PARA DETERMINAR LA VALIDEZ DE UN INSTRUMENTO DEMEDICIN

Los procedimientos para determinar la validez de un instrumento son tres:

A. VALIDEZ DE CONTENIDO, se refiere al grado en que un instrumento refleja un dominio especfico decontenido de lo que se mide. Por ejemplo, una prueba de operaciones aritmticas no tendr validez decontenido si explora suma y divisin y excluye problemas de resta y multiplicacin. Un instrumento demedicin debe contener representados a todos los tems del dominio de contenido de las variables amedir.

La validez que ms interesa obtener en una investigacin es la validez de contenido. Para obtener validezde contenido primero que nada hace falta revisar cmo ha sido tratada esta variable por otrosinvestigadores anteriormente. Segundo, elaborar un universo de items tan amplio como sea posible, paramedir la variable en todas sus dimensiones. Posteriormente, se consulta con investigadores familiarizadoscon el tema y la variable a medir para ver si el contenido es exhaustivo. Esto se conoce con el nombre devalidacin por juicio de expertos.


13/34

Para el caso de validacin por juicio de expertos, se recomienda seleccionar a cinco o diez expertos queconozcan del tema de estudio o que conozcan de investigacin (construccin de instrumentos) y quetengan el grado de magster o doctor. Para facilitar la evaluacin del instrumento es importante presentaradjunto al instrumento, la matriz de consistencia del proyecto, el cuadro de operacionalizacion devariables o el proyecto completo si el experto as lo requiere.

DETERMINACIN DE LA VALIDEZ DE UN INSTRUMENTO DE RECOLECCIN DE DATOSMEDIANTE LA TCNICA DEL JUICIO DE EXPERTOS

PASOS1. El instrumento de recojo de datos debe ser elaborado y/o adecuado por el equipo investigador y elapoyo del formador asesor, luego analizado, discutido y mejorado en el aula con el formador deinvestigacin

2. Hacer un estudio piloto con 10 estudiantes diferentes a la muestra pero con caractersticassemejantes, esto permitir corregir, modificar o eliminar algunos tems y ensayar el procesamiento de

datos (elaboracin de tablas y grficos)

3. Para la determinacin de la validez del instrumento se recomienda hacerlo mediante la Tcnica deJuicio de Expertos (05 a 10) para ello se debe lograr el apoyo de profesores de la I.E. de prctica oformadores del Instituto con experiencia, formacin acadmica y dominio del tema. El equipo investigadordebe alcanzar a cada experto los siguientes documentos:

- Matriz de consistencia del proyecto de investigacin- Cuadro de operacionalizacin de variables- Resumen terico de las variables (material de lectura)- Tabla de especificaciones para elaboracin del instrumento (estructura de la prueba)-

Matriz para validar tems por la Tcnica de Juicio de Expertos- Lista de cotejo para validez general del instrumento

Para la determinacin de la confiabilidad del instrumento te sugiero contar con el asesoramiento unprofesional en Estadstica y experiencia en investigacin

PRESENTACIN DEL MATERIAL PARA LA DETERMINACIN DE LA VALIDEZ DE UNINSTRUMENTO DE RECOLECCIN DE DATOS MEDIANTE LA TCNICA DEL JUICIO DE EXPERTOS

A fin de que los expertos realicen la validacin del instrumento es necesario hacer un documento de

presentacin, entregar los formatos y/o instrumentos que permitirn evaluar al instrumento, entre otros.

CARTA DE PRESENTACIN

Estimado profesor (a) Mg

Institucin Educativa N 1435 Juan Gregorio Medel, Trujillo

Apreciad(a) profesor(a):

El equipo investigador conformado por estudiantes practicantes de la especialidad de Educacin Inicial, IXciclo del IESPP Indoamrica, Trujillo, considerando su calificacin cientfica y tcnica, aos de


14/34

experiencia y los resultados alcanzados en su desempeo profesional, se solicita su valioso apoyo encalidad de experto para validar el instrumento de recojo de datos (pretest- postest), para lo cual se adjuntaal presente lo siguiente:

1. Instrumento(s) a validar2. Ficha para validar tems por la tcnica del juicio de expertos

3. Lista de cotejo para validar contenido general del instrumento

Para mayor informacin tambin se adjunta la matriz de consistencia del proyecto de investigacin, elcuadro de operacionalizacin de variables y matriz de capacidades y contenidos.

Agradeciendo su participacin y colaboracin en el proceso de adaptacin y validacin propuesto en elpresente trabajo de grado, motivo por el cual me permito presentarles el material de inters y el formatode calificacin del mismo y las instrucciones para su diligenciamiento.

Trujillo,de ..del 201

Cordialmente,

..Estudiante practicante representante

Educacin Inicial, IX ciclo

FICHA PARA VALIDAR TEMS POR LA TCNICA DE JUICIO DE EXPERTO

A. Datos generales del Juez Expertoa. Nombre..b. Titulo.c. Grado.d.. I.E: donde labora.....................................e. Cargo que desempeaf. Aos de experienciag. Fecha de la validacin

B. Objetivo.

Valorar la calidad de los tems en su concepcin terica y metodolgica, como la efectividad que seespera alcanzar con su aplicacin en la investigacin educativa planificada.

C. Indicaciones para valoracin de temsSe presenta una lista de tems con sus respectivas alternativas de solucin., con el propsito de que

marque con una equis o aspa (X) la celda que corresponda con la valoracin que usted le otorgue a cadatem. Adems se le solicita anotar las sugerencias para la mejora, cambio o eliminacin de los tems sifuera el caso.


15/34

Los criterios de valoracin para cada una de las categoras y cada uno de los tems propuestos son:

1. Relevancia o congruencia tem dominio

SI: Esencial: El tem tiene relacin con el constructo, requiere esfuerzo de procesamiento mental yproduce efecto cognitivo positivo en los estudiantes a evaluar, dentro de un contexto determinado.

NO: No esencial: El tem no tiene relacin con el constructo, no requiere de esfuerzo de procesamientomental en los estudiantes a evaluar.

2. Claridad en la presentacin:

SI:Claro: El tem se entiende sin dificultad alguna el enunciado, es redactado de forma adecuada, convocabulario apropiado, comprensible y fcilmente entendible para la poblacin a la cual es dirigida.

NO:No claro: el tem es confuso y/o no cuenta con vocabulario apropiado para la poblacin a la cual esdirigida.

3. CONTEXTO

SI: En el tem todas las palabras son usuales para nuestro contexto

NO: En el tem algunas palabras no son usuales para nuestro contexto

4. DOMINIO DEL COSTRUCTO

SI: El tem evala el componente o dimensin especfica del constructo.

NO: El tem no evala el componente o dimensin especfica del constructo.

tem

N

1.RELEVANCIA 2.CLARIDAD 3.CONTEXTO 4. DOMINIO DELCOSTRUCTO

OBSERVACIONES

SI NO SI NO SI NO SI NO

1

2

3

4

SUGERENCIAS.

Firma del Juez experto


16/34

LISTA DE COTEJO PARA VALIDAR EL CONTENIDO GENERAL DEL INSTRUMENTO DE

RECOJO DE DATOS

Objetivo: Determinar la validez del contenido del instrumento de recoleccin de datos.

Estimado(a) Juez Experto(a): De acuerdo al objetivo arriba mencionado srvase marcar con un aspa(X) en

SI o NO frente a cada criterio o indicador de acuerdo a lo que considere conveniente, a su vez agradezcoanteladamente su apreciacin, sugerencias y observaciones pertinentes.

CRITERIOS O INDICADORES VALORACIN OBSERVACIONESSI NO

1. Los tems recogen informacin que permite dar respuesta alproblema de investigacin.2. Los tems responden a los objetivos de la investigacin3. La secuencia de los tems presentada facilita el desarrollo delinstrumento4. Los contenidos a medir estn previstos en las programaciones

5. Las capacidades a medir estn previstos en lasprogramaciones6. Los contenidos a medir cuentan con informacin o bibliografasuficiente7. Los contenidos a medir tienen un significado o importancia parala vida prctica8. Los contenidos a medir estn adecuados a las capacidadescognitivas de los sujetos que resuelven la prueba9. Los tems elaborados ayudan a medir las dimensiones de lavariable dependiente.

10. Los trminos utilizados son comprensibles11. Los tems o preguntas estn redactados en forma clara yentendible12. La alternativas de respuesta para cada tem estn bienelaboradas13. El nmero de tems es adecuado para su aplicacin y/o sonrepresentativos del universo hipottico del contenido14. El instrumento tiene el nmero suficiente de tems para cadadimensin de la variable15. La tcnica e instrumento a utilizar para la recoleccin dedatos son adecuados

16. La estructura del instrumento es adecuada, formal (ttulo,datos del evaluado, instrucciones, datos codificados)17. El instrumento es coherente con la matriz de consistencia18. Los tems del instrumento responde a la operacionalizacin dela variable19. Los tems son apropiados tericamente20. Hay precisin de capacidades y contenidos a evaluar

SUGERENCIAS.

...Firma del Juez experto


17/34

Segundo ejemplo: FICHA DE COTEJO PARA JUICIO DE EXPERTOS

INSTRUCCIONES: Marque con una (X) en la celda respectiva luego de hacerse la interrogante lahabilidad o capacidad o conocimiento medido por este tem es o no esencial? En el caso de ser larespuesta negativa, por favor en la parte inferior indique las observaciones necesarias para mejorar el olos tems sealado (s). Gracias por su colaboracin

Nombre del Juez Experto..Fecha:

Firma del experto

CUANTIFICACIN DE LA VALIDEZ DE CONTENIDO POR EL JUICIO DE EXPERTOS : El EnfoqueLawshe (1975)

La validez de contenido: juicio de expertos, se refiere al grado en que un instrumento refleja un dominioespecfico de contenido de lo que se mide. Es el grado en el que la medicin representa al conceptomedido

El Enfoque Lawshe (1975) para la validez de contenido incluye a un grupo de jueces. Cada miembro deljurado debe responder a la siguiente pregunta para cada uno de los varios tems o reactivos. la habilidado capacidad o conocimiento medido por este tem o reactivo es:

a. Esencial (SI)b. No Esencial (NO)

Lawshe, desarroll una frmula denominada Razn de validez de contenido (C.V.R.)Donde.

CVR: Razn de validez de contenido.ne= Nmero de expertos que indican esencial.N = nmero total de experto

2/2/

NNnCVR e


18/34

TABLA 1: Resultados de la evaluacin de tem mediante Juicio de diez expertos

FUENTE: Lista de cotejo sobre seleccin de tem para medir la Comprensin Lectora mediante Juicio de expertos

SNTESIS SOBRE LA VALIDEZ DE CONTENIDO DE LA PRUEBA QUE MIDE LA CAPACIDAD DECOMPRENSIN LECTORA.

En el anlisis del resultado obtenido sobre la evaluacin de cada tem mediante el juicio de diez expertos,segn el Enfoque Lawshe; todos los tems son vlidos. La razn de validez de contenido para los 20 temsfue mayor a 0,62; considerndolos significativos; asegurando de esta manera que es improbable que laconstruccin del instrumento que est midiendo la capacidad de comprensin lectora se deba al azar.

RAZN DE VALIDEZ DE CONTENIDO (CVR) CONSIDERANDO DIEZ EXPERTOS FUERA MENOR A0,62

S en la evaluacin de cada tem mediante el juicio de diez expertos; la razn de validez de contenido(CVR) de ste es menor que 0.62; el o los investigadores sistematizarn las indicaciones escritas por losexpertos, reformularn el contenido del tem anotando el cambio realizado en el cuadro que se muestra.

ITEMS ANTES DSPUS


19/34

VALORES MNIMOS DE LA RAZN DE VALIDEZ DE CONTENIDO PARA ASEGURAR QUE ESIMPROBABLE QUE EL ACUERDO SE DEBA AL AZAR

Nmero de expertos Valor mnimo

5 0,99

6 0,99

7 0,99

8 0,75

9 0,78

10 0,62

11 0,59

12 0,56

13 0,54

14 0,51

15 0,49

20 0,42

25 0,37

30 0,33

35 0,31

40 0,29

Fuente: Lawshe (1975), Introduccin a las pruebas y a la medicin - Pruebas y evaluacin de Instrumentos demedicin

B. VALIDEZ DE CRITERIO PREDICTIVO, implica que la medicin del instrumento se ajusta o sirve a un criterioexterno. Si el criterio se ajusta al futuro se habla de validez predictiva. Por ejemplo una prueba de admisin enlas universidades puede comparar sus resultados con el rendimiento futuro de los estudiantes en la carrera. Si elcriterio se fija en el presente se habla de validez concurrente; es cuando los resultados del instrumento

correlacionan con el criterio en el mismo momento o punto de tiempo. Por ej. una encuesta administrada un daantes de las votaciones para detectar preferencias del electorado, correlaciona con los resultados finales de laeleccin.

Las medidas de relacin entre las puntuaciones de prueba y un medida criterio obtenida en un momentofuturo proporcionan un indicio de la validez predictiva en un momento futuro; es decir con cuantaprecisin las puntuaciones de la prueba predicen alguna medida criterio.

Se aplica el Coeficiente de correlacin producto momento Pearson para encontrar el grado derelacin.

En el caso de la validez de criterio predictivo de la prueba sobre el desarrollo de la capacidad comprensinlectora se evalu obteniendo el grado de relacin que existe entre los puntajes obtenido por el grupo piloto en la

prueba de comprensin lectora propuesta (20 tems) con una medida externa (calificaciones medias) quedichos alumnos obtienen en el primer bimestre.


20/34

Se obtuvo un coeficiente de correlacin de r = 0.94 considerndolo como muy alto; evidenciando un ndice deprediccin del 66% de la variacin total.

Frmula empleada:E= (1-K) 100 , donde:

Remplazando:

E= ndice de la eficacia de prediccinK= Coeficiente de no determinacin

r2

=Coeficiente de determinacinr =Coeficiente de correlacin Pearson

C. VALIDEZ DE CONSTRUCTO (EVIDENCIA HOMOGNEA) , es probablemente la ms importante, sobretododesde la perspectiva cientfica, ya que se refiere al grado en que una medicin aportada por un instrumentorelaciona consistentemente con otras mediciones que han surgido de hiptesis y construccin de teorasantecedentes.

Se refiere a lo bien que mide una prueba un solo concepto. Un elaborador de prueba puede incrementar lahomogeneidad de un instrumento de varias formas; considrese:

Determinar el Coeficiente de correlacin corregido ITEM - TOTAL Depurar los tems evidenciando consistencia interna dentro de cada dimensin y respecto al total,

aplicando Evidencia Homognea: Coeficiente Alpha de Cronbach.

COEFICIENTE DE CORRELACINCORREGIDO ITEM-TOTAL

EVIDENCIA HOMOGNEA: COEFICIENTE

ALPHA DE CRONBACH

2222yynxxn

yxxynr

t

i

S

S

k

k2

2

1

1

21 rK


21/34

CUADRO N 5. Coeficiente de correlacin corregido tem-total

DIMENSINTEMS NIVEL LITERAL NIVEL NFERENCIAL NIVEL CRTICO

1.1 0.6092.1 0.6081.2 0.631

2.2 0.6971.3 0.6492.3 0.8421.4 0.8662.4 0.8011.5 0.6942.5 0.9401.6 0.7942.6 0.9181.7 0.783

2.7 0.6071.8 0.9562.8 0.9991.9 0.7972.9 0.9991.10 0.8312.10 0.851

FUENTE: Prueba piloto sobre Comprensin lectora aplicado a los alumnos del 5 grado de Educacin primaria de la IE. 80824 Jos Carlos Maritegui ,distrito de El Porvenir, Trujillo, 2009

CUADRO N 6. Sntesis de la depuracin de tems para evidenciar el incremento deconsistencia interna. Coeficiente Alpha de Cronbach

ITEMS NIVEL LITERAL NIVEL INFERENCIAL NIVEL CRTICO1.1 0.7152.1 0.7151.2 0.7112.2 0.6761.3 0.6972.3 0.610

1.4 0.8642.4 0.8771.5 0.8922.5 0.8501.6 0.8722.6 0.8611.7 0.8772.7 0.8931.8 0.8912.8 0.8761.9 0.9262.9 0.870

1.10 0.9162.10 0.913


22/34

Alpha de Cronbach del

instrumento NIVEL LITERAL NIVEL INFERENCIAL NIVEL CRTICO = 0.973 d1=0.732 d2=0.896 d3=0.930

FUENTE: Prueba piloto sobre Comprensin Lectora aplicado a los alumnos de la IE. 80824 Jos Carlos Maritegui, distrito El Porvenir, 2009

SNTESIS SOBRE EL ANLISIS DEL CONSTRUCTO CONSIDERANDO EL COEFICIENTE DECORRELACIN CORREGIDO ITEM-TOTAL Y ANLISIS DE CONSISTENCIA INTERNA COEFICIENTEALPHA DE CRONBACH

En el Cuadro N5: El anlisis de los coeficientes de correlacin tem-total corregido en las tres dimensiones nosugieren la eliminacin de los tems por ser superiores a 0,20 de acuerdo al criterio propuesto por KLINE (19851986), lo cual indica que estos tems son consistentes.

En el Cuadro N 6:Como se puede apreciar el coeficiente de consistencia interna del instrumento (0.973) supera los coeficientes Alpha de Cronbach de las dimensiones (0.732; 0.896; 0.93) Nivel literal, Inferencial y Crtico

respectivamente; adems los valores de los coeficientes Alpha de Cronbach por tem oscilan desde (0.61 a0.926), lo cual evidencia la validez de constructo de la prueba estudio. Por lo tanto el anlisis de los tems en lastres dimensiones de la prueba no sugiere la eliminacin de ningn tem.

VALIDEZ TOTAL = Validez de contenido + validez de criterio + validez de constructo

Cabe agregar que un instrumento de medicin puede ser confiable pero no vlido, puede medirconsistentemente un aspecto ms no medir lo que pretende medir el investigador. Por ello es requisito que uninstrumento de medicin que demuestre ser confiable y vlido.

2.5.2. CONFIABILIDAD, es otra caracterstica importante que deben poseer los instrumentos de medicin, se

refiere a la capacidad del instrumento para arrojar datos o mediciones que correspondan a la realidad que sepretende conocer, o sea, la exactitud de la medicin, as como la consistencia o estabilidad de la medicin endiferentes momentos, es decir permite obtener datos fidedignos.

La confiabilidadde un instrumento de medicin se refiere al grado de precisin o exactitud de la medida, en elsentido de que si aplicamos repetidamente el instrumento al mismo sujeto u objeto produce iguales resultados.Es el caso de un balanza o de un termmetro, los cuales sern confiables si al pesarnos o medirnos latemperatura en dos ocasiones seguidas, obtenemos los mismos datos.

La confiabilidad (coeficiente de confiabilidad) mide el grado en que la aplicacin repetida de la prueba, a un

mismo objeto o sujeto, produzcan iguales resultados o resultados anlogos. Cuanto ms confiable o fiable sea uninstrumento, ms similares sern los resultados obtenidos en varias aplicaciones de ste. Valores por encima de0,7 son adecuados (recomendables por encima de 0,8). Valores por debajo de 0,7 indican que nuestrasestimaciones pueden ser imprecisas.

Se dice que un instrumento es confiable si obtiene medidas o datos que representen el valor real de la variableque se est midiendo y si estos datos o medidas son iguales al ser aplicados a los mismos sujetos u objetos endos ocasiones diferentes o al ser aplicados por diferentes personas.

Para aumentar la confiabilidad; al elaborar instrumentos es necesario tener en cuenta las siguientes

recomendaciones:

a. Aplicar las reglas generales de elaboracin de instrumentos, de tal forma que se eliminen los errores demedicin( preguntas ambiguas)


23/34

b. Aumentar el nmero de preguntas sobre determinado tema.c. Elaborar instrucciones claras que orienten el llenado o utilizacin de los instrumentos.d. Aplicar los instrumentos o realizar mediciones en condiciones similares

2.5.2.2. PROCEDIMIENTO PARA DETERMINAR LA CONFIABILIDAD DE UNINSTRUMENTO DE MEDICIN

Generalmente todos los procedimientos utilizan frmulas que producen coeficientes de confiabilidad, los cuales

pueden oscilar entre 0 y 1, donde 0 significa confiabilidad nula y 1 representa el mximo de confiabilidad. Entrems se acerque el coeficiente a 0 habr mayor error en la medicin. Los procedimientos ms utilizados son:

A. Mtodo prueba post prueba. Un mismo instrumento es aplicado dos o ms veces a un mismo grupo depersonas. Si la correlacin entre los resultados de las diferentes aplicaciones es altamente positiva, elinstrumento se considera confiable.. Desde luego, el perodo de tiempo entre las mediciones es un factor aconsiderar. Si es muy largo, otros factores como maduracin o cambio de condiciones pueden afectar la segundamedida. Si es muy corto, las personas pueden recordar cmo contestaron la primera vez y aparecer como msconsistentes la segunda vez.

Estimacin de la confiabilidad obtenida al correlacionar pares de puntuaciones de las mismas personas en dosaplicaciones diferentes de la misma prueba. La medida de la prueba y pos prueba es apropiada cuando se valorala confiabilidad de una prueba que pretende medir algo que es relativamente estable a lo largo del tiempo, comoun rasgo de personalidad.

Si se supone que la caracterstica que se est midiendo flucta con el tiempo, tendra poco sentido evaluar laconfiabilidad de una prueba usando el mtodo de prueba post prueba.

Coeficiente de correlacin producto momento Pearson.

Ejemplo:

Calculo de Coeficiente de confiabilidad utilizando el mtodo Prueba Post prueba

N ORDX Y

XY X2

Y2

1erTiempo

2doTiempo

1 1 1 1 1 1

2 6 7 42 36 493 14 16 224 196 256

4 2 3 6 4 95 7 9 63 49 81

SUMA 30 36 336 286 396

2222

yynxxn

yxxynr

2222 yynxxn

yxxynr

22 36)396(5302865

36303365

r

129619809001430

10801680

r


24/34

La estimacin de la confiabilidad del instrumento obtenida al correlacionar pares de puntuaciones de las mismaspersonas en dos aplicaciones diferentes del mismo instrumento, evidencia un coeficiente de confiabilidad muyalto; detectado por el coeficiente de correlacin Pearson igual a 0.997.

NIVELES DE COEFICIENTE DE CORRELACIN

VALOR NIVELES0 Nula

0,01 0,19 Muy baja 0,20 0,39 Baja

0,40 0,69 Moderada 0,70 0,89 Alta 0,90 0,99 Muy alta

1 Perfecta

B. Mtodo de medidas alternas o de formas equivalentes. En este procedimiento no se aplica el mismoinstrumento de medicin sino dos o ms versiones equivalentes de ste. Las versiones deben ser similares encontenido, instrucciones, duracin, etc. Por ej. cuando un profesor administra 2 o ms modalidades de examenen su grupo de alumnos. El instrumento es confiable si la correlacin entre los resultados de las dos o mspruebas administradas es significativamente positiva.

a. DE FORMA EQUIVALENTE

Se requiere dos aplicaciones de la prueba con versiones diferentes. Para cada forma de la prueba son igualeslas medias y las varianzas de las puntuaciones de pruebas observadas y las puntuaciones de ambas pruebas secorrelacionan.

b. DE FORMA ALTERNA

Se requiere dos aplicaciones de la prueba con el mismo grupo con versiones diferentes de una prueba que sehan construido con el fin de ser equivalentes, aunque no cumplen con los requisitos para la designacin legitima

de equivalentes, las formas alternas estn diseadas generalmente para ser equivalentes con respecto avariables como contenido y nivel de dificultad. Coeficiente de correlacin producto momento Pearson.

C. Mtodo divisin por mitades. Aqu se administra un solo instrumento, una sola vez, pero se dividen laspreguntas o los tems (Por ejemplo los tems pares con respecto a los impares, o la primera mitad con respecto

a la segunda mitad). Si correlacionan los resultados de las dos partes, se considera el instrumento confiable.Ahora bien, la confiabilidad vara de acuerdo al nmero de tems de la prueba. Cuantos ms tems mayor es laconfiabilidad.

2222yynxxn

yxxynr

)096.602(

600r

997.0r


25/34

Se obtiene correlacionando dos pares de puntuaciones obtenidas de mitades equivalentes de una sola pruebaaplicada en una sola vez. El clculo de un coeficiente de confiabilidad de divisin por mitades por lo generalimplica tres pasos:Paso 1. Dividir la prueba en mitades equivalentes.Paso 2. Calcular una r de Pearson (Coeficiente de correlacin Producto momento Pearson) entre laspuntuaciones en las dos mitades de la prueba.Paso 3. Ajustar la confiabilidad de la mitad de la prueba usando la frmula de Correcin Spearman - Brown

para estimar la confiabilidad de la prueba entera.

Formas aceptables de dividir una prueba: Asignando al azar los reactivos a una y otra mitad de la prueba. Asignar los reactivos con nmeros nones a una mitad y los reactivos con nmeros pares a la otra mitad.

Confiabilidad mitad pares-mitad nones. Es dividir la prueba por contenido de modo que cada mitad de la prueba contenga reactivos equivalentes

con respecto al contenido y dificultad.

Coeficiente de confiabilidad utilizando el mtodo divisin por mitades

a. Cuando el nmero de tems es par, se procede a dividir en dos mitades.b. Cuando el nmero de tems es impar, es necesario seleccionar uno de ellos al azar con la finalidad de dividirloen mitades.

D1 D2 N

ORDI11(1)

I12(2)

I13(3)

I14 I21(4)

I22(5)

I23(6)

0 0 0 0 0 0 1 1

1 1 1 1 0 1 1 2

2 2 2 2 2 2 2 3

1 1 0 0 0 0 0 4

1 1 1 1 1 1 1 5

c. Se utiliza una de las formas de divisin. Considero para este anlisis; los puntajes de los tems pares e

impares (nones).

22222/21/1 )()( yynxxn

yxxynr

2/12/1

2/12/1

1

2

r

rrSB


26/34

d. Se calcula el coeficiente de correlacin Pearson y luego se aplica la correccin de Spearman Brown.

La estimacin de la confiabilidad utilizando el mtodo Divisin por mitades, mediante el clculo del Coeficiente decorrelacin Pearson fue de 0.953; considerando con nivel muy alto la confiabilidad de las mitades de la prueba, y

Coeficiente de confiabilidad utilizando el mtodo divisin por mitades Correccin de Spearman Brown paraestimar la confiabilidad de la prueba entera.

22222/21/1

yynxxn

yxxynr

222/21/1 13)55(513515

1313525

r

169275169255

1692602/21/1

r

4777.95

912/21/1

r

953.02/21/1 r


27/34

Y luego de aplicar la correccin de Spearman Brown; se obtuvo un coeficiente de confiabilidad de 0.976;identificando con nivel muy alto la confiabilidad de la prueba entera.

D. MTODO DE ESTIMACIN DE LA CONSISTENCIA INTERNA: Alpha de Cronbach.

- Un ndice de consistencia entre tems o reactivos es til, a su vez evala si contiene reactivos que miden unsolo rasgo . Homogeneidad es el grado en que una prueba mide un solo factor. Entre ms homognea una

prueba puede expresarse que tenga ms consistencia entre reactivos.- Muy til para pruebas con dicotoma (s, no), opcin mltiple o un rango de valores,(Huck 1996)- El clculo del coeficiente de consistencia interna implica calcular el coeficiente Alpha de Cronbach delinstrumento empleando la frmula:

-Donde;

es el coeficiente alpha.

es el nmero de tems o reactivos.

suma de las varianzas de cada tem o reactivo.

Varianza del total.

TEM MEDIA VARIANZA12

CASO: RESULTADO DE APLICACIN DE UNA PRUEBA PILOTO

D1 D2N ORD.

I11 I12 I13 I14 I21 I22 I23

0 0 0 0 0 0 11

1 1 1 1 0 1 12

2 2 2 2 2 2 23

1 1 0 0 0 0 04

1 1 1 1 1 1 15

FUENTE: Prueba piloto sobre Comprensin lectora aplicado a los alumnos de la IE. 80824 Jos Carlos Maritegui, distrito El Porvenir, 2009

t

i

S

S

k

k2

2

11

k

2iS

2

TS


28/34

CUADRO DE REGISTRO Y PROCESAMIENTO DE DATOS


CUADRO DE REGISTRO Y PROCESAMIENTO DE DATOS- Indicadores Estadsticos



29/34

CUADRO 7. Coeficiente de correlacin corregido tem-total.

TEM D1

D2

I11

0.921

I12

0,921

I13 0.937I14

0.937

I21

0.867

I22

0.906

I23

0.845


En el CUADRO 7: El anlisis de los coeficientes de correlacin tem-total corregido en las dos dimensiones no

sugieren la eliminacin de los tems por ser superiores a 0,20 de acuerdo al criterio propuesto por KLINE (19851986), lo cual indica que estos tems son consistentes.

CLCULO DEL COEFICIENTE DE CORRELACIN CORREGIDO tem Total (del tem I11 de la dimensinD1)

NORD

X Y

I11

XY X2

Y2

1 00 0 0 0

2 13 3 1 9

3 2 6 12 4 36

4 11 1 1 1

5 13 3 1 9

SUMA 5 13 19 7 55

1692752535

6595

r

2222 yynxxn

yxxynr

22 13)55(5575

135195

r

5576.32

30r

921.011 r


30/34

CUADRO 8. Depuracin de tems para evidenciar el incremento de consistencia interna. Coeficiente Alpha deCronbach

PRIMERO: Calcular el coeficiente de consistencia interna Alpha de Cronbach para el instrumento y para cadadimensin

COEFICIENTE DE CONSISTENCIA INTERNAPARA EL INSTRUMNTO

COEFCIENTE DECOEFICIENTE INTERNAPARA LA DIMENSIN 1

COEFCIENTE DECOEFICIENTE INTERNAPARA LA DIMENSIN 2

TEM D1 D2

I11 0.962

I12

0.962

I13 0.957

I14

0.957

I21

0.909

I22 0.870

I23

0.929

Alpha de Cronbach

del instrumento

D1

D2

= 0.973 D1=0.970 D2=0.934

FUENTE: Prueba piloto sobre Comprensin lectora aplicado a los alumnos de la IE. 80824 Jos Carlos Maritegui, distrito E l Porvenir, 2009

2

13

4

1

2

14

2

13

2

12

2

11

1

D

SSSSD

S

2

12

3

2

2

23

2

22

2

21

2

D

SSS

DS

5.26

5.07.08.07.07.05.05.01

6

7OINSTRUMENT

8.8

7.07.05.05.01

3

4

1D

3.5

5.07.08.01

2

3

2D

5.26

4.41

6

7OINSTRUMENT

8.8

4.21333.1

1D

3.5

0.215.1

2D

834.01667.1OINSTRUMENT 7273.0333.11 D 6226.05.12 D

973.0OINSTRUMENT 970.01 D 934.02 D

t

i

S

S

k

k2

2

1

1

2

16

72

23

2

22

2

21

2

14

2

13

2

12

2

11

TOTAL

SSSSSSS

SOINSTRUMENT

OINSTRUMENT


31/34

En el CUADRO 8: Como se puede apreciar el coeficiente de consistencia interna del instrumento (0.973) supera los coeficientes Alpha de Cronbach de las dimensiones (0.970; 0.934) Dimensin 1 y Dimensin 2

respectivamente; adems los valores de los coeficientes Alpha de Cronbach por tem oscilan desde (0.870 a0.962), lo cual evidencia la validez de constructo de la prueba estudio. Por lo tanto el anlisis de los tems en lasdos dimensiones de la prueba no sugiere la eliminacin de ningn tem.

ITEM D1 D2I11

I12

I13

I14

I21

I22

I23

Coeficiente de confiabilidad utilizando el mtodo de consistencia interna del instrumento Coeficiente Alpha decronbach

962.012

32

12/

2

14

2

13

2

11

12

SUMS

SSS

962.012

3

2

11/

2

14

2

13

2

12

11

SUMS

SSS

957.0123

2

13/

2

14

2

12

2

11

13

SUMSSSS

957.012

3

2

14/

2

13

2

12

2

11

14

SUMS

SSS

909.011

2

221/

2

23

2

22

21

SUMS

SS

870.011

22

22/

2

23

2

21

22

SUMS

SS

929.011

22

23/

2

22

2

21

23

SUMS

SS

SS

t

i

k

k2

2

11

2

167

2

23

2

22

2

21

2

14

2

13

2

12

2

11

TOTAL

SSSSSSS

SOINSTRUMENT

OINSTRUMENT

5.26

5.07.08.07.07.05.05.01

6

7OINSTRUMENT


32/34

El coeficiente de confiabilidad es ( 0.973); con nivel muy alto de confiabilidad para la prueba entera

F. Coeficiente KR -2O, Kuder y Richardson (1937) , los cuales desarrollarlo un coeficiente para estimar laconfiabilidad de medicin, su interpretacin es la misma que el coeficiente alfa.Utilizado para preguntas de opcin mltiple, (Huck, 1996)

Donde:r: correlacin de la prueba completak: Nmero de tems o reactivoss2 : Varianza de las puntuacionesx : Mdia de las puntuaciones

G. Cotejo entre observadores.Se utiliza fundamentalmente cuando se aplican instrumentos de observacin y

registro. Dos o ms observadores aplican el mismo instrumento al mismo tiempo. Luego se calcula la correlacinde aspectos coincidentes observados. Se considera confiable el instrumento si hay un porcentaje decoincidencias superior al 80%. Por supuesto que este mtodo implica que los observadores tengan el mismonivel de preparacin o de entrenamiento para observar.

2.3. PRACTICABLE, es otra cualidad que debe tener un instrumento ad hoc de evaluacin, es tener un diseoy una estructura que;

a. Permita registrar los datos de tal forma que facilite su posterior procesamientob. No ofrezca mayores dificultades en su manejo, yc. Permita obtener los datos de una manera ms econmica posible

En la prctica es casi imposible que una medicin sea perfecta, generalmente se tiene un grado de error. Desdeluego, se trata que este error sea el mnimo posible, por ello es importante determinar la validez y confiabilidadde un instrumento

3. FACTORES QUE PUEDEN AFECTAR LA VALIDEZ Y CONFIABILIDAD DE UN INSTRUMENTO DEMEDICIN

a. La improvisacin. Algunaspersonas creen que elegir un instrumento de medicin o desarrollar uno esalgo fcil y que no requiere de supervisin alguna. Para poder construir un instrumento se requiereconocer muy bien la variable que se pretende medir y la teora que la sustenta.

b. El no estar validados en el contexto donde se aplican. Traducir un instrumento, an cuandoadaptemos los trminos a nuestro lenguaje no es ni remotamente validarlo. Es simplemente un primerpaso ya que validar un instrumento implica realizar una investigacin extensa y compleja. Los grupos, laspersonas cambian y tienen valores diferentes de acuerdo a la cultura. Por lo tanto, se deben aplicarinstrumentos ya validados en el contexto.

c. El instrumento e inadecuado o no es emptico. Hay instrumentos que tienen un lenguaje muyelevado para el entrevistado o no toma en cuenta diferencias de sexo, edad nivel ocupacional yeducativo; todo esto puede resultar en errores de validez y confiabilidad del instrumento de medicin

d. El cuarto factor lo constituyen las condiciones en que se aplica el instrumento . El ruido, presionarpara que una persona conteste un instrumento largo en un perodo de tiempo corto, el hambre o falta demotivacin para responder influir negativamente en la validez y confiabilidad de la medida.

973.0OINSTRUMENT


33/34

e. El quinto factor se refiere a los aspectos mecnicos. Que el instrumento tenga instruccionesprecisas, que se lea bien (si se trata de un cuestionario escrito), que no le falten pginas, que haya unespacio adecuado para contestar.

4.5. PROBAR EL INSTRUMENTO MEDIANTE MRDIANTE UN ESTUDIO PILOTO

Consiste elegir estudiantes o personas con caractersticas similares a la muestra o poblacin objetivo de nuestrainvestigacin o de estudio y luego organizar la aplicacin del instrumento

En esta prueba se analiza si las instrucciones se comprenden y si los tems funcionan adecuadamente

Los resultados se utilizan para calcular la confiabilidad y de ser posible, la validez del instrumento de medicin.La prueba piloto se realiza con una pequea muestra; los investigadores aconsejan un 10% de personassemejantes a las que integrarn la muestra definitiva.

Sobre la base de la prueba piloto, el instrumento de medicin preliminar, se revisa modifica, reformula,se ajusta y se mejora los tems en base a las observaciones realizadas, para lograr mayor nivel de

confiabilidad y validez. En un trabajo de investigacin habr que narrar el procedimiento, el pilotaje y lareestructuracin del instrumento posterior al pilotaje.

Conclusin: Como te ha sido fcil darte cuenta existe varios mtodos, tcnicas o procedimientos paradeterminar la validez y confiabilidad de un instrumento de investigacin, segn nuestra modesta experiencia terecomendamos para la validez usar la tcnica de juicio de expertos y para la confiabilidad usar el mtodo deconsistencia interna del instrumento : Coeficiente Alpha de cronbach, para lo cual en una forma muy rpidapuedes usar el programa Excel o mejor el programa SPSS, siempre don el apoyo de un profesional enestadstica.

4.6. APLICACAR EL INSTRUMENTO A LA MUESTRA DE ESTUDIOConcluida una primera versin del instrumento es necesario someterlos a prueba (juicio de expertos, juicio depares, aplicacin a muestra similar) y hacer un estudio piloto. La prueba sirve para:

Evaluar si realmente permiten recoger la informacin que buscamos recoger de acuerdo al objetivo deltrabajo.

Examinar si las instrucciones y los tems formulados son comprendidos a cabalidad. Evaluar elvocabulario utilizado.

Analizar la funcionalidad del orden y secuencia de las preguntas. Detectar preguntas o tems que tengan escasa utilidad para los objetivos de la investigacin. Determinar la duracin real de la aplicacin. Probar la practicidad del instrumental (cuestionarios, grabadora, espacios). Afrontar situaciones no previstas o compilar respuestas desconocidas.

Revisar, corregir, reproducir y aplicar el instrumento a la muestra de estudio teniendo en cuenta lo siguiente:a) Sujetos a quienes se aplicar el instrumento. Contactarse con ellos.b) Solicitar permisos y explicar los objetivos del trabajo, adems:

Forma como se aplicar: en grupo, individual. Lugar y hora de aplicacin del instrumento. Prever los espacios en donde se aplicar el instrumento. Tiempo previsto de aplicacin. Considerar la disponibilidad de los sujetos. Recursos necesarios: grabadora, micrfono, cuestionarios, papeles,lapiceros, entre otros, segn sea

el caso.c) En focus group se suele invitar algo para compartir (caf, galletas).d) En caso de un cuestionario con preguntas cerradas, evaluar si las categoras son exhaustivas y

mutuamente excluyentes.


34/34

e) Tener claro cmo se han de codificar los datos . La codificacin es necesaria para analizarcuantitativamente los datos (aplicar anlisis estadsticos). La mayora de las veces se usan nmeros ocantidades, aunque tambin se pueden utilizar letras o smbolos.

f) Ensayar la forma cmo se analizara la informacin.

5. REFERENCIAS BIBLIOGRFICAS.

CARRANZA A. G. y otros (200(). Estadstica Investigacin. Edit. San Marcos Lima Per.2007 pp.HERNANDEZ S. R. et al (2003) Metodologa de la Investigacin. Mxico, Edit. Mc.Graw Hill, 705 pp.LUCERO Irene y MEZA, Susana (2006) Validacin de Instrumentos para medir conocimientos. En:

www.unne.edu.ar/web/cvt/cvt/2002VALDES, F. (2006) Comprensin y uso de la Estadstica. En:www.cortland.edu/flteach/stats/glos2
http://www.unne.edu.ar/web/cvt/cvt/2002http://www.unne.edu.ar/web/cvt/cvt/2002http://www.cortland.edu/flteach/stats/glos2http://www.cortland.edu/flteach/stats/glos2http://www.cortland.edu/flteach/stats/glos2http://www.cortland.edu/flteach/stats/glos2http://www.unne.edu.ar/web/cvt/cvt/2002

elaboraciÓn, validez y confiabilidad de un instrumento de investigaciÓn

Documents