informaciÓn sobre prueba evalua

EVALUACIN DE LA

BATERA PSICOPEDAGGICA

EVALA

2

RESUMEN DE LA VALORACIN DEL TEST

Descripcin general

Caractersticas Descripcin

Nombre del test Batera Psicopedaggica EVALUA

Autor Miguel Martnez Garca (Coord.); Jess Garca Vidal; Daniel Gonzlez Manjn, Beatriz Garca Ortiz; Manuel Garca Prez

Autor de la adaptacin espaola No procede

Editor Instituto de Orientacin Psicolgica Asociados EOS

Fecha de la ltima revisin del test en su adaptacin espaola

2009

Constructo evaluado Procesos de desarrollo en la edad escolar (cognitivo; personal y social); procesos de aprendizaje (lenguaje; matemticas; hbitos y orientacin acadmica).

rea de aplicacin Psicologa educativa

Soporte Papel y lpiz

Valoracin del test

Caractersticas Valoracin Puntuacin

Calidad de los Materiales y documentacin

Buena 3,5

Fundamentacin terica Adecuada 2,5

Adaptacin Espaola No procede

Anlisis de los tems Buena 3,5

Validez de contenido Adecuada 3

Validez de constructo Buena 4

Anlisis del sesgo No se aporta

Validez predictiva No se aporta

Fiabilidad: equivalencia No se aporta

Fiabilidad: consistencia interna Aceptable 3

Fiabilidad: estabilidad No se aporta

Baremos Excelente 4,5

3

Comentarios generales

La batera informatizada EVALA muestra un ejemplo heterogneo de evaluacin de

capacidades y aptitudes muy interesante desde el punto de vista curricular. La prueba es de

gran valor aplicado en el contexto escolar, socioeducativo y clnico (en casos especficos),

especialmente en la actualidad, para la evaluacin de procesos normativos prcticamente

inexistentes en el contexto formal. Tambin supone un correlato ineludible de la evaluacin

cualitativa al uso impuesta por el modelo pedaggico imperante en este contexto. Su mayor

valor aadido es su capacidad para evaluar de forma amplia y rpida procesos complejos

del desarrollo y el aprendizaje humano en contextos escolares, en funcin de la edad y el

nivel educativo, lo que le confiere un gran valor psicoeducatico y psicopedaggico.

Otra de sus ventajas reside en el elevado nmero de subtests que presenta, en

concreto diez, los cuales se adecuan a cada uno de los niveles educativos y tienen en cuenta

aspectos concretos de cada etapa. Tambin hace un amplio recorrido en cada curso por

diferentes capacidades, adaptndose a la edad del alumnado. Tambin cabe destacar lo

positivo del programa informatizado que aporta (PIBE) el cual, desde el punto de vista del

psiclogo educativo u orientador, supone un medio muy interesante para controlar el desarrollo

de todos los alumnos en los comienzos y finales de curso.

A nivel de fundamentacin estadstica, la prueba tiene gran valor en cuanto a

fiabilidad, validez y normatividad, dados los parmetros del momento histrico en que fue

realizada. Para muchos de los subtests se han realizado hasta 3 estudios: pilotos, pre-

experimental y experimental (siendo necesaria en estos ltimos una revisin en profundidad

que apoye la seleccin de los tems y los subtests propuestos). Por otra parte, tal y como se

fundamenta en el informe, sera deseable efectuar una reevaluacin de la batera con las

tcnicas actuales de validez y fiabilidad, incorporndole algunos elementos tericos a la

misma, as como validacin de la versin informatizada. En cuanto a los baremos, su

diferenciacin en subtests, y en definitiva en capacidades o habilidades, nos puede permitir

extraer perfiles diagnsticos bastante completos, siempre teniendo en cuenta el objetivo de la

prueba.

Todos estos aspectos de mejora en ningn caso restan utilidad y adecuacin para su

uso actual. Adems de resultar insustituible para realizar un seguimiento normativo e

investigativo de cmo cursan los procesos de desarrollo y aprendizaje en grupos y alumnado

escolar, es destacable el uso que se puede hacer de la batera en la valoracin de los

procesos de construccin de competencias acadmicas en alumnado universitario. Es por

tanto una herramienta profesional insustituible en cualquier Departamento o rea de I+D+I

Psicoeducativa. En definitiva, esta batera escolar puede ser de gran utilidad para una

evaluacin final o inicial de los grupos en cada uno de los niveles educativos y as poder

encontrar perfiles de dificultades de aprendizaje para posteriormente ser contrastados con un

diagnstico psicoeducativo individual y exhaustivo.

4

ANLISIS DETALLADO DE LA PRUEBA

1. DESCRIPCIN GENERAL DEL TEST

1.1. Nombre del test

Batera Psicopedaggica EVALA

1.2. Nombre del test en su versin original

No procede

1.3. Autor

Coordinador general: Miguel Martnez Garca

Autores: Jess Garca Vidal, Daniel Gonzlez Manjn, Beatriz Garca Ortiz, Manuel Garca

Prez

1.4. Autor de la adaptacin espaola

No procede

1.5. Editor del test en su versin original

Instituto de Orientacin Psicolgica Asociados EOS (Madrid)

1.6. Editor de la adaptacin espaola

No procede

1.7. Fecha de publicacin del test original

La fecha de publicacin del test original es diferente en funcin del nivel de la Batera, de

forma sinttica podemos sealar 3 grupos:

El primer grupo de bateras son la Batera Evala-2, Evala-4 y Evala-6, la Versin

Experimental se edito en 1996; posteriormente aparece la Versin 1.0 en el ao 2.000

y la Versin 2.0 (actual) es del ao 2001. Con posterioridad a esta fecha se han

llevado a cabo ajustes en los baremos de algunas pruebas, el ltimo de los cuales se

ha realizado en el ao 2009. Esta ltima versin ha tenido 8 reimpresiones desde su

aparicin.

El segundo grupo de bateras est formado por las Bateras Evala-0, Evala-8,

Evala-9 y Evala 10. De estas la Versin experimental es del ao 1999, la Versin

1.0 es del ao 2000 y la Versin 2.0 (actual) es del ao 2002. Esta ltima versin ha

tenido 7 reediciones desde su aparicin.

5

El tercer grupo de bateras est formada por las Bateras Evala-1, Evala-3 y

Evala-5, cuya Versin experimental es del ao 2001, la Versin 1.0 es del ao 2002

y la Versin 2.0 (actual) es del ao 2004. Esta ltima versin ha tenido 7 reediciones

desde su aparicin.

Y la ltima batera en aparecer ha sido la Batera Evala-7, cuya Versin

Experimental vio la luz el ao 2008 y la Versin 2.0 (actual) es del ao 2010.

1.8. Fecha de la publicacin del test en su adaptacin espaola

No procede

1.9. Fecha de la ltima revisin del test en su adaptacin espaola

Como puede verse en el apartado 1.7 las revisiones de las Bateras Evala se han

realizado por grupos y por versiones, pudiendo diferenciarse 4 grupos ( siendo la

ltima revisin la de la Batera Evala-7 que se ha realizado en el 2010, pero de forma

previa en el ao 2004 se ha realizado la revisin de las Bateras Evala-1, Evala-3 y

Evala-5, en el ao 2002 la de las Bateras Evala-0, Evala-8, Evala-9 y Evala-10

y en el ao 2001 las de las Bateras Evala-2, Evala-4 y Evala-6

1.10. rea general de la variable que pretende medir el test (Comprobar por parte del

editor)

Aptitudes

Habilidades y Rendimiento acadmico

Actitudes

1.11. Breve descripcin de la variable que pretende medir el test

Este instrumento pretende detectar dificultades del aprendizaje escolar pudiendo ser

utilizado en dos formatos de aplicacin: individualizado y en forma screening.

Recogiendo informacin de habilidades de carcter general referidas a elementos

esenciales del nivel del proceso de desarrollo en la edad escolar (cognitivas,

personales y sociales), y de otro, a habilidades especficas relacionadas con

dimensiones del proceso de aprendizaje escolar (lectura, escritura, matemticas,

hbitos de trabajo y estudio y orientacin acadmica).

En el primer grupo, se pretende valorar la existencia o no de dificultades

generalizadas mediante la recogida y anlisis de aquellas variables que participan en

todos los aprendizajes escolares. Por ello, se proponen dos subgrupos informativos, de

un lado, los procesos cognitivos bsicos que participan en todos los aprendizajes como

6

son los procesos atencionales (atencin selectiva y concentrada) y de memoria

(visual y verbal), y los diferentes tipos de operaciones que se encuentran en la

base de la capacidad de razonamiento, como son las categorizaciones, las analogas,

las series, las matrices o el seguimiento de instrucciones. Y de otro, se recoge

informacin bsica de los procesos sociales y afectivos que permiten la adaptacin en

el contexto escolar, tales como la motivacin, el autocontrol, la autoestima o la

adaptacin personal, as como del desarrollo social, en trminos de las conductas pro-

sociales, la adaptacin familiar o las habilidades sociales. Estas habilidades generales

participan de forma intensa en todos los aprendizajes escolares, por lo que sus fallas

evidencian dificultades de aprendizaje de cierto nivel de generalizacin, sobre todo

cuando estn contrastadas con dificultades en el medio escolar.

En el segundo grupo, se pretenden valorar las dificultades especficas que aparecen

en los aprendizajes escolares. Recogindose para ello informacin de los procesos

cognitivos que subyacen en las habilidades/competencias instrumentales. En la

lectura se recoge informacin relativa a: capacidades lingsticas, exactitud, eficacia,

comprensin, velocidad lectora. En la escritura, se recoge informacin sobre la

expresin grfica, la ortografa fontica, la ortografa visual y la redaccin de textos. En

los aprendizajes matemticos, se recoge de numeracin, clculo y resolucin de

problemas.

Finalmente, permite evaluar elementos del estilo de aprendizaje del alumnado,

relativos a la competencia de aprender a aprender y autonoma personal, al aportar

informacin respecto a los hbitos de estudio y estrategias de trabajo, y en los niveles

superiores de intereses profesionales, informacin relevante para la realizacin de

procesos de orientacin acadmica y vocacional.

Una caracterstica esencial es la graduacin y ajuste a cada nivel educativo, desde

Educacin Infantil hasta Bachillerato, lo que permite evaluar de forma sistematizada y

crear una curva de historia de desarrollo y de aprendizaje con el alumnado, de forma

individual o grupal. Esta batera escolar consta de 10 subtests, cada uno de los cuales

incluye diferentes tareas comunes en el desarrollo del currculo escolar. Por lo tanto

puede utilizarse para completar tanto las evaluaciones finales como las iniciales de

cada curso. Adems, sus resultados pueden constituir un punto de arranque bsico

para la toma de decisiones curriculares, tanto a nivel del alumno (refuerzo educativo o

adaptacin curricular), como a nivel de aula (revisin de la programacin) y tambin a

nivel de centro, proporcionando un perfil de capacidades individual y grupal de acuerdo

a las subtests de cada batera.

7

Subtest Variables Evaluadas

EVALA-0 Clasificaciones, Series, Organizacin Perceptiva, Letras y Nmeros, Memoria-Verbal, Copia de Dibujo, Grafomotricidad, Palabras y Frases, Recepcin auditiva y articulacin, Test de la Familia de Corman, Test Palogrfico y Cuestionario a padres.

EVALA-1 Series, Clasificaciones, Organizacin Perceptiva, Memoria-Atencin, Niveles de Adaptacin, Comprensin Lectora, Exactitud Lectora, Ortografa Fontica, Grafa y Expresin Escrita, Ortografa Visual, Numeracin y Clculo.

EVALA-2 Pensamiento Analgico, Organizacin Perceptiva, Clasificacin, Memoria-Atencin, Niveles de Adaptacin, Comprensin Lectora, Exactitud Lectora, Escritura: Grafa y Ortografa, Clculo y Numeracin, y Resolucin de Problemas.

EVALA-3 Reflexividad, Analogas, Organizacin Perceptiva, Memoria-Atencin, Niveles de Adaptacin, Sociomtrico, Exactitud Lectora, Comprensin Lectora, Ortografa Fontica, Grafa y Expresin Escrita, Ortografa Visual, Clculo y Numeracin, y Resolucin de Problemas

EVALA-4 Reflexividad, Pensamiento Analgico, Organizacin Perceptiva, Memoria-Atencin, Niveles de Adaptacin, Comprensin Lectora, Exactitud Lectora, Escritura: Grafa y Ortografa Clculo y Numeracin, y Resolucin de Problemas.

EVALA-5 Reflexividad, Pensamiento Analgico, Organizacin Perceptiva, Memoria-Atencin, Niveles de Adaptacin, Sociomtrico, Exactitud Lectora, Comprensin Lectora, Ortografa Fontica, Grafa y Expresin Escrita, Ortografa Visual, Clculo y Numeracin, y Resolucin de Problemas

EVALA-6 Reflexividad, Pensamiento Analgico, Organizacin Perceptiva, Memoria-Atencin, Niveles de Adaptacin, Comprensin Lectora, Exactitud Lectora, Escritura: Grafa y Ortografa Clculo y Numeracin, y Resolucin de Problemas.

EVALA-7

Atencin-Concentracin, Razonamiento Deductivo, Razonamiento Inductivo, Razonamiento Espacial, Niveles de Adaptacin, Sociomtrico, Eficacia Lectora, Comprensin Lectora, Velocidad Lectora, Ortografa Fontica, Expresin Escrita, Ortografa Visual y Reglada, Clculo y Numeracin, Resolucin de Problemas y Estrategias de Trabajo y Estudio.

EVALA-8

Razonamiento Inductivo, Razonamiento Espacial, Razonamiento Deductivo, Atencin-Concentracin, Niveles de Adaptacin, Encuesta y Sociomtrico, Velocidad Lectora, Eficacia Lectora, Comprensin Lectora Ortografa Visual y Reglada, Expresin Escrita, Clculo y Numeracin, Resolucin de Problemas y Estrategias de Trabajo y Estudio.

EVALA-9

Razonamiento Inductivo, Razonamiento Espacial, Razonamiento Deductivo, Atencin-Concentracin, Niveles de Adaptacin, Encuesta y Sociomtrico, Eficacia Lectora, Velocidad Lectora, Comprensin Lectora Ortografa Visual y Reglada, Expresin Escrita, Clculo y Numeracin, Resolucin de Problemas e Intereses y Preferencias Vocacionales.

EVALA-10

Razonamiento Inductivo, Razonamiento Espacial, Razonamiento Deductivo, Atencin-Concentracin, Niveles de Adaptacin, Encuesta y Sociomtrico, Velocidad Lectora, Ortografa Visual y Reglada, Expresin Escrita, Clculo y Numeracin, Resolucin de Problemas e Intereses y Preferencias Vocacionales.

1.12. reas de aplicacin

Psicologa educativa

1.13. Formato de los tems

Las pruebas de las diferentes bateras Evala tiene hasta 4 tipos de respuesta, que son:

Respuesta dicotmica

Eleccin mltiple

Tipo Likert

Otro: tareas especficas del aprendizaje escolar, dibujos

8

1.14. Nmero de tems

Subtest Nmero de tems

EVALA-0 12 tareas o pruebas (tems)











1.15. Soporte

Papel y lpiz

1.16. Cualificacin requerida para el uso del test de acuerdo con la documentacin

aportada

Nivel B

1.17. Descripcin de las poblaciones a las que el test es aplicable

Las 10 pruebas psicopedaggicas de EVALA son aplicables para todos los cursos

escolares desde Educacin Infantil hasta 4 de la Educacin Secundaria Obligatoria

(ESO). Cada subtest se utiliza como evaluacin final de un curso o como evaluacin

inicial del curso siguiente, como un sistema de evaluacin estandarizada general para

la optimizacin del nivel desarrollo y del aprendizaje. Tambin es efectiva para la

evaluacin de alumnado con problemas (desfases) de desarrollo y de aprendizaje, que

necesiten recibir tratamiento especializado en el mbito educativo o clnico.

Igualmente, puede valer para determinar, de forma aproximativa, trastornos en su

mbito de competencia, aunque stos requeriran instrumentacin especfica.

9

Subtest Poblacin

EVALA-0 Educacin Infantil (2 ciclo)

EVALA-1 1 Ed. Primaria (Evaluacin final)

2 Ed. Primaria (Evaluacin Inicial)










1 ESO (Evaluacin Inicial)

EVALA-7 1 ESO (Evaluacin Final) 2 ESO (Evaluacin Inicial)



EVALA-10 4 ESO (Evaluacin Final)

1 Bachillerato (Evaluacin Inicial)

1.18. Existencia o no de diferentes formas del test y sus caractersticas

La batera slo tiene dos formas, la impresa y la informatizada. En ambas versiones

cumplen los requerimientos exigibles. En el caso de la informatizada se requiere el un

ordenador con sistema Windows y el CD, con la clave aportada por EOS. No existen,

sin embargo, formas abreviadas ni paralelas.

1.19. Procedimiento de correccin

Manual mediante plantilla

Automatizada por ordenador

1.20. Procedimiento de obtencin de las puntuaciones directas

Las puntuaciones directas se obtienen mediante diferentes procedimientos, adaptados

a cada tipo de tarea a evaluar, que en esta batera son de una gran amplitud, en

funcin del nivel educativo: sumatorios de aciertos, medias, rangos de respuesta.

1.21. Transformacin de las puntuaciones

Normalizada

10

1.22. Escalas utilizadas

Centiles

Todas las tareas tienen unas normas muy claras y sencillas de correccin y se corrigen

teniendo en cuenta la repuesta vlida en cada tarea. Se concede un punto por acierto

(A) y se tiene en cuenta el acierto por azar descontndolo. Cada una de las tareas en

cada uno de los niveles refleja la manera de obtener la puntuacin global de esa tarea

e inmediatamente ofrece los baremos por centiles de las puntuaciones directas. En la

correccin informatizada es el programa el que lo realiza.

1.23. Posibilidad de obtener informes automatizados

Si

El informe automatizado (programa PIBE 2.0) incorpora una descripcin interpretativa

y explicativa de las puntuaciones obtenidas por el sujeto o grupo, en cada escala y

aspecto evaluado. Adems incorpora una representacin grfica del perfil de la

evaluacin realizada que presenta un perfil con centiles y puntuaciones directas de

cada sujeto y que clarifica el proceso de toma de decisiones para la intervencin.

Tambin permite emitir informes, trabajar en los diferentes idiomas oficiales de Espaa

y dispone de otras opciones como establecer estadsticas, baremos propios, informes

sociomtricos, etc. que dotan al programa de gran complejidad.

1.24. Oferta por parte del editor de un servicio para la correccin y/o elaboracin de

informes

S

1.25. Tiempo estimado para la aplicacin del test

En aplicacin individual: EVALA-0: 2 horas

EVALA-1, 2, 3, 4, 5 y 6: 2 horas y media

EVALA-7, 8, 9 y 10: 3 horas.

En aplicacin colectiva: EVALA 1, 2, 3, 4, 5 y 6: 3 horas

EVALA 7, 8, 9 y 10: 3 horas y media.

1.26. Documentacin aportada por el editor

Manual

Programa PIBE informatizado con manual.

Otra: hojas de respuesta del alumnado; cuadernillos de respuesta de familias;

cuadernillos

11

1.27. Precio de un juego completo de la prueba

10 cuadernillos y manual: 42 Euros

Slo el Manual: 15 Euros

1 CD: 50 Euros

1.28. Precio y nmero de ejemplares del paquete de cuadernillos (Comprobar por parte

del editor)

10 cuadernillos: 27 Euros

1.19. Precio y nmero de ejemplares del paquete de hojas de respuesta

No existen hojas de respuestas como tal, ya que el Cuadernillo es fungible

1.20. Precio de la correccin y/o elaboracin de informes por parte del editor

10.45 Euros.

1.21. Bibliografa bsica acerca del test aportada en la documentacin

Se presenta una serie de referencias bibliogrficas que aparecen en todas las

bateras, en concreto 18 desde el ao 1979 hasta el 2000, sobre todo de manuales

relacionados con la evaluacin e intervencin psicopedaggica y de las dificultades de

aprendizaje.

12

2. VALORACIN DE LAS CARACTERSTICAS DEL TEST

Aspectos generales

Contenido Valoracin Puntuacin

2.1. Calidad de los materiales del test Buena 4

2.2. Calidad de la documentacin aportada Adecuada 3

2.3. Fundamentacin terica Adecuada 2,5

2.4. Adaptacin del test No procede

2.5. Calidad de las instrucciones Buena 3,5

2.6. Facilidad para comprender la tarea Excelente 4,5

2.7. Facilidad para registrar las respuestas Buena 4

2.8. Calidad de los tems (aspectos formales) Excelente 4,5

2.9. Datos sobre el anlisis de los tems Buena 3,5

Validez de contenido


2.10. Calidad de la representacin del contenido o dominio

Adecuada 3

2.11. Consultas a expertos No se aporta

Validez de constructo


2.12. Diseos empleados Anlisis Factorial

Exploratorio

2.13. Tamao de las muestras Buena 4

2.14. Procedimiento de seleccin de las muestras Incidental

2.15. Correlaciones del test con otros test similares No se aporta

2.16. Calidad de los test empleados como criterio o marcador

No se aporta

2.17. Datos sobre el sesgo de los tems No se aporta

13

Comentarios sobre la validez de constructo

Procedimiento de seleccin de las muestras. Se utilizan muestras disponibles de

diferentes centros espaoles de diferentes provincias.

Validez predictiva

Contenido Contenido Puntuacin

2.18. Diseo de seleccin del criterio No se aporta

2.19. Tamao de las muestras No se aporta

2.20. Procedimiento de seleccin de las muestras No se aporta

2.21. Correlaciones del test con los criterios No se aporta

Comentarios sobre la validez predictiva

En cada una de las pruebas se utilizan procedimientos diferentes: para el subests

EVALA-0 se realiz una estudio piloto con 120 sujetos y una prueba pre-experimental

con cerca de 1000 alumnos de Educacin Infantil. En los subtests EVALA 1,2,3 y 5 se

realizaron una prueba pre-experimental y experimental tras el estudio piloto, para el

establecimiento de los baremos. Para el resto de pruebas se realizaron estudios

experimentales con muestras amplias a partir de la cuales se construyeron los baremos.

Las muestras fueron seleccionadas en funcin del nivel educativo, pero no queda clara la

pertenencia o no a la comunidad de Andaluca.

Comentarios generales sobre validez

El proceso de validez en general tiene un buen diseo con diferentes fases, prueba piloto,

pre-experimental y experimental, adems de unos tamaos muestrales grandes. La

Batera EVALA es consistente, y utiliza tcnicas al uso propios del momento histrico en

el que se construye. Sin embargo se echa en falta la comparacin de los diferentes

subtests con otros instrumentos de evaluacin, la mejor de la validez predictiva mediante

la eleccin de variables criterio que hagan ms robusta la validez de la prueba y la mejora

de la validez de constructo mediante la realizacin de anlisis factoriales confirmatorios o

estudios correlacionales. Asimismo es necesaria la eliminacin del sesgo muestral, ya que

no se especfica el procedimiento de seleccin de la muestra y la poblacin objeto de

estudio debera ser descrita con ms detalle.

14

Fiabilidad


2.22. Datos aportados sobre fiabilidad Aceptable 3

Equivalencia formas paralelas



2.24. Coeficientes de equivalencia No se aporta

Consistencia interna


2.25. Tamao de las muestras Bueno 4

2.26. Coeficientes de consistencia No se aporta

Estabilidad (test-retest)



2.28. Coeficientes de estabilidad No se aporta

Comentarios generales sobre fiabilidad

La fiabilidad es aceptable, pero sera aconsejable que en futuras versiones se aportasen

datos sobre la fiabilidad test-retest, para comprobar el grado de estabilidad de las

puntuaciones en el tiempo.

Baremacin


2.29. Calidad de las normas Buena 3,5

2.30. Tamao de las muestras Excelente 5

2.31. Procedimiento de seleccin de las muestras Incidental

15

Comentarios generales sobre baremacin

Los baremos son muy especficos, ya que se presentan para cada una de las tareas o

pruebas de cada una de los subtests, lo que permite mostrar un perfil preciso de los

diferentes constructos evaluados y no slo una puntuacin global. Los tamaos de las

muestras son grandes, si bien no se especifica el procedimiento de seleccin, por lo que

cabe inferir que se trata de un muestreo incidental. Tal vez por ello los baremos pueden no

ser totalmente representativos a nivel nacional, al estar localizados en reas geogrficas

concretas. Este ltimo aspecto resulta relevante, teniendo en cuenta las diferencias entre

las comunidades en relacin con el currculo escolar. Estos aspectos han de tenerse en

cuenta en futuras versiones de la prueba.

informaciÓn sobre prueba evalua

Documents