servicio nacional de aprendizaje senacompromiso.sena.edu.co/documentos/docs_pdf/... · lista de...

PROCESO DE GESTIÓN POR COMPETENCIAS PARA LAS CUALIFICACIONES

INSTRUCTIVO PARA LA CONSTRUCCIÓN DE ÍTEMS E INDICADORES DE EVALUACIÓN DE COMPETENCIAS LABORALES

Versión 01

Servicio Nacional de Aprendizaje SENA

Dirección Sistema Nacional de Formación para el Trabajo

Bogotá D. C., Febrero de 2014

SERVICIO NACIONAL DE APRENDIZAJE SENA SISTEMA INTEGRADO DE GESTIÓN


Este documento impreso se considera copia no controlada 2

TABLA DE CONTENIDO

OBJETIVO:..................................................................................................................................................4 ALCANCE: ..................................................................................................................................................4 DIRIGIDO A: ...............................................................................................................................................4 1. GENERALIDADES ...............................................................................................................................4 1.1. Definición de los Instrumentos de Evaluación (IE) ......................................................................4 1.2. Principios de los IE .......................................................................................................................4 1.3. Características de los IE................................................................................................................5 1.4. Partes de los IE .............................................................................................................................5 2. ETAPAS DE CONSTRUCCIÓN DE IE ....................................................................................................8 2.1. Primera Etapa: Alistamiento ........................................................................................................8 2.2. Segunda Etapa: Planeación ..........................................................................................................9 2.2.1. Matriz de Planeación para Evaluar Conocimiento .......................................................................9 2.2.2. Matriz de Planeación para Evaluar Desempeño ....................................................................... 25 2.2.3. Matriz de Planeación para Evaluar Producto............................................................................ 27 2.3. Tercera Etapa: Construcción ..................................................................................................... 29 2.3.1. Orientaciones para la Construcción de Ítems ........................................................................... 29 2.3.2. Orientaciones para la Construcción de Listas de Chequeo del Desempeño (LD) ..................... 36 2.3.3. Orientaciones para la Construcción de Listas de Chequeo del Producto (LP) .......................... 39 3. CUARTA ETAPA: VERIFICACIÓN ..................................................................................................... 41 3.1. Verificación Técnica y Metodológica de los Ítems e Indicadores de Evaluación ...................... 41 4. QUINTA ETAPA: VALIDACIÓN ........................................................................................................ 42 4.1. Validación de Ítems ................................................................................................................... 42 GLOSARIO ............................................................................................................................................... 44 ABREVIATURAS....................................................................................................................................... 48 BIBLIOGRAFÍA ......................................................................................................................................... 49 BIBLIOGRAFIA SECUNDARIA................................................................................................................... 52




FORMATOS Formato GCC-F-030. Cuestionario Formato GCC-F-031 Hoja de Respuesta Formato GCC-F-034. Clave de Respuesta Formato GCC-F-032. Lista de Chequeo del Desempeño/Producto Formato GCC-F-035. Matriz de Planeación para Evaluar Conocimiento Formato GCC-F-036. Matriz de Planeación y construcción de indicadores para Evaluar Desempeño Formato GCC-F-037. Matriz de Planeación y construcción de indicadores para Evaluar Producto Formato GCC-F-038. Verificación Técnica de Ítems Formato GCC-F-039. Verificación Técnica de Indicadores Formato GCC-F-040. Verificación Metodológica de Ítems Formato GCC-F-041. Verificación Metodológica de Indicadores Formato GCC-F-042. Validación de Cuestionarios

TABLAS Tabla 1. Matriz de Planeación para Evaluar Conocimiento Tabla 2. Tiempo Asignado por Formato de Ítem según Nivel de Pensamiento Tabla 3. Codificación del Ítem Tabla 4. Matriz de Planeación para Elaborar Indicadores de Desempeño Tabla 5. Codificación del Indicador de Desempeño Tabla 6. Matriz de Planeación para Elaborar Indicadores de Producto Tabla 7. Codificación del Indicador de Producto Tabla 8. Matriz para la Construcción de Ítems Tabla 9. Combinación de Opciones de Respuesta Tabla 10. Matriz para Construcción de Indicadores de Desempeño Tabla 11. Estructura Gramatical para Indicadores de Desempeño Tabla 12. Matriz para Construcción de Indicadores de Producto Tabla 13. Estructura Gramatical para Indicadores de Producto Tabla 14. Abreviaturas BNI GRÁFICOS

Gráfico 1. Etapas para la Construcción de Instrumentos de Evaluación

Gráfico 2. Procesos de Pensamiento

Gráfico 3. Representación del ítem




OBJETIVO:

Establecer parámetros para la construcción de instrumentos de evaluación de competencias laborales, que contribuyan a la calidad, validez, y confiabilidad de la Evaluación y Certificación de Competencias Laborales (ECCL) del SENA como Ente certificador en Colombia.

ALCANCE:

Esta metodología define criterios de medición, validación y confiabilidad de los instrumentos de evaluación con base a una ruta clara y definida de alistamiento, planeación, construcción, verificación y validación desde parámetros particulares de la Evaluación y Certificación de Competencias Laborales.

DIRIGIDO A:

El experto metodológico asignado por el centro evaluador para garantizar instrumentos de evaluación que permitan valorar las evidencias requeridas por la NCL con la calidad, validez y confiabilidad que estos exigen.

1. GENERALIDADES

1.1. Definición de los Instrumentos de Evaluación (IE)

Son herramientas de medición que utiliza un evaluador para valorar las evidencias de conocimiento, desempeño y producto requeridas en una Norma de Competencia Laboral para determinar la competencia de un candidato.

1.2. Principios de los IE

El diseño de los instrumentos de evaluación se soporta en los siguientes principios fundamentales: Validez: Un instrumento es válido si mide lo que se pretende medir. El grado de validez de un instrumento se refiere a la exactitud con la cual mide la cualidad o atributo que se quiere medir con él. En consecuencia, la validez de un instrumento para evaluar una NCL está directa y exclusivamente relacionada con las evidencias de desempeño, conocimiento o producto que la norma requiere. Confiabilidad: Capacidad que tiene el instrumento para generar resultados cualitativamente similares, independientemente del momento y el evaluador que lo aplique. Es decir, si aplicamos la prueba en diferentes momentos, se deben obtener los mismos resultados.




1.3. Características de los IE

La evaluación y certificación de competencias laborales se soporta en los instrumentos de evaluación teniendo como referente la NCL y se caracterizan por:

Ser claros, lógicos y concisos de manera que al ser aplicados, midan la competencia del candidato para desempeñarse en una función productiva.

Definir adecuadamente lo que se pretende medir, centrándose exclusivamente en lo que pide la NCL.

Identificar y caracterizar al sujeto. Conocer el perfil de los candidatos que desempeñan la función en procura de garantizar pertinencia en los instrumentos.

Tener en cuenta los actores que participan en la evaluación. (Experto Técnico Constructor, Experto Metodológico, Evaluador y Candidato).

Proporcionar resultados que permitan al evaluador emitir un juicio evaluativo sobre la competencia laboral verificada del candidato.

Contribuir al cumplimiento de los principios de evaluación y certificación de la competencia laboral.

1.4. Partes de los IE

Los instrumentos de evaluación del SENA deben cumplir con un protocolo documental que garantice la unidad técnica y estandarización a través de formatos únicos y codificados para el cuestionario, la hoja de respuestas, la hoja clave de respuestas, listas de chequeo (desempeño y producto) que conjuntamente con el acta de construcción y aval, conformaran los Componentes de un Kit. Componentes de un KIT:

Cuestionario (C) Formato GCC-F-030.

Hoja de Respuesta. (HR) Formato GCC-F-031.

Clave de Respuesta. (CR) Formato GCC-F-034.

Lista de Chequeo Desempeño/Producto. (LD) Formato GCC-F-032

Matriz de Planeación y Construcción de items para evaluar conocimiento. GCC-F-035

Matriz de Planeación y Construcción de Indicadores para evaluar desempeño. GCC-F-036

Matriz de Planeación y Construcción de Indicadores para evaluar producto. GCC –F-O037

La estructura de estos formatos cuenta con cuatro partes claramente identificables: encabezado (código y nombre del formato), datos de identificación, cuerpo del instrumento y concepto de la evaluación.

A. ENCABEZADO:




De manera general para todos los formatos de instrumentos, se utiliza este encabezado y solo difiere el nombre del instrumento, por ejemplo; cuestionario, evaluación de conocimientos. Lista de chequeo del desempeño, evaluación del desempeño. Lista de chequeo del producto, evaluación del producto.

NOMBRE DEL COMPONENTE FXX-XXX-XXX / XX-XX Versión X Proceso: Gestión por Competencias para las Cualificaciones Procedimiento: Evaluación y Certificación de Competencias Laborales

“LISTA DE CHEQUEO” (EVALUACIÓN DEL DESEMPEÑO O EL PRODUCTO)

CÓDIGO: DATOS DE IDENTIFICACIÓN:

De manera general para todos los formatos de instrumentos, incluyen los datos de aplicación de la prueba, datos de la norma de competencia y titulación o perfil ocupacional. Los datos del candidato solo se especifican en los formatos de LD, LP y Hoja de Respuestas del Cuestionario (HR).

DATOS DEL CANDIDATO

PRIMER APELLIDO:

SEGUNDO APELLIDO:

NOMBRE:

CLASE

NÚMERO DOCUMENTO LUGAR EXPEDICIÓN

FECHA APLICACIÓN Y ENTREGA DE RESULTADOS: DÍA: MES: AÑO:

LUGAR DE EVALUACIÓN :

REGIONAL: CÓDIGO:

CENTRO DE FORMACIÓN:

CÓDIGO:

NOMBRE EMPRESA EVALUADORA:

NOMBRE EVALUADOR:

NORMA DE COMPETENCIA LABORAL A EVALUAR

CÓDIGO: VERSIÓN: NOMBRE:

TITULACIÓN O PERFIL OCUPACIONAL DE COMPETENCIA LABORAL A LA QUE PERTENECE LA NORMA

CÓDIGO: VERSIÓN: NOMBRE:

PROYECTO:




LISTA DE CHEQUEO PARA EVALUAR: DESEMPEÑO PRODUCTO

B. CUERPO DEL INSTRUMENTO: Debe contener el número total de ítems que componen el cuestionario o de indicadores en las listas de chequeo, el tiempo máximo de aplicación u observación y una breve instrucción para el diligenciamiento de la prueba.

C. CONCEPTO DE LA EVALUACIÓN:

Nº

MOMENTOS DE OBSERVACIÓN EXIGIDOS EN LA NORMA

1° 2° 3°

OBSERVACIONES

Fecha:

Fecha: Fecha:

Lugar:

Lugar: Lugar:

Hora:

Hora: Hora:

INDICADORES DE EVALUACIÓN

CUMPLE

CUMPLE

CUMPLE

SI NO SI

NO SI

NO

Señor evaluador: Si una norma exige más de 3 momentos de Observación, debe registrar esta exigencia en esta columna de Observaciones y conservar evidencia de la otra Lista de Chequeo aplicada




Aquí se incluyen, para los formatos de LD, LP y HR, las valoraciones cualitativas: cumple o aún no cumple y la identificación de las competencias faltantes. En los formatos: clave de respuestas y el cuestionario no se incluye el concepto de la evaluación. JUICIO DE LA COMPETENCIA: CUMPLE AÚN NO CUMPLE

IDENTIFICACIÓN DE LA(S) COMPETENCIA(S) FALTANTE(S) -ANÁLISIS DEL EVALUADOR-

___________________________________ ________________________________ FIRMA DEL CANDIDATO FIRMA DEL EVALUADOR

2. ETAPAS DE CONSTRUCCIÓN DE IE

Grafico 1. Etapas para la Construcción de Instrumentos de Evaluación Fuente: Construcción ENIE

2.1. Primera Etapa: Alistamiento




El líder de Evaluación y Certificación de Competencias Laborales del centro, determina los recursos necesarios para construir los instrumentos de la NCL (Humanos, físicos, materiales, tecnológicos y normativos).

El líder de Evaluación y Certificación de Competencias Laborales del centro verifica el nivel de la

titulación o perfil ocupacional a la que están asociadas las normas de competencia laboral, con

el fin de establecer los perfiles de los expertos requeridos.

El líder de Evaluación y Certificación de Competencias Laborales del centro convoca y conforma equipos de expertos técnicos de construcción de IE. Se recomienda que los expertos técnicos constructores, sean en número impar. (Mínimo 3, máximo 5).

Los expertos técnicos verificadores, en número impar, pueden ser vinculados mediante alianzas

con empresas, organizaciones y/o gremios, o contratados por el SENA.

El experto metodológico de la construcción de IE, es el responsable de orientar la construcción y

verificación metodológica de ítems e indicadores.

El líder de Evaluación y Certificación de Competencias Laborales del centro elabora el cronograma de actividades según etapas para la construcción de IE.

2.2. Segunda Etapa: Planeación

La calidad de los instrumentos de evaluación depende de una buena planeación. Si se realiza un análisis exhaustivo relacionando cada uno de los componentes normativos de la NCL, se puede definir la competencia del candidato evaluado de manera que se refleje a través de los ítems para evaluar el conocimiento y los indicadores de evaluación de desempeño y producto. Para esto el Equipo Nacional de Instrumentos de Evaluación (ENIE) ha definido tres formatos:

Matriz de Planeación y construcción de ítems para Evaluar Conocimiento. Formato GCC-F-035. Matriz de Planeación y construcción de indicadores para Evaluar el Desempeño. Formato GCC-F-036. Matriz de Planeación y construcción de indicadores para Evaluar el Producto. Formato GCC-F-037.

2.2.1. Matriz de Planeación para Evaluar Conocimiento

Para la construcción de ítems, se diseñó como herramienta metodológica la Matriz de Planeación y Construcción para evaluar el Conocimiento. Esta matriz permite planear los ítems obligatorios de las evidencias de conocimiento requeridas en la Norma de Competencia Laboral y cubrir el 100% de los componentes en relación directa.

La matriz se desarrolla interrelacionando ejes interdependientes que involucran los componentes de la NCL (evidencias de conocimiento requeridas, conocimientos y comprensiones esenciales, criterios de desempeño y rangos de aplicación) hasta el número, ruta y formatos de ítems y habilidades del pensamiento intencionado por el constructor, para posteriormente en la etapa de construcción, desarrollar los ítems para la evaluación.




En la Matriz de Planeación y Construcción para elaborar ítems, se registran los datos de identificación de la matriz. Si la NCL se encuentra en diferentes Titulaciones y estas son de diferente nivel de cualificación, para cada una de ellas se debe elaborar ítems acordes a las habilidades de pensamiento requeridas para el nivel. Una vez realizada esta planeación se procede a construir los ítems en la Etapa de Construcción.

Tabla 1. Matriz de Planeación para Evaluar Conocimiento Fuente: Construcción ENIE

La matriz tiene la siguiente estructura por columnas:

1. Evidencia de conocimiento: se transcribe tal como está registrada en la norma de competencia

laboral.

2. Conocimientos Esenciales: se toma como referencia la evidencia de conocimiento, se relacionan solo los conocimientos esenciales asociados.

3. Criterios de desempeño: con base en los conocimientos esenciales se extraen de cada elemento de competencia de la NCL los diferentes criterios de desempeño asociados a este conocimiento esencial. El número final de ítems va a depender de la relación sistemática de estos factores.

4. Rango de Aplicación: se referencian los rangos de aplicación asociados a la evidencia de conocimiento.

5. Numero de ítems obligatorios: teniendo en cuenta la relación entre conocimientos esenciales, criterios de desempeño y rangos de aplicación se establece el número de ítems a construir.

6. Numero de ítems obligatorios por la constante (3): teniendo en cuenta el número de ítems necesarios se multiplica por la constante (3) lo que dará como resultado el número final de ítems a construir.




7. Habilidades de pensamiento: se establecen las habilidades del pensamiento requeridas al candidato por la función laboral las cuales están directamente relacionadas con el nivel de cualificación de la titulación laboral y perfil ocupacional. Para esta etapa se toma como referente la Taxonomía de los Objetivos Educativos de Benjamín Bloom.

Gráfico 2. Procesos del Pensamiento. Fuente: Construcción ENIE

Cada categoría de la taxonomía promueve operaciones mentales diferentes a través de indicadores de pensamiento e instrucciones específicas. Las categorías de reconocimiento, comprensión, aplicación y análisis permiten medir procesos de pensamiento concretos, mientras que las categorías de evaluación y creación, por su alto grado de subjetividad, requieren de preguntas abiertas al pensamiento del evaluado, por ello no se recomiendan para los procesos de evaluación y certificación de competencias laborales. Taxonomía de los objetivos educativos de benjamín Bloom: Generalidades sobre los niveles de pensamiento desde Taxonomía de Los objetivos de la educación de Benjamín Bloom.

La taxonomía del pensamiento se basa en la idea de que las operaciones mentales pueden clasificarse en seis niveles de complejidad creciente en donde cada nivel depende de la capacidad del sujeto para desempeñarse en el nivel o los niveles precedentes, es decir, se basa en el supuesto que un sujeto, para ser capaz de evaluar, tiene que disponer de la información necesaria, comprender esa información, ser capaz de aplicarla, de analizarla, de sintetizarla y, finalmente de




evaluarla. La taxonomía no es un mero esquema de clasificación, sino un intento de ordenar jerárquicamente los procesos cognitivos. Existen seis niveles en la Taxonomía de Bloom y las preguntas correspondientes a cada uno de ellos, requieren que la persona que responda utilice un tipo diferente de proceso del pensamiento. Las palabras claves que se usan y las preguntas que se hacen pueden ayudar en establecer y estimular el pensamiento crítico, especialmente en los niveles superiores. Aunque la taxonomía es una herramienta familiar de los educadores y la gran mayoría de los test académicos contemporáneos se basan en sus postulados, se debe mencionar que en el año 2000 Lorin Anderson, un antiguo estudiante de Bloom y David Krathwohl, uno de los editores de la taxonomía original, ajustaron la nueva versión ante la insistencia de las comunidades académicas de educación, investigadores psicopedagogos y los nuevos editores. La nueva edición fue denominada Taxonomía para el Aprendizaje, Enseñanza y Evaluación. Desde esta perspectiva constructivista del aprendizaje se hace hincapié en cómo los alumnos cognitivamente procesan nuevos conocimientos para posteriormente reflejarlos en el entorno estableciendo acciones metacognitivas. Lo anterior permite entrever que se posicionan los sujetos desde una configuración activa donde la acumulación de procesos cognitivos se extrapola al contexto. Ejemplos:




8. Formatos de ítems: Permiten establecer correspondencia entre el nivel de pensamiento y las características de la población. Con ello se garantizan las condiciones de la prueba en términos de confiabilidad. En la actualidad el formato más utilizado es el de Selección Múltiple con Única (SMUR) porque es más versátil y cuenta con mayor equilibrio estadístico, por ello son un recurso para estudiar amplias poblaciones de candidatos. Los siguientes formatos de ítems pueden considerarse variaciones del grupo Selección Múltiple con Única (SMUR) y se clasifican en:

a. Jerarquización (J) b. Localización o Identificación (L.I) c. Condiciones si-entonces (C.S.E) d. Ordenamiento con Única Respuesta (O.U.R) e. Apareamiento (A) f. Verdadero Falso Múltiple (V.F.M) g. Análisis de Relaciones (A.R) h. Análisis de Postulados (A.P)




a. Jerarquización (J) Son útiles para evaluar la capacidad de ordenamiento lógico: cronológico, jerárquico, secuencial. Para la construcción se requiere contar con un material suficientemente homogéneo referido a un solo tema, período, espacio geográfico, etcétera. Nivel de pensamiento: reconocimiento. Ejemplo:

b. Localización e Identificación (L.I)

Se utilizan a través de dibujos, gráficas, esquemas, mapas, entre otros, en los cuales el candidato identifica órganos, capitales, cifras, fenómenos, procesos, etcétera. Se recomienda que las imágenes utilizadas cuenten con buena resolución, evitar exceso de sombras, rayas y colores. Se debe registrar la fuente de donde fue tomada la imagen. Nivel de pensamiento: reconocimiento. Ejemplo:




Fuente: tecnoculto.com

c. Condiciones si-entonces (C.S.E) Su utilidad es determinar la consecuencia correcta de una o más condiciones presentes en el enunciado mediante una situación problemática particular. Nivel de pensamiento: comprensión Instrucciones para la construcción: En el enunciado se detalla un lugar donde ocurre un fenómeno, acción, suceso, etc. que posteriormente se problematiza. El candidato debe determinar la consecuencia correcta. Ejemplo: Si en A sucede B, pero no C, entonces D (siendo D la clave de respuesta).




Ejemplo:

d. Ordenamiento con Única Respuesta

Es útil para evaluar la capacidad de ordenamiento lógico, cronológico, jerárquico, secuencial dentro de una labor, acción, operación, procedimiento etcétera. Nivel de pensamiento: comprensión Ejemplo:




e. Apareamiento.

Es útil para facilitar la relación entre dos o más columnas de palabras, símbolos, frases, oraciones, las cuales se deben asociar o relacionar a través de líneas, letras, números o símbolos. La columna que contenga los enunciados, debe contener al menos tres respuestas más que la columna de los ítems y en las opciones de respuesta las relaciones de la clave, deben repetirse en otra de las opciones.

Nivel de pensamiento: comprensión Ejemplo:




f. Verdadero Falso Múltiple (V.F.M)

Es útil para promover el análisis de las informaciones presentadas en el enunciado y el candidato decide si una, todas o ninguna de las dos o más condiciones o afirmaciones presentadas en el tronco del ítem es (son) correcta (s). Este tipo de ítem por sus características no permite identificar el reactivo y clasificar distractores en las opciones de repuesta ya que está predeterminado por el formato. Nivel de pensamiento: análisis

g. Análisis de relaciones.

Es útil para facilitar el análisis a partir de una afirmación y una razón unidas por la palabra PORQUE. El candidato debe analizar y decidir la veracidad o falsedad de cada una de ellas y si existe o no relación de causalidad, entre la razón y la afirmación.

Nivel de pensamiento: análisis




Instrucciones para la construcción: El enunciado consta de tres partes. La primera es una afirmación sobre un hecho, fenómeno, teoría, axioma, etc. La segunda es un conector lingüístico de causalidad PORQUE y la tercera es una razón. El candidato debe establecer la verdad de la afirmación y la razón y determinar si la razón es una justificación de la afirmación. Este tipo de ítem por sus características no permite identificar el reactivo y clasificar distractores en las opciones de repuesta ya que está predeterminado por el formato.




h. Análisis de postulados.

Es útil para el análisis de la información dado que consta de un problema y dos informaciones identificadas con los números I y II. Se debe decidir si las informaciones son necesarias y suficientes para solucionar el problema. Este tipo de ítem por sus características no permite identificar el reactivo y clasificar distractores en las opciones de repuesta ya que está predeterminado por el formato. Nivel de pensamiento: análisis Instrucciones para la construcción: El enunciado se construye a partir de una afirmación sobre una situación, teoría, fenómeno, hecho, etc. que se problematiza. Para la solución del problema se entregan dos alternativas de solución identificadas con I y II, donde el candidato debe determinar si el problema se soluciona con ambas, con I, con II o con ninguna.




9. Tiempo de respuesta del ítem: Permite estimar el tiempo total que se le asigna al candidato para responder la prueba. Este se determina según el formato de ítem y el nivel de pensamiento seleccionado por el constructor.

Tabla 2. Tiempo de Respuesta Asignado por Formato de Ítem según Nivel de Pensamiento. Fuente: Construcción ENIE




10. Ruta del ítem: Codificación que da cuenta de la trazabilidad del ítem dentro de la prueba de

conocimiento. Indica la secuencia de relaciones entre el ítem de conocimiento del elemento de la NCL, los criterios de desempeño, los rangos de aplicación específicos asociados y el consecutivo del ítem a construir.

Tabla 3. Codificación del Ítem Fuente: Construcción ENIE

Nota: cuando la norma de competencia laboral no esté relacionada con una titulación se deben dejar tres ceros, así: T000_

2.2.2. Matriz de Planeación para Evaluar Desempeño

Para la construcción de indicadores, se diseñó como herramienta metodológica la Matriz de planeación y construcción para elaborar indicadores de desempeño. Esta matriz permite planear los indicadores mediante las evidencias de desempeño requeridas en la Norma de Competencia Laboral cubriendo el 100% de los componentes en relación directa. Se realizan interrelacionando los criterios de desempeño, los conocimientos y comprensiones esenciales y los rangos de aplicación para posteriormente, en la etapa de construcción, plantear las características o atributos del desempeño que se deben cumplir al momento de la evaluación.




Tabla 4. Matriz de Planeación para Elaborar Indicadores de Desempeño. Fuente: Construcción ENIE

La matriz contiene en sus columnas la información que se tomará como insumo para la construcción de indicadores de desempeño. A continuación se detalla cada columna de esta matriz:

1. Evidencias Requeridas de Desempeño: en esta columna se registran una a una las evidencias de

desempeño objeto de la evaluación, definidas en cada Elemento de la NCL.

2. Criterios de Desempeño: en esta columna se transcriben los criterios definidos en cada elemento de la NCL, que estén sistemáticamente asociados con la evidencia a evaluar.

3. Conocimientos esenciales: en esta columna se registran los conocimientos esenciales definidos

en el elemento de competencia asociados al criterio de desempeño.

4. Rango de Aplicación: en esta columna se registran los rangos de aplicación o escenarios de trabajo, definidos para el elemento de competencia de la NCL y asociados a los criterios de desempeño; asociando dichos rangos de aplicación a las características o atributos identificados para el desempeño.

5. Ruta del indicador de evaluación del desempeño: Codificación que da cuenta de la trazabilidad de cada indicador dentro del instrumento de evaluación del desempeño. Indica la secuencia de relaciones entre el elemento de la NCL, los criterios de desempeño, los rangos de aplicación específicos asociados y el consecutivo del indicador a construir.




Ejemplo:

Tabla 5. Codificación del Indicador de Desempeño Fuente: Construcción ENIE


Se registran además los datos de identificación del Nivel de la titulación laboral a la que pertenece la NCL objeto de construcción de IE. Si la NCL se encuentra en diferentes Titulaciones y estas son de diferente nivel de cualificación, para cada una de ellas se debe elaborar indicadores de evaluación del desempeño acordes a las habilidades requeridas para el nivel. Una vez realizada esta planeación se procede a construir los indicadores de evaluación del desempeño en la siguiente Etapa de Construcción de Listas de Chequeo del Desempeño.

2.2.3. Matriz de Planeación para Evaluar Producto

Para la construcción de indicadores se diseñó como herramienta metodológica la “Matriz de planeación y construcción para elaborar indicadores de producto”. Esta matriz permite planear los indicadores mediante las evidencias de producto requeridas en la Norma de Competencia Laboral cubriendo el 100% de los componentes en relación directa.




Tabla 6. Matriz de Planeación para Elaborar Indicadores de Producto Fuente: Construcción ENIE

La matriz contiene en sus columnas la información que sirve como insumo para la construcción de los indicadores de producto. A continuación se detalla cada columna de esta matriz:

1. Evidencias Requeridas de Producto: en esta columna se registran las evidencias de producto

objeto de la evaluación solicitada en cada Elemento de la NCL. De cada uno de los productos a valorar, se caracteriza la naturaleza de los mismos: intangible (ejemplo: servicios), tangibles (ejemplo: documentos, objetos o resultados observables y medibles del trabajo).

2. Criterios de Desempeño: en esta columna se transcriben los criterios definidos en cada

elemento de la NCL, que estén sistemáticamente asociados con la evidencia a evaluar.

3. Conocimientos Esenciales: en esta columna se registran los conocimientos esenciales definidos en el elemento de competencia asociados al criterio de desempeño.

4. Rango de Aplicación: en esta columna se registran los rangos de aplicación definidos para el elemento de competencia de la NCL, asociando dichos rangos de aplicación a las características identificadas para el producto.

5. Ruta del indicador de evaluación del producto: Codificación que da cuenta de la trazabilidad de cada indicador de evaluación dentro de la lista de chequeo de producto. Indica la secuencia de relaciones entre el elemento de la NCL, los criterios de desempeño, los conocimientos esenciales, los rangos de aplicación específicos asociados y el consecutivo del indicador a construir.




Ejemplo:

Tabla 7. Codificación del Indicador de Producto Fuente: Construcción ENIE


Se registran además los datos de identificación del Nivel de la titulación laboral a la que pertenece la NCL objeto de construcción de IE. Si la NCL se encuentra en diferentes Titulaciones y estas son de diferente nivel de cualificación, para cada una de ellas se debe elaborar indicadores de evaluación del producto. Una vez realizada esta planeación se procede a construir los indicadores de evaluación del producto en la siguiente Etapa de Construcción de Listas de Chequeo del Producto.

2.3. Tercera Etapa: Construcción

2.3.1. Orientaciones para la Construcción de Ítems

Una vez desarrollada la Matriz de Planeación para evaluar el Conocimiento el experto técnico diligencia las siguientes columnas en la sección de construcción:




Tabla 8. Matriz para Construcción de Ítems Fuente: Construcción ENIE

11. Tipo de ítem: Hace referencia al carácter de obligatoriedad o contingencia de los ítems en la estructura de la prueba. Por obligatorio se entiende el ítem que se ha establecido en la matriz como necesario o indispensable para evaluar el conocimiento a criterio del experto constructor. Por contingencia se entiende el ítem que permite variar el uso de aplicaciones para valorar el conocimiento.

Conceptualización de los componentes del ítem:

Ítem: Unidad básica de medida y elemento constitutivo de un test, prueba o instrumento de conocimiento.

Características del ítem:

Los ítems son unidimensionales lo que significa que deben pedir cuenta de un solo constructo o

conocimiento esencial.

Cada uno de los ítems deben gozar de absoluta independencia para ser resueltos. Un ítem no

debe contener la respuesta de otro o depender de otro contenido para ser resuelto.

El nivel de dificultad de un ítem debe corresponder a la realidad del contexto en el que se

desarrolla la tarea o acción del candidato de acuerdo con la acción descrita en el elemento y al

nivel de escolaridad.

Un ítem debe contener toda la información necesaria para ser resuelto. La carencia de

información generalmente conduce al evaluado a intuir o suponer datos que pueden alterar la

respuesta.




La información suministrada en el ítem debe ser la necesaria y suficiente. El exceso de

información exige en los candidatos aumentar los niveles de comprensión, competencia que no

se pretende medir con la prueba.

El uso de abreviaturas y siglas de sistemas, síntomas, patologías, drogas, etc. pueden incidir en

la mala respuesta de un candidato, cuando se excede en su utilización.

Evitar cualquier señal que conduzca al evaluado a la respuesta correcta aún cuando no posea el

conocimiento. Estas señales pueden ser: repetición de palabras en el enunciado y en la clave de

respuesta, uso de lenguaje técnico en la clave de respuesta y lenguaje no técnico en los

distractores, longitud de la clave de respuesta diferente a la de los distractores, opciones de

respuesta descontextualizadas y sin correspondencia sintáctica con el enunciado.

12. Enunciado: Parte del ítem que suministra la información necesaria y suficiente, hace referencia a un conocimiento contextualizado a través de variables situacionales o problemáticas. Este puede incluir afirmaciones, estudios de caso, situaciones hipotéticas, gráficas, tabla de datos, fotografías, esquemas, figuras, mapas o similares.

El enunciado está compuesto por los siguientes componentes:

Contexto: Hace referencia al lugar o escenario donde se desarrolla la acción, este advierte al candidato la ubicación espacio temporal. (Rango de aplicación). No necesariamente se requieren fechas ni nombres de lugares siempre y cuando el candidato pueda entrever los sitios o escenarios de aplicación. Responde al ¿Dónde?

Constructo: Es el conocimiento primario y la unidad mínima de comprensión. (Conocimiento esencial). El conocimiento esencial se define y luego se problematiza sobre el mismo. Se debe evitar que sean demasiado directos o excesivos, ambiguos o confusos. Responde al ¿Qué?

Criterio de desempeño: Hace referencia a la aplicación del conocimiento en un contexto laboral, es un saber hacer con el conocimiento, por consiguiente el conocimiento esencial siempre debe estar relacionado o afín con el criterio de desempeño. Responde a la acción.

Reactivo: Es un estímulo que orienta las instrucciones a través del cual se espera que el evaluado ofrezca una respuesta, conducta o acción posterior. Es el detonante de la acción y determina el nivel de pensamiento. Responde al ¿Cómo?




Un reactivo se asume como estímulo, señal o indicio (externo-interno) que puede provocar una reacción en un sujeto. Se caracteriza por tener siempre un impacto sobre el sistema en el cual actúa; en el estricto caso de los seres humanos el estímulo es lo que desencadenará una respuesta o reacción posterior. (Montero, 2000: 56)

Gráfico 3: Representación del Ítem. Fuente: Construcción ENIE

NOTA: A excepción del reactivo, los demás pueden cambiar de posición dentro del enunciado, lo que significa que no necesariamente se debe comenzar el enunciado con el constructo. Características del Enunciado:

Ajustar a la población objeto de evaluación; candidatos por evaluar en la NCL, niveles de formación, contextos y niveles operativos o administrativos.

Contener el conocimiento esencial, los criterios de desempeño y los rangos de aplicación. Para ello se debe contar con la norma como referente único y central, no se debe ir más allá de lo que pide la norma.

Utilizar un lenguaje claro, preciso y directo, que permita reducir al mínimo el tiempo que el candidato emplea para leer cada enunciado y la prueba en general. Se debe utilizar el lenguaje técnico de la norma.

Redactar en forma afirmativa, es decir, evitar al máximo las negaciones. De ser necesaria la negación: NO, EXCEPTO, NINGUNA, éstas deben registrarse en mayúsculas y negrita.

Ser comprendido por sí mismo y sin necesidad de leer las opciones de respuesta como apoyo para su interpretación.

Evitar posiciones ideológicas, prejuicios y juicios de valor que generen sesgo en los candidatos.




13. Opciones de respuesta: Parte concluyente del enunciado y se caracteriza por ser frases, datos o

informaciones lógicas y verdaderas que pueden ser escogidas como respuesta. El nivel de verdad de

las opciones se relaciona con el acercamiento que tenga o no sobre la clave de respuesta.

Las opciones de respuesta se clasifican en:

Clave: Es la opción correcta que satisface las exigencias del constructo. Corresponde a la

información, problema o contenido solicitado en el enunciado a través del reactivo.

Distractores: Son las opciones que no satisfacen completamente las exigencias del constructo pero conservan niveles de verdad en relación con lo que se pregunta.

Las opciones de respuesta deben quedar de manera aleatoria, la siguiente tabla ofrece algunas combinaciones:

Tabla 9. Combinación de Opciones de Respuesta. Fuente: Construcción ENIE

Para la construcción de las opciones de respuesta se debe:

Asegurar que cada ítem contenga una única clave de respuesta.

Evitar distractores fácilmente descartables, por ser obvios o de otros órdenes gramaticales o

sintácticos.

Evitar distractores descontextualizados (absurdos) que sean fácilmente descartables, incluso para el que no sabe.

Evitar distractores muy similares o sinónimos que permitan concluir que si uno es incorrecto, también lo es el otro.




Utilizar frases o palabras técnicas contenidas en el enunciado que permitan encontrar

correlación con las opciones de respuesta.

Tener una extensión (número de palabras) similar y en lo posible mantenerse en una sola línea.

En caso de superar una línea se debe garantizar equilibrio construyendo dos largas y dos cortas.

Evitar el uso de adverbios como: Siempre, Nunca, Totalmente, Absolutamente, Completamente.

Variar la ubicación de la clave de respuesta. Una forma de hacerlo es ordenar alfabéticamente las opciones de respuesta a partir de la primera letra de la primera palabra con la que inicia la opción, con esto se logra un orden aleatorio para cada ítem.

Garantizar homogeneidad de contenido y estructura gramatical.

Redactar en forma afirmativa, evitando términos negativos tales como NO. En caso de ser necesario la negación se debe escribir en mayúscula y negrilla.

Ejemplo:




Observaciones del ejemplo:

Todas las respuestas son países del continente americano que son productores de café, lo que garantiza que las opciones de respuesta tienen nivel de verdad.

En caso de encontrar alguna opción de respuesta que no corresponda a un país caficultor del continente americano, esa opción no tiene nivel de verdad y por tanto es fácilmente descartable para el candidato. A este tipo de opciones se les denomina “opciones de respuesta descontextualizadas.”

14. Clave: En esta columna se debe registrar la opción de respuesta correcta elegida por el constructor. 15. Justificación de la clave de respuesta: En esta columna se debe registrar los referentes teóricos o

empíricos que soportan la clave de respuesta y evidencian la veracidad de la misma. Garantiza

transparencia y equidad con la toma de evidencia de conocimiento y es referente en procesos de

auditoría y en el caso de que un candidato interponga apelaciones.

Tipos de la justificación:

a. Fuente Bibliográfica: Se establece mediante la fuente bibliográfica de un libro, documento,

decreto, guía, procedimiento, etc. de donde el constructor tomó la información para construir el

ítem(s) o donde el constructor puede garantizar que la clave de respuesta se corrobora.

Ejemplos:

Zambrano, C. (1997). Manual técnico para el cultivo de arroz. Editorial Vasco. España.

Página 256.

Gonzalez, F. (1991). Teoría y práctica del mantenimiento industrial avanzado. F.C.

Editorial. México. Página 329.




b. Afirmación: Se establece mediante explicaciones desde el conocimiento propio (empírico) o

producto de la experticia del constructor de instrumentos. La justificación se redacta a través de

razones de hecho (argumentaciones).

Ejemplos:

Promover el Subsistema Nacional de Asistencia Técnica Agropecuaria desde el

punto de vista de la gestión empresarial contribuye a nivel administrativo, técnico y

financiero al beneficio de los productores rurales, lo que permite un servicio

permanente, pertinente y de calidad facilitando el acceso, de manera especial, para

los pequeños y medianos productores. Por tanto, la prestación del servicio de

asistencia técnica incrementa la productividad de las pequeñas organizaciones

agrícolas.

La Georeferenciación se refiere al posicionamiento con el que se define la

localización de un objeto espacial (representado mediante punto, vector, área,

volumen) en un sistema de coordenadas y datum determinado. Posee una

definición tecno científica, aplicada a la existencia de las cosas en un espacio físico,

mediante el establecimiento de relaciones entre las imágenes de raster o vector

sobre una proyección geográfica o sistema de coordenadas. Por consiguiente, el

proceso de Georeferenciación es el más utilizado en los Sistemas de Información

Geográfica (SIG).

Sugerencias en la construcción de justificaciones. Se deben evitar redacciones ambiguas y escuetas como:

La respuesta es la “C” porque es la más apropiada a la pregunta.

Solo la “A” se identifica como la respuesta.

La B, D y A no responden a la pregunta, por eso la respuesta es la “C”.

La única respuesta correcta es la “B”.

2.3.2. Orientaciones para la Construcción de Listas de Chequeo del Desempeño (LD)

La última columna de la Matriz de Planeación y Construcción para elaborar indicadores de desempeño, contienen los indicadores de Evaluación del desempeño.

http://es.wikipedia.org/w/index.php?title=Objeto_espacial&action=edit&redlink=1

http://es.wikipedia.org/wiki/Sistema_de_coordenadas

http://es.wikipedia.org/wiki/Datum

http://es.wikipedia.org/wiki/Proyecci%C3%B3n_geogr%C3%A1fica

http://es.wikipedia.org/wiki/Sistema_de_coordenadas

http://es.wikipedia.org/wiki/Sistema_de_Informaci%C3%B3n_Geogr%C3%A1fica

http://es.wikipedia.org/wiki/Sistema_de_Informaci%C3%B3n_Geogr%C3%A1fica




Tabla 10. Matriz para Construcción de Indicadores de Desempeño Fuente: Construcción ENIE

6. Indicadores de evaluación del desempeño: Describe las habilidades y destrezas que debe realizar el candidato de acuerdo con lo exigido por la NCL. Las actividades deben responder a las exigencias de la norma de competencia, ser observable y medible a partir de este instrumento.

Para la construcción de indicadores de desempeño se debe:

Redactar en tiempo presente, en sentido afirmativo, en tercera persona, de forma explícita, clara y precisa, aplicando la siguiente estructura gramatical: Verbo + Objeto + Condición.

Dónde: o El verbo representa la acción que se está ejecutando dentro del desempeño descrito en

la norma de competencia.

o El objeto es el elemento sobre el cual recae la acción del desempeño. o La condición es el parámetro que se toma como referente para la evaluación y

determina la calidad de la ejecución.




Ejemplo:

Tabla 11. Estructura Gramatical para Indicadores de Desempeño Fuente: Construcción ENIE

Recomendaciones:

Los indicadores deben ser secuenciales en relación con las acciones o resultados que un

candidato debe demostrar frente a una función productiva, pueden referirse a condiciones

de tiempo, lugar, cantidad, ambiente, seguridad, aplicación de conocimientos técnicos,

comportamientos, actitudes, métodos de trabajo, organización, entre otras.

Utilizar un solo verbo a la vez, utilizar más de un verbo confunde la observación a realizar y dificulta el registro de la medición.

Los indicadores deben ser claramente observables y medibles.

Evitar en la redacción el uso de adverbios o adjetivos, tales como: siempre, nunca, totalmente, absolutamente, completamente, entre otros, porque son difícilmente medibles.

Evitar el uso de verbos aprobatorios como óptimo, preciso, exacto, correcto, adecuado, conveniente, entre otros, porque son difícilmente medibles.

Evitar el uso de verbos cognitivos como: conoce, comprende, entiende, identifica, entre otros, porque son difícilmente medibles.

Los indicadores deben posibilitar la distinción dicotómica: cumple o no cumple.

Los indicadores deben ser unidimensionales, lo que significa que midan o evalúen una sola dimensión del desempeño, de lo contrario se debe desglosar o fragmentar en otros indicadores.




Los indicadores deben seguir la secuencia lógica: técnica y cronológica, del proceso de trabajo a evaluar.

Los indicadores deben ser tareas que describan las actividades y no deben ser transcritos textualmente como aparecen en la norma, ya que constituyen el referente de las diferentes funciones laborales.

Los indicadores deben garantizar el cubrimiento total de los criterios de desempeño asociados a cada evidencia de desempeño a evaluar.

Ejemplo:

2.3.3. Orientaciones para la Construcción de Listas de Chequeo del Producto (LP)

La dos última columna de la Matriz de Planeación y Construcción para elaborar indicadores de producto, contiene los indicadores de Evaluación del Producto.




TABLA 12. Matriz para Construcción de Indicadores de Producto Fuente: Construcción ENIE

6. Indicadores de evaluación del producto: Son atributos o características esenciales del producto

de una función productiva, hacen referencia a los aspectos claves de los productos en términos de las especificaciones de forma, contenido, diseño, funcionalidad y ofrecen indicios de la calidad del trabajo realizado. En esta columna se registran los indicadores necesarios y suficientes para cubrir totalmente la evaluación de los atributos del producto que evidencian los criterios de desempeño y rango asociados a la evidencia. Si dichas características son diferentes, dependiendo del rango de aplicación, esto indica que tenemos un nuevo producto y se deben registrar los indicadores específicos correspondientes por separado.

Para la construcción de indicadores de producto se debe:

Redactar en sentido afirmativo, en tercera persona, de forma explícita, clara y precisa, aplicando la siguiente estructura gramatical: Objeto + verbo + Característica o Condición de Calidad.

Dónde:

o El objeto es el elemento sobre el cual recae la acción del desempeño.

o El verbo redactado en tercera persona del singular, representa la acción de

cumplimiento de la condición o atributo del producto que se valora y que evidencia integralmente los criterios de desempeño y conocimientos descritos en la norma de competencia.

o La condición entendida como característica es el parámetro que se toma como referente para la evaluación y determina la calidad de la ejecución.




Ejemplo:

Tabla 13. Estructura Gramatical para Indicadores de Producto Fuente: Elaborado ENIE

Nota: Las recomendaciones para la construcción de indicadores de desempeño son las mismas que para los indicadores de producto. Ejemplos:

3. CUARTA ETAPA: VERIFICACIÓN

3.1. Verificación Técnica y Metodológica de los Ítems e Indicadores de Evaluación

La verificación de los ítems e indicadores busca confirmar mediante la aportación de evidencia objetiva que se ha cumplido los requisitos específicos que aseguran la validez y confiabilidad de los mismos. La confirmación comprende acciones tales como la revisión sistemática y objetiva de los productos construidos antes de su liberación para uso, mediante la confrontación de lo planeado con lo elaborado, al mismo tiempo de su conformidad disciplinar, técnica, metodológica y normativa.




La verificación de los de los ítems e indicadores que realiza el SENA, implica una comprobación técnica y metodológica con el fin de confirmar que los IE cumplen con todos los requisitos de calidad presentados en este instructivo. Aunque desde el punto de vista formal la verificación es una sola, para efectos prácticos, se subdivide en 2 momentos:

1. Verificación Técnica de Ítems e Indicadores de Desempeño y Producto.

a. Una verificación técnica donde un par experto técnico corrobora los items frente a la pertinencia, relevancia y claridad de los mismos respecto a la norma (Ver formato GCC-F-038).

b. Una verificación técnica donde un par experto técnico corrobora los indicadores de

desempeño y producto frente a la correspondencia, pertinencia, relevancia y claridad de los mismos respecto a la norma (Ver formato GCC-F-039).

Posteriormente las recomendaciones realizadas por el experto técnico se envían al constructor quien debe realizar los ajustes pertinentes a los ítems e indicadores.

2. Verificación Metodológica de Ítems e Indicadores de Desempeño y Producto.

a. Una verificación metodológica donde un experto metodológico en construcción de IE

determina la correspondencia de los ítems con la norma de competencia laboral frente a ensamble de enunciados, construcción de reactivos, opciones de respuesta y gramática, etc. (Ver GCC-F-040).

b. Una verificación metodológica donde un experto metodológico en construcción de IE determina la correspondencia entre los indicadores de desempeño y producto con la norma de competencia laboral frente a estructura gramatical, unidimensionalidad, cobertura y claridad (Ver formato GCC-F-041).

Posteriormente las recomendaciones realizadas por el experto técnico se envían al constructor quien debe realizar los ajustes pertinentes a los ítems e indicadores.

4. QUINTA ETAPA: VALIDACIÓN

4.1. Validación de Ítems

La validación de ítems busca confirmar mediante el suministro de evidencia objetiva tomada de un grupo de candidatos o participantes a los que previamente se les aplicó la prueba, que los IE han cumplido los con requisitos de validez y confiabilidad para la utilización o aplicación específica de los




mismos. El término "validado" se utiliza para designar el estado correspondiente, hace referencia a aquello que vale legalmente o que es firme y subsistente. La validación de los IE en los procesos de certificación de competencias laborales es real o simulada. La primera se realiza durante el primer aplicativo de la batería (primer uso posterior a ser entregada por el banco nacional de instrumentos) donde los candidatos después de terminar la toma de evidencia y garantizando la cadena de custodia, diligencian una lista de chequeo en la que suministran información sobre claridad, comprensión, dificultad, tiempo, longitud, entre otros. Posterior a la consolidación de la información, las observaciones se remiten al constructor para que realice los ajustes pertinentes. La segunda se realiza mediante la aplicación del IE como prueba preliminar a un grupo de participantes con experiencia en la función laboral que se pretende medir, el diligenciamiento de una lista de chequeo y las garantías de confidencialidad de los instrumentos (mínimo 10 personas). Se debe garantizar que los participantes no hayan sido parte en la construcción de la NCL, en la construcción de los IE y que no sean futuros candidatos a ser certificados en la norma de competencia cuyos IE se están validando. Es necesario manifestar a los participantes que el ejercicio es una prueba para confirmar la validez y confiabilidad del IE y por lo tanto no genera ningún certificado de la competencia laboral. Posterior a la consolidación de la información, las observaciones se remiten al constructor para que realice los ajustes pertinentes (Ver Formato GCC-F-042). Para evitar que los IE caduquen, producto de la aplicación de tres momentos diferentes y pierdan criterios de validez y confiabilidad, el Banco Nacional de Instrumentos promueve una validación periódica anual donde se envían recomendaciones al líder del equipo técnico constructor de los instrumentos para desarrollar re ingeniería de los mismos, a través de una calibración de los ítems e indicadores desde las matrices de construcción, contenido y estructura.




GLOSARIO

BANCO DE INSTRUMENTOS: Es la organización interna que el Grupo de Certificación de Competencias Laborales ha dado a la administración, gestión y custodia a los ítems, indicadores e instrumentos para la evaluación de las competencias laborales en cumplimiento de una de sus funciones.

CADENA DECUSTODIA: Consiste en el aseguramiento de la información y de los Instrumentos de evaluación desde el alistamiento, planeación, construcción, verificación, validación y administración hasta su aplicación.

CONOCIMIENTO Y COMPRENSIÓN ESENCIALES: Teorías, principios, conceptos e información relevante que sustenta y se aplica en el desempeño competente (Metodología para la construcción de Normas de Competencia Laboral SENA 2003)

CONTEXTO: Hace referencia al escenario laboral donde se plantea una acción problematizada,

este advierte al candidato sobre el rango de aplicación que se pretende evaluar.

COMPETENCIA LABORAL: Conjunto de habilidades, conocimientos y actitudes necesarias para

desempeñarse con eficiencia en el sector productivo. OIT/CINTERFOR. www.cinterfor.org.uy.

Fecha de consulta: Marzo de 2013.

COMPONENTES NORMATIVOS: Conjunto de divisiones que integran la Norma de Competencia Laboral: Criterios de desempeño, Conocimientos esenciales, Rangos de aplicación, Evidencias requeridas.

CONSTRUCTO: Es el conocimiento primario y la unidad mínima de comprensión. (Conocimiento esencial).

CONSTRUCTOR: Experto técnico constructor de instrumentos de evaluación conocedor de metodologías para la construcción de instrumentos. Puede ser interno a los procesos de certificación de competencias laboral SENA o externo mediante alianzas con empresas y/o organizaciones del sector productivo.

CRITERIO DE DESEMPEÑO: Hace referencia a la aplicación del conocimiento en un contexto

laboral, es un saber hacer con el conocimiento, por consiguiente el conocimiento esencial

siempre debe estar relacionado o afín con el criterio de desempeño. Responde a la acción.

CUESTIONARIO: Es un instrumento de evaluación conformado por un conjunto intencionalmente articulado de ítems que responden a los propósitos planteados en la estructura de la Norma de Competencia Laboral y cuya aplicación permite evaluar el conocimiento del candidato, se elabora mediante la técnicas de formulación de ítems y/o estudio de caso.

http://www.cinterfor.org.uy/




CRITERIOS DE DESEMPEÑO: Resultados que una persona debe obtener y demostrar en situaciones reales de trabajo, con los requisitos de calidad especificados para lograr el desempeño competente. (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003).

ENUNCIADO: Contiene la información suficiente y necesaria con base al contenido específico a evaluar. Este puede incluir afirmaciones, estudios de caso, situaciones hipotéticas, gráficas, tabla de datos, fotografías, esquemas, figuras, mapas o similares.

ELEMENTO DE COMPETENCIA LABORAL: Descripción de lo que una persona debe ser capaz de hacer en el desempeño de una función productiva, expresada mediante los criterios de desempeño, el rango de aplicación, los conocimientos y comprensiones esenciales y las evidencias requeridas. (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003)

EVALUACIÓN DE COMPETENCIA LABORAL: Proceso por medio del cual se recoge de una persona, evidencias de desempeño, de producto y de conocimiento con el fin de determinar si es competente o aún no para desempeñar una función laboral. (Metodología para Evaluar y Certificar competencias laborales. SENA 2003)

EVIDENCIAS REQUERIDAS: Pruebas necesarias y suficientes definidas en una norma de competencia laboral colombiana, que debe presentar una persona para ser evaluado y juzgado su desempeño.

HABILIDADES DE PENSAMIENTO: Son las habilidades del pensamiento requeridas al candidato a través de los ítems las cuales están directamente relacionadas con el nivel de cualificación de la titulación laboral.

INSTRUMENTOS DE EVALUACION: Son herramientas con características particulares destinadas a evidenciar el desempeño, verificar los conocimientos y evaluar los productos de acuerdo con un estándar de competencia laboral en el que se establecen los criterios que un candidato debe demostrar para determinar las competencias y actitudes en el ejercicio de una acción laboral determinada.

ÍTEM: Unidad básica de medida y elemento constitutivo de un test, prueba o instrumento de

conocimiento.

LISTA DE CHEQUEO: Instrumento de evaluación que permite la verificación de desempeños y valoración de productos terminados o en proceso. Este exige que se cumpla en orden estricto el procedimiento de inicio a fin.




LISTA DE CHEQUEO DE DESEMPEÑO: es un instrumento que permite al evaluador recolectar datos observables del candidato en un ejercicio laboral, verificando de una manera estructurada y procesual el cumplimiento de los requisitos establecidos en la norma de competencia laboral.

LISTA DE CHEQUEO DE PRODUCTO: es un instrumento que permite al evaluador recolectar información de los resultados del desempeño del candidato en una práctica laboral, verificando de una manera estructurada y procesual el cumplimiento de los requisitos establecidos en la norma de competencia laboral.

MATRIZ DE PLANEACIÓN PARA LA CONSTRUCCIÓN DE ÍTEMS: Es el andamiaje fundamental del instrumento y guía para la construcción de ítems, ya que contempla de manera sistematizada varios ejes interdependientes que involucran, desde las características de la norma hasta los procesos cognitivos y tipos de ítems intencionados por el experto técnico.

NORMA DE COMPETENCIA LABORAL: Estándar reconocido por trabajadores y empresarios, que describe los resultados que un trabajador debe lograr en el desempeño de una función laboral, los contextos en que ocurre ese desempeño, los conocimientos que debe aplicar y las evidencias que debe presentar para demostrar su competencia. (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003).

OPCIONES DE RESPUESTA: Parte concluyente del ítem caracterizadas a través de frases, datos o informaciones, lógicas y verosímiles, que pueden ser escogidas como respuesta a la pregunta.

RANGO DE APLICACIÓN: Descripción de los diferentes escenarios, elementos y condiciones variables, donde la persona debe ser capaz de demostrar dominio sobre el elemento de competencia (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003).

RUTA DE ÍTEM: Codificación que da cuenta de la trazabilidad del ítem dentro de la prueba de conocimiento. Es decir, indica la secuencia de relaciones entre el ítem de conocimiento del elemento de la NCL, los criterios de desempeño y los rangos de aplicación específicos asociados, que permiten la construcción de cada uno de los ítem que estructuran un cuestionario. La codificación de la ruta del ítem es importante para la administración del Banco de Preguntas.

SIMULACIÓN: Es una estrategia o procedimiento que permite emular situaciones o escenarios laborales cuando no sea posible la observación directa de los desempeños de un candidato en el ambiente natural de trabajo. Entre las estrategias utilizadas más frecuentes están los software especializados, simuladores a escala de los procesos, pruebas de habilidad o ejercicios prácticos, proyectos con base en el trabajo, estudios de casos y juego de roles.

SIMULACRO: Es una representación objetiva de los escenarios laborales que hacen posible que los desempeños y habilidades de un candidato puedan ser observados y valorados por un agente externo, como si estuviera en un ambiente laboral real.




TAXONOMÍA DE BLOOM: Sistema de clasificación para tres dominios: El cognitivo, el afectivo y el psicomotor. Clasifica las operaciones cognitivas en seis niveles de complejidad crecientes (reconocimiento, comprensión, aplicación, análisis, evaluación y creación).

TITULACIÓN: Conjunto de normas de competencia laboral que describe los desempeños competentes en un Campo Ocupacional o en una Ocupación.




ABREVIATURAS

Tabla 14. Abreviaturas BNI Fuente: Elaborado por el Equipo Nacional de Instrumentos




BIBLIOGRAFÍA

Abad, F. Garrido, J. Olea, J. y Ponsoda, V. (febrero 2006). Introducción a la Psicometría: Teoría Clásica

de los Test y Teoría de la Respuesta al Ítem. Recuperado de:

http://aprendeenlinea.udea.edu.co/lms/investigacion/file.php/39/ARCHIVOS_2010/PDF/IntPsi

cometria_aristidesvara_1_.pdf

Anderson, L. & Krathwohl, D. (2000). Versión de la Taxonomía de Bloom de habilidades de

pensamiento Tomado de Pág. 4. Recuperado de

http/://www.eduteka.org/taxonomíaBloomCuadro.php3

Bloom, B. (1954). Taxonomía de los objetivos educativos: Tomo I, El dominio cognitivo. Nueva York,

David McKay & Co.

Cheung, D. Y Bucat, R. (2002). How can we construct good multiple choice ítems. Hong Kong: Sciens

an Technlogy Education conference.

Colas, M. (1994). La formulación de preguntas en el acto didáctico: un estudio comparativo. Facultad

de Filosofía y Ciencias de la Educación. Facultad de Filosofía y Ciencias de la Educación Gonzalo

Bilbao, 5 Sevilla.

Derrida, J. (1994). ¿Qué hacer de la pregunta ¿Qué hacer? (París), 92 pp. 91-110. Traducción de

Bruno Mazzoldi en El tiempo de una tesis. Desconstrucción e implicaciones conceptuales,

Proyecto A Ediciones, Barcelona, 1997, pp. 29-39.

Elena, T. (2009). Título de la ponencia: “La pregunta, ¿informa? ¿Comunica?”: Estudios Culturales. 1º

Jornadas Regionales de Actualización en Comunicación “La investigación en comunicación

social” Facultad de Artes y Ciencias - Departamento de Comunicaciones Sociales. Universidad

Católica de Salta - Salta, 22 y 23.

Expósito, E. (2010). Evaluación formativa y compartida en educación superior. Propuestas, técnicas,

instrumentos y experiencias. Revista Complutense De Educación. Recuperado de:

http://search.proquest.com/docview/220925519?accountid=41919

Elliot W. E. (2000). Benjamín Bloom (1919-1999). Texto publicado en Perspectivas: revista trimestral

de educación comparada (París. UNESCO: Oficina Internacional de Educación), vol. XXX, n° 3.

Recuperado de: http://www.ibe.unesco.org/publications/ThinkersPdf/blooms.pdf

http://aprendeenlinea.udea.edu.co/lms/investigacion/file.php/39/ARCHIVOS_2010/PDF/IntPsicometria_aristidesvara_1_.pdf

http://aprendeenlinea.udea.edu.co/lms/investigacion/file.php/39/ARCHIVOS_2010/PDF/IntPsicometria_aristidesvara_1_.pdf













http://www.ibe.unesco.org/publications/ThinkersPdf/blooms.pdf




Fowler, Bárbara. La taxonomía de Bloom y el pensamiento crítico. (2002). Missouri, Estados Unidos.

Especialista en Aprendizaje - Longview Community College. Recuperado de

http://www.eduteka.org/profeinvitad.php3?ProfInvID=0014

Freire, P. (1987). Pedagogía de la Pregunta. En: Educación y Cultura. No. 11. Bogotá. Ceid. FECODE.

Fowler, B. (2002). La taxonomía de Bloom y el pensamiento crítico.

Longview Community College. Missouri, Estados Unidos.

Guerci de Siufi, B. (2008). La pregunta como soporte de un pensamiento crítico localizado. Cuadernos

de la Facultad de Humanidades y Ciencias Sociales, Núm. 35, Noviembre pp. 23-37.

Universidad Nacional de Jujuy. Argentina.

Hans-Georg, G. (1998). Verdad y Método. Fundamentos de una hermenéutica filosófica. Desde las

páginas 439 / 443. La primacía hermenéutica de la pregunta. Ediciones sígueme Salamanca.

Haladyna y Downing. (1989). A taxonomy of multiple choice ítem writing rules. En Apply

Measurement in Education. Vol. 3

Haladyna, T. (1994). Development and validat in multiple choice test ítems. New Jersey: Lawrence

Earlbaum Associates.

Losada, H. (2009). Conclusiones sobre la aplicación de la taxonomía de Bloom al diseño de

herramientas pedagógicas. Departamento de lenguajes y sistemas informáticos. Universidad

Rey Juan Carlos, Móstoles, Madrid España. Editorial Dykinson S.L.

Macías, A., & Maturano, C. (2010). Evaluación de la comprensión a través de la formulación de

preguntas por los estudiantes a partir de la lectura de un texto de física. Revista Signos, 43(74),

411. Recuperado de: Retrieved from


Montero, E. (2000). La teoría de respuesta a los ítems: una moderna alternativa para el análisis

psicométrico de instrumentos de medición. Escuela de Estadística, Universidad de Costa Rica,

2060 San José, Costa Rica.

Morales V. P. (2006). Las pruebas objetivas: normas, modalidades y cuestiones discutidas (última

revisión) Universidad Pontificia Comillas Madrid. Facultad de Ciencias Humanas y Sociales.

http://www.eduteka.org/profeinvitad.php3?ProfInvID=0014





Moreno, R. Martínez, R. y Muñiz, J. (2004). Directrices para la construcción de ítems de elección

múltiple. Universidad de Sevilla y Universidad de Oviedo. Psicothema Vol. 16, nº 3, pp. 490-497

ISSN 0214 - 9915 CODEN PSOTEG.

Morales, P. (última revisión, 20 de mayo, 2012). Análisis de ítems en las pruebas objetivas.

Universidad Pontificia Comillas. Madrid. Facultad de Ciencias Humanas y Sociales.

Moreno, R. Martínez, R. y Muñiz, J. (2011). Calidad de los ítems de los exámenes PIR. Universidad de

Sevilla. Universidad de Oviedo. Papeles del Psicólogo, Vol. 32(3), pp. 254-264.

Muñiz, J. (2010). Las teorías de los test: teoría clásica y teoría de respuesta a los ítems. Papeles del

Psicólogo, Vol. 31, Núm. 1, enero-abril, pp. 57-66. Consejo General de Colegios Oficiales de

Psicólogos.

Parga H, M. (1994). Pensamiento de orden superior en diseño: Aportes del enfoque cognitivo a los

procesos de formación de competencias para diseñar. Profesor Asociado, Universidad de

Bogotá Jorge Tadeo Lozano, Facultad de Ciencias Humanas, Arte y Diseño, Programa de Diseño

Industrial. Bogotá, Colombia.

Pickard, M. (2007). Journal of Family and Consumer Sciences Education, Vol. 25, No. 1,

Spring/Summer, East Carolina University.

Popper, K. (1983). Conjeturas y Refutaciones, el desarrollo del conocimiento científico. Paidós. 2ª

edición revisada y ampliada. Barcelona.

Quaas, C. Rebolledo, C. Lillo, L., & Romo, V. (2004). Cuestionario Meta comprensión lectora (mcl):

Determinación de sus Características. Recuperado de:

Psicométricas1.Psicoperspectivas,http://search.proquest.com/docview/872820813?accountid

=41919

Roberts, D. (1993). Reglas sobre la construcción del contenido de los ítems. 10 An empirical studying

on the nature of trick questions. Journal of educational measurement. Vol 30.

R. S. Iván, (2001). Validación de una metodología basada en actividades de aprendizaje con técnicas

creativas para estudiantes universitarios. Retrieved from


Sadker, M. y Sadker, D. (1999). Técnicas para la construcción de preguntas. En Cooper, J. (ed.),

Estrategias de enseñanza: Guía para una mejor instrucción. México: Limusa.





Salazar, C. (2011). Informe sobre pruebas objetivas. Versión actualizada del Informe original

elaborado por la profesora Coordinadora de Apoyo al Estudiante de la Escuela de Derecho-

Caracas.

Sánchez Soto, I. & Flores Paredes, P. (2004). Influencia de una metodología activa en el proceso de

enseñar y aprender física. Journal of Science Education, 5(2), 77-83. Retrieved from


BIBLIOGRAFIA SECUNDARIA

Las pruebas objetivas de conocimientos. Recuperado de

www.sre.urv.es/web/aulafutura/php/fitxers/496-7.pdf

ICFES. (2004). Estándares para la construcción de pruebas. Bogotá: ICFES.

Universidad Nacional de Colombia. (2012). Construcción de cuestionarios para evaluación de

competencias. Universidad nacional de Colombia. Facultad de Psicología. Docentes: Iván R. Ruiz

C. Juan Carlos Espinosa y Carlos A. Acosta R.

Servicio Nacional de Aprendizaje (Sena). (2004). Metodología para evaluar y certificar

competencias laborales y guía para seleccionar técnicas y elaborar instrumentos de evaluación

de competencias.















http://www.sre.urv.es/web/aulafutura/php/fitxers/496-7.pdf

http://www.sre.urv.es/web/aulafutura/php/fitxers/496-7.pdf

servicio nacional de aprendizaje senacompromiso.sena.edu.co/documentos/docs_pdf/... · lista de...

Documents