Presentacin de PowerPoint

Aprendices:

Ral Alcaino Q.Juan Caldern R.

1

B. De Wever *, T. Schellens, M. Valcke, H. Van Keer

Department of Education, Ghent University, H. Dunantlaan 2, 9000 Ghent, Belgium

15 instrumentos de anlisis de contenidosMuestra de los modelos de uso comn en la literatura CSCLVisin General diferentes instrumentos de anlisis de contenidos, sobre una muestra de los modelos de uso comn en la literatura CsCl4Computer Supported Collaborative Learning (aprendizaje colaborativo asistido por computador)

CMC / CMD / CC / NL / ALN CSCLComunicacin mediada por Computador (CMC), Discusin mediada por ordenador (CMD), Conferencia por computador (CC), aprendizaje en red (NL) Aprendizaje asncrona en red (ALN)5Constructivistas Cognitivistas Fomenta el aprendizaje debido a la explicitacin del conocimiento individual y la reorganizacin constante del conocimiento.

Constructivistas Sociales Fomenta el proceso de colaboracin en el cual el significado se negocia y el conocimiento es co-construido.

Ambos puntos de vista ''reconocen la importancia de la interaccin en el aprendizaje colaborativo'' (Lazonder et al., 2003, p. 292).CSCLLa discusin asincrnica en lnea se ha convertido en el foco principal de la investigacin en educacin.

(Pena-Shaff y Nicholls, 2004)En una primera etapa, la investigacin basada en las transcripciones de discusin se limita principalmente a la recoleccin datos cuantitativos sobre los niveles de participacin.

(Henri, 1992). Anlisis de Contenido

Tcnica para desbloquear la informacin capturada en las transcripciones de los grupos de discusin asincrnica.el objetivo de anlisis de contenido es revelar informacin que no se encuentra en la superficie de las transcripciones.

9Anlisis de ContenidoHistoria y definicionesEl Anlisis de Contenido es una disciplina investigativa del mbito de las ciencias sociales que se ocupa de rastrear el contenido manifiesto y latente de diversas formas de comunicacin, tales como artculos de prensa, propaganda poltica y, ltimamente, de dilogos de estudiantes para realizar inferencias para la investigacin en educacin. Qu es el Anlisis de Contenido?DefinicionesUna tcnica de investigacin para la descripcin objetiva, sistemtica y cuantitativa del contenido de las comunicaciones y que tiene como finalidad interpretarlas (Berelson, 1952)DefinicionesToda tcnica que permite hacer inferencias, identificando objetivamente y sistemticamente las caractersticas especficas del mensaje. (P. Stone)DefinicionesLa tcnica que describe e identifica de manera objetiva y sistemtica las propiedades lingsticas de un texto con la finalidad de obtener conclusiones sobre las personas y los agregados sociales.

(Mayntz, Holm y otros)DefinicionesEl AC es el conjunto de los mtodos y tcnicas de investigacin destinados a facilitar la descripcin sistemtica de los componentes semnticos y formales de todo tipo de mensaje, y la formulacin de inferencias vlidas acerca de los datos reunidos. (R. Colle)Historia1927: Laswell "Propaganda techniques in the World War" (EE.UU.)1948: 1948 BERELSON & LAZARSFELD: "The analysis of communication content" (EE.UU.) Primer manual sobre el tema. 1952: Berelson Content Analysis 1966 STONE & col.: "The General Inquirer: a computer approach to content analysis" (EE.UU.)1969 GERBER, HOLSTI, KRIPPENDORF & alt.: "The analysis of communication content", Actas del 2o congreso de AC de 1967, que abord especialmente las nuevas tcnicas computacionales.Historia1974 MUCCHIELLI: "L'analyse de contenu des documents et des communications" (Francia)1980 KRIPPENDORF: "Content analysis" (EE.UU.)1980 GIGHLIONE & col.: "Manuel d'analyse de contenu" (Francia)Contexto de evolucinDurante el siglo XX varias corrientes de anlisis discursivo pasaron desde un paradigma positivista a otro post estructuralista. Durante la primera mitad del siglo y hasta los aos 60 predominaron el estructuralismo, la semitica (vigente hasta hoy) y el formalismo ruso. Contexto de evolucinA partir de 1968 (aprox.) y hasta nuestros das el testimonio lo toman la filosofa post estructuralista de Michel Foucault y la deconstruccin de Jacques Derrida, basadas en una crtica al estructuralismo y otras visiones de inspiracin positivista.

Diferencias con el Anlisis del discursoEl anlisis discursivo clsico (basado en la retrica de Aristteles) se centra en el examen de la forma de argumentacin (silogismos, entimemas). Mientras que el AC construye sus categoras en base a criterios ms bien comunicacionales (El Emisor, el Receptor, el Standard o los Valores).

Diferencias con el Anlisis del DiscursoEl Anlisis Crtico del Discurso, cuyo principal exponente es el holands Ten Van Dijk, est basado en la lingstica y en la semitica y se orienta hacia discursos ideolgicamente sesgados con la finalidad de establecer los procedimientos de dominacin y resistencia ejercidos a travs de aqullos. Construye sus categoras en base a conceptos lingsticos (eleccin del lxico, empleo de figuras retricas como la metfora o la metonimia). Diferencias con el ACDNo obstante, desde el inicio del AC, es posible rastrear investigaciones abocadas a determinar el contenido de discursos ideolgicamente sesgados, as como tambin es posible hallar diseos metodolgicos que combinan elementos del AC con elementos del ACD. Estudio centrado en elAnlisis del ExpedienteEl presente estudio se centra en el anlisis del expediente. 25Anlisis del Expediente

Esta tcnica de anlisis de contenido se puede definir como ''una metodologa de investigacin que se basa en los procedimientos para hacer inferencias vlidas a partir del texto''

(Anderson, Rourke, Garrison, y Archer, 2001). Aunque esta tcnica de investigacin se utiliza a menudo, las normas todava no se han establecido. Los instrumentos aplicados reflejan una amplia variedad de enfoques y difieren en su nivel de detalle y el tipo de categoras de anlisis utilizado. Adems las diferencias estn relacionadas con una diversidad en su base terica, la cantidad de informacin acerca de la validez y fiabilidad, y la eleccin de la unidad de anlisis. 26instrumentos de anlisis son discutidos y analizados en los estudios de investigacin en los que se han aplicado. 15Calidad de los Instrumentos de Anlisis

Marco terico,La eleccin de una unidad de anlisisLa fiabilidad de los instrumentos.

Los instrumentos de anlisis de contenido deberan ser exactos, precisos, objetivos, fiables, reproducibles y vlidos (Neuendorf, 2002; Rourke, Anderson, Garrison, y Archer, 2001). Estos criterios son fuertemente interrelacionados. La exactitud es el grado en que un proceso de medicin est libre de sesgo (no aleatoria), mientras que la precisin es la finura de distincin entre categoras o niveles de una medida (Neuendorf, 2002). La precisin debe ser tan alta como sea posible, pero no exagerado. La objetividad debe ser alcanzada en todo momento (Rourke y col., 2001). Aunque la interpretacin es necesaria y la subjetividad podra ser inevitable, uno debe ser consciente de que la subjetividad afecta la fiabilidad y la validez de los estudios. Esta ltima est claramente relacionado con la base terica de los estudios y se analiza junto con la replicabilidad en la siguiente seccin. En las secciones siguientes, elaboramos ms en la unidad de anlisis y la fiabilidad entre evaluadores.

28Base terica de los instrumentos

Sin un modelo terico del proceso de aprendizaje colaborativo, es imposible identificar indicadores empricos que formarn la base de un instrumento de codificacin como estndar contra el cual evaluar si es o no un aprendizaje eficaz.Unidad de anlisis Cada oracin individual como una sola unidad de anlisis (Fahy et al., 2001)Identificar un tema constante o idea (unidad de significado) en un mensaje y acercarse a esta como la unidad de anlisis (Henri, 1992)Tomar como la unidad de anlisis todos los mensajes del estudiante en un determinado momento de la discusin (Gunawardena et al, 1997;.. Rourke y col, 2001)La Fiabilidad entre evaluadores

''la medida en que los diferentes codificadores, con los mismos contenidos, llegan a la misma conclusin en evaluacin''

(Rourke y col., 2001, p. 6) ndices usados para evaluar FiabilidadHolstis method Scotts piCohens kappaKrippendorffs alphaSpearman rhoPearsonLin' S Indice de Kupper-HafnerEtc.Holstis method, Scotts pi, Cohens kappa, Krippendorffs alpha, Spearman rho, Pearson, coeficiente de correlacin, Lin' S concordancia de coeficiente de correlacin, Indice de Kupper-Hafner, Etc.

32Henri (1992)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConocimiento Cognitivo y MetacognitivoUnidad TemticaNo reportado1Instrumento- Enfoque cognitivista del aprendizaje- Aprendizaje en un modo cooperativo- Concepto central en vista del instrumento de anlisis de contenido es la interactividad-

33InstrumentoNewman et al. (1995)

Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresPensamiento CrticoUnidad TemticaNo reportado2- El aprendizaje en grupo, aprendizaje profundo, y el pensamiento crtico.- Se identifican 10 categoras: pertinencia, relevancia, novedad, el conocimiento exterior, ambigedades, vinculando ideas, la justificacin, la evaluacin crtica, la utilidad prctica, y la anchura de la comprensin

34InstrumentoZhu (1996)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresLas teoras del desarrollo cognitivo y aprendizaje Constructivista/Construccin del conocimientoMensaje

No reportado3- Combinacin de la teora de Vygotsky y teoras del aprendizaje cognitivo y constructivo

35InstrumentoGunawardena et al. (1997)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresEl constructivismo social - construccin del conocimientoMensajeNo reportado4- Herramienta para examinar la construccin social del conocimiento en conferencias por computadora36InstrumentoBullen (1997)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresPensamiento CrticoMensaje (varios indicadores posible por mensaje)Porcentaje de acuerdo537InstrumentoFahy et al. (2000)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresTeora de las redes sociales - Patrones de intercambio de interaccinSentenciaPorcentaje de acuerdo Coeficiente kappa de Cohen638InstrumentoVeerman and Veldhuis-Diermanse (2001)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social - construccin del conocimientoMensajePorcentaje de acuerdo 739InstrumentoRourke et al. (1999)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresComunidad de investigacin social ypresencialUnidad temticaCoeficiente de Holstis840InstrumentoGarrison et al. (2001)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresComunidad de investigacin - Presencial cognitivaMensajeCoeficiente de HolstisCoeficiente kappa de Cohen941InstrumentoAnderson et al. (2001)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresComunidad de investigacin - enseanza presencialMensajeCoeficiente kappa de Cohen1042InstrumentoJrvel and Hkkinen (2002)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social - toma de perspectivaMensaje - discusin completaPorcentaje de acuerdo1143InstrumentoVeldhuis-Diermanse (2002)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social - construccin del conocimientoUnidad temticaPorcentaje acuerdo conCoeficiente kappa de Cohen1244InstrumentoLockhorst et al. (2003)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social Aprendizaje de estrategiasUnidad temticaCoeficiente kappa de Cohen1345InstrumentoPena-Shaff and Nicholls (2004)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social - construccin del conocimientoFrases (algunos prrafos)Codificacin-recodificacin y procedimientos entre evaluadores sin coeficiente reportado1446InstrumentoWeinberger and Fischer (2005)Antecedentes TericosUnidad de AnlisisFiabilidad entre EvaluadoresConstructivismo social - Construccin del conocimiento argumentativoLosautores aplicandos unidadesdeanlisis enel nivelmicroyena nivel macroPorcentaje acuerdo conCoeficiente kappa de Cohen1547Estado de la tcnica en los enfoques de anlisis de contenido

desarrollado en el contexto de los estudios empricos limitados, a partir de un pequeo nmero de participantes, nmero de mensajes y discusiones restringido durante perodos cortos de tiempo48 Marco terico

No todos los estudios presentan una clara relacin entre la teora y los instrumentos.Diferencias en el nivel de categora y detalle de los instrumentos.Debilidad de la base emprica de los modelosdesarrollado en el contexto de los estudios empricos limitados, a partir de un pequeo nmero de participantes, nmero de mensajes y discusiones restringido durante perodos cortos de tiempo49Unidad de Anlisis

La eleccin de la unidad de anlisis afecta a la precisin de la codificacin.- Cuatro de los instrumentos descritos anteriormente usan unidades temticas (unidades de significado). (Henri, 1992;. Lockhorst et al, 2003; Newman et al, 1995;.. Rourke y col, 1999).- Siete recomiendan el uso de mensajes completos como unidades de anlisis (Anderson et al, 2001.; Bullen, 1997; - Guarnicin et al, 2001.; Gunawardena et al, 1997.; Ja rvela y Ha kkinen, 2002; Veerman Y Veldhuis-Diermanse, 2001; Zhu, 1996).- En un estudio se centra en las dos unidades temticas y mensajes (Veldhuis-Diermanse, 2002).- Otro utiliza micro-y macro-segmentos (Weinberger Y Fischer, 2005).- Slo dos estudios utilizan frases como la unidad de anlisis (Fahy et al, 2001;. Pena-Shaff y Nicholls, 2004).- En un instrumento, toda la discusin es la unidad de anlisis (Ja y rvela Ha kkinen, 2002). 50 La fiabilidad entre revisores

Uso de varios coeficientes para determinar confiabilidad entre evaluadores.Debe considerar la mayor informacin sobre la muestra, declarar procedimientos de codificacin, y la capacitacin de los evaluadores.- Cuatro de los instrumentos descritos anteriormente usan unidades temticas (unidades de significado). (Henri, 1992;. Lockhorst et al, 2003; Newman et al, 1995;.. Rourke y col, 1999).- Siete recomiendan el uso de mensajes completos como unidades de anlisis (Anderson et al, 2001.; Bullen, 1997; - Guarnicin et al, 2001.; Gunawardena et al, 1997.; Ja rvela y Ha kkinen, 2002; Veerman Y Veldhuis-Diermanse, 2001; Zhu, 1996).- En un estudio se centra en las dos unidades temticas y mensajes (Veldhuis-Diermanse, 2002).- Otro utiliza micro-y macro-segmentos (Weinberger Y Fischer, 2005).- Slo dos estudios utilizan frases como la unidad de anlisis (Fahy et al, 2001;. Pena-Shaff y Nicholls, 2004).- En un instrumento, toda la discusin es la unidad de anlisis (Ja y rvela Ha kkinen, 2002). 51

Discusin crtica de los modelos de anlisis de contenido

- Instrumentos de anlisis de contenidodebe tener mayor coherencia y empricamente validados.- Prueba de hiptesis debe ser una necesidad en estos estudios.- Cuatro de los instrumentos descritos anteriormente usan unidades temticas (unidades de significado). (Henri, 1992;. Lockhorst et al, 2003; Newman et al, 1995;.. Rourke y col, 1999).- Siete recomiendan el uso de mensajes completos como unidades de anlisis (Anderson et al, 2001.; Bullen, 1997; - Guarnicin et al, 2001.; Gunawardena et al, 1997.; Ja rvela y Ha kkinen, 2002; Veerman Y Veldhuis-Diermanse, 2001; Zhu, 1996).- En un estudio se centra en las dos unidades temticas y mensajes (Veldhuis-Diermanse, 2002).- Otro utiliza micro-y macro-segmentos (Weinberger Y Fischer, 2005).- Slo dos estudios utilizan frases como la unidad de anlisis (Fahy et al, 2001;. Pena-Shaff y Nicholls, 2004).- En un instrumento, toda la discusin es la unidad de anlisis (Ja y rvela Ha kkinen, 2002). 52Indice de concordancia kappa

- Kappa es una medida de concordancia propuesta por Cohen en 1960.

- Se basa en comparar la concordancia observada en un conjunto de datos, respecto a la que podra ocurrir por mero azar.

- Tiene en cuenta el porcentaje de acuerdo entre los jueces, y tambin el porcentaje de acuerdo que obtendran contestando al azar.ElCoeficiente kappa de Cohenes una medida estadstica que ajusta el efecto del azar en la proporcin de la concordancia observada.Donde Pr (a) es el acuerdo observado entre los evaluadores, y Pr (e) es la probabilidad hipottica de la posibilidad de acuerdo.Kappa de Cohen mide el acuerdo entre slo dos evaluadores

54Indice de concordancia kappa

kappa de Cohen se suele emplear para valorar la fiabilidad entre jueces que miden variables cualitativas (clasifican a los sujetos en grupos excluyentes) como el color, suspenso suficiente bien notable sobresaliente, existe no existe