tema 2: procesos de condicionamiento: fundamentos aprendizaje y condicionamiento prof. pablo...

Tema 2: Procesos de condicionamiento:

Fundamentos

Aprendizaje y CondicionamientoProf. Pablo Adarragahttp://www.uam.es/pablo.adarragapablo.adarraga@uam.es

Condicionamiento instrumental

• Aprender de los resultados de nuestra conducta.

• Repetiremos las conductas que nos funcionan bien, y no repetiremos las que den resultados dañinos.

Condicionamiento clásico

• Aprendemos a usar las señales que presagian sucesos importantes para nosotros

• Ello nos permitirá “anticipar” dichos sucesos e iniciar de antemano las conductas más adaptativas respecto a ellos.

¿Clásico o instrumental?

• En el CI el organismo recibe o no el premio, el castigo etc. dependiendo de su conducta. Si estudias, te dan chuches; si no, no.

• En el CC el organismo recibe la señal (la campana) Y a continuación el “evento señalizado” (la carne) con independencia de su conducta.

Condicionamiento instrumental

Condicionamiento instrumental

Antecedente

Respuesta

Consecuente

Caja de Skinner

Pulsar palanca

Pellet (comida)

Condicionamiento instrumental

Antecedente

Respuesta

Consecuente

Olor de Ana

Dar pata

Comida

Condicionamiento instrumental

Antecedente

Respuesta

Consecuente

Con los amigos

Decir burrada

Risas, celebración

Condicionamiento instrumental

Antecedente

Respuesta

Consecuente

Mesa familiar

Decir burrada

Bronca

Resultado

• La fuerza de esa respuesta se modifica, para las situaciones en que esté presente el antecedente

• Lo que es lo mismo, esa R se hace más o menos probable para el futuro.

– Cuando la fuerza de la R aumenta, decimos que el consecuente es un refuerzo

– Cuando la fuerza de la R disminuye, decimos que el consecuente es un castigo

Elementos del CI: Respuesta (R)

• En principio, puede ser cualquier R incluida en el repertorio conductual del organismo.

• Esta limitación se amplía drásticamente mediante el moldeado (ver más adelante)

• Desde una R muy simple hasta una secuencia conductual compleja

• Las Rs con importante componente innato pueden resultar problemáticas

• En humanos, pueden ser tipos de verbalizaciones, clases de pensamientos, etc.

Elementos del CI: Respuesta operante

• Un tipo especialmente importante son las Rs operantes o simplemente “operantes”

• Operante: respuesta definida exclusivamente por sus propiedades funcionales

• Estrictamente: condicionamiento operante es una subclase del CI que se caracteriza porque afecta a un operante.

• Sin embargo, a menudo se usan ambos términos como sinónimos.

Elementos del CI: Consecuente

• Suceso que afecta a la fuerza o probabilidad de la respuesta a la que sigue consistentemente.

• Dos grandes tipos– Refuerzo o reforzador: Aumenta, fortalece la R a

la que sigue– Castigo: Reduce o debilita la R a la que

sigue

• Por tanto, refuerzo y castigo se definen como tales por sus efectos en la R, no porque sean agradables o desagradables.

Elementos del CI: Consecuente - refuerzo

• Refuerzo – estribillo:

“Un refuerzo es un refuerzo porque refuerzaUn refuerzo es un refuerzo porque refuerza”

Consecuente – refuerzo positivo y negativo

• Refuerzo positivo (R+ o ”erre más”):

– La conducta aumenta, se fortalece (eso es lo que significa “refuerzo”)

– el organismo obtiene algo, se le administra alguna cosa, el ambiente le da algo (eso quiere decir “positivo”).

– Típicamente, algo “agradable”

• Refuerzo negativo (R- o ”erre menos”):

– La conducta aumenta, se fortalece (refuerzo)– El organismo deja de recibir o experimentar algo, se le

“quita” algo (eso quiere decir “negativo”). – Típicamente, algo nocivo o dañino.

Consecuente – castigo positivo y negativo

• Castigo positivo (C+ o ”ce más”):

– La conducta se reduce (eso es lo que significa “castigo”)– El organismo recibe algo, se le administra alguna cosa,

el ambiente le da algo (eso es lo que significa “positivo”).– Típicamente, algo doloroso, dañino, nocivo

• Castigo negativo (C- o ”ce menos”):

– La conducta se reduce ( “castigo”)– El organismo deja de recibir o experimentar algo, se le

“quita” algo (eso es lo que significa “negativo”). – Típicamente, algo beneficioso, grato, apetitivo.

Atención - Zona de errores masivos

• “Positivo” no significa “bueno”• “Negativo” no significa “malo o dañino”

“Castigo positivo” suena raro. “Puesto que un castigo es algo que duele, ¿qué

puede tener de positivo un castigo?” MAAAAL!

“Refuerzo negativo” suena raro. “Si un refuerzo es algo agradable, cómo va a ser

negativo”? MAAAAAL!Estos errores se deben a confundir los términos técnicos con palabras del lenguaje natural. CUIDADO con ellos.

Consecuente: R+ y R- Ejemplos

• Cada vez que el perro se sube al sofá, su sueño le da un cachete en el hocico

• Si la rata se sube a la plataforma, deja de recibir la descarga eléctrica.

• Llamó a su padre “bastardo degenerado”, por eso se ha quedado sin paga.

Consecuente: R+ y R- Ejemplos

• Ella suele conseguir que dejen de echarle la bronca poniendo carita de pena.

• El entrevistador detiene sus gestos de asentimiento cuando el candidato le tutea

• A la cuarta vez que insistió en pedírmelo, ya no supe cómo negarme

Elementos del CI: Contingencia

Relación estadística (probabilística) entre la R y el consecuente.

• Es cuestión de grado.• Es máxima si siempre que el organismo emita la

respuesta, y sólo entonces, recibe el consecuente. • Si el consecuente no sigue siempre a la R, la

contingencia es más baja.

Elementos del CI: Contingencia

Se puede pensar en las contingencias como “reglas” que rigen en una situación ambiental, p. ej.:

Si se pulsa la palanca, siempre sale comida

Si dices una palabrota, te llevas una bronca la mayoría de las veces

Si pones cara triste, algunas veces te darán algo.

Elementos del CI: Contingencia

La relación entre la magnitud de la contingencia y la eficacia del condicionamiento no es simple:

• Si se puede recibir el consecuente sin realizar la

conducta, el condicionamiento pierde eficacia.

• Si se recibe el consecuente sólo en algunas Rs (no en todas), el reforzamiento se hace más eficaz, pero el castigo se debilita.

Elementos del CI: Antecedente

• Estímulo o configuración estimular que permite al organismo identificar la situación en que está activa una contingencia de refuerzo o de castigo

• A veces el CI queda muy vinculado al antecedente, otras veces es bastante independiente de él.

• MUY IMPORTANTE: No confundir con “historia” o “vida pasada”.

Elementos del CI: Antecedente

• Conducta: meter la moneda y pulsar

• Consecuente: producto

• Antecedente: luces encendidas.

• Si las luces están apagadas, la contingencia entre la conducta y el consecuente no está activa.

Elementos del CI: Antecedente

Antecedente - estribillo:

El antecedente está presente

Elementos del CI: Antecedente

Cuando el antecedente es un estímulo concreto, puntual, se denomina “estímulo discriminativo”.

Dos tipos:• ED o E+ : indica la disponibilidad de un

consecuente (la contingencia está activa)

• EΔ o E- : informa de su no-disponibilidad (contingencia no vigente o inactiva).

La distinción terminológica entre “antecedente” y “E. discriminativo” debe entenderse como muy flexible.

Moldeado (“shaping”)

Consecución gradual de una R que no estaba presente en el repertorio conductual del organismo, mediante reforzamiento de Rs que son aproximaciones sucesivas a la deseada.

Es el principal procedimiento de aprendizaje de Rs genuinamente nuevas para el organismo.

No confundir con “modelado” (modeling): aprendizaje de una conducta observando a otro organismo efectuarla.

Adquisición

• Periodo en el que se produce el condicionamiento (al organismo se le presenta la contingencia, y la va aprendiendo)

• En laboratorio o clínica, se llama así también al procedimiento concreto empleado para ello.

Extinción

• Situación en que se rompe la contingencia entre la respuesta y el consecuente

• El organismo cada vez realiza menos la respuesta que ya no es reforzada.

• Se refiere también al decaimiento de la respuesta por esa ruptura de la contingencia.

Mantenimiento

Aquellas circunstancias que impiden que una conducta entre en extinción.

Normalmente, son contingencias de refuerzo.

El análisis del mantenimiento de las conductas problemáticas es uno de los aspectos más importantes de la intervención clínica.

Refuerzo (Más R) Castigo (Menos R)

Positivo

(dar)

Entrenamiento

de recompensa

Entrenamiento de castigo

Negativo

(quitar)

Entrenamiento de escape

Entrenamiento de evitación

Entrenamiento de omisión / LRS

Tipos de entrenamiento en CI

Situaciones de laboratorio

Procedimientos de ensayo discreto•El entrenamiento se divide en sucesivos “ensayos”•Inconvenientes:

– Interferencia con el proceso natural– El O tiene “marcado” cuándo puede realizar la

R.– Ejemplos: laberintos, corredores, cajas

problema, cajas de lanzadera, etc.

Procedimientos de operante libre•No hay ensayos, sino una situación “continua”.•El organismo puede realizar la R “libremente”•Dispositivos típicos: cámara operante.

Notas históricas sobre condicionamiento

instrumental

Notas históricas sobre C.I.: Thorndike

•Primer autor en investigarlo sistemáticamente.

•Tesis doctoral (1898). Inspiración darwiniana.

•Método: cajas-problema

•Aprendizaje por ensayo y error

•Ley del efecto.

Notas históricas sobre C.I.: Thorndike

Ley del efecto:

Si una respuesta en una situación estimular dada es seguida por un suceso satisfactorio o placentero, la relación entre la situación y la respuesta se fortalece, de forma que el organismo tendrá más tendencia a dar esa respuesta en esa situación. Si por el contrario va seguida de un suceso nocivo o desagradable, la respuesta tenderá a no darse.

Notas históricas sobre C.I.: Thorndike

Notas históricas sobre C.I.: Thorndike

Notas históricas sobre C.I.: Skinner

Concepto de operanteAportaciones metodológicas:

– Caja de Skinner (cámara operante)– Registro acumulativo– Etc. Etc.

Numerosos descubrimientosConductismo radicalLey del refuerzo

Notas históricas sobre C.I.: Skinner

Ley del refuerzo

Ciertos sucesos, cuando siguen consistentemente a una respuesta de un organismo, aumentan su probabilidad. Llamamos a esos sucesos “refuerzos”.

Condicionamiento clásico

Condicionamiento clásico

Algunos estímulos constituyen señales más o menos fiables de sucesos importantes para nosotros.

Mediante CC aprendemos, de forma inconsciente, a servirnos de ellas.

No confundir con los medios intelectuales de anticipación.

Condicionamiento clásico

•El organismo recibe un estímulo neutro seguido de un estímulo importante para él.

•Esto se repite una y otra vez

•El organismo aprende a dar una R, que antes no daba, al estímulo originalmente neutro.

Timbre … comidaTimbre … comidaTimbre … comida…Timbre … comida

Timbre RTimbre (nada)

Elementos del CC: Estímulo incondicionado (EI)

• Estímulo que suscita regularmente una R. no aprendida y medible en todos los miembros normales de una especie.

• Es decir, tiene importancia intrínseca.

• Ejemplos: Comida, descarga eléctrica, feromonas, golpe, quemadura, soplo de aire en los ojos, pinchazo, etc.

Elementos del CC: Respuesta incondicionada (RI)

• La R. no aprendida y medible suscitada por el EI de forma regular.

• Un EI puede suscitar más de una RI

• Ejemplos: huida, salivación, flexión, deglución, reflejo pupilar, náuseas...

Elementos del CC: Estímulo neutro/condicionado (EN/EC)

• Estímulo originalmente neutro • Es neutro en el sentido de que por sí mismo no suscita una R.

específica• Puede producir alguna respuesta genérica (R. de orientación,

parpadeos, etc.)• Durante el condicionamiento actúa como “señal” del EI: le

precede sistemáticamente.

Elementos del CC: Respuesta condicionada (RC)

• Respuesta que, una vez condicionado el organismo, resulta provocada por el EC.

• Frecuentemente (pero no siempre) es semejante a RI.

• En tales casos, la magnitud de RC es siempre inferior a la de RI.

Elementos del CC: Contingencia

• Relación estadística entre el EC y el EI por la cual el primero es más o menos fiable como predictor del segundo.

• Es lo mismo que en CI, sólo que aquí el vínculo es entre dos estímulos, en vez de entre una conducta y un consecuente.

• En CC, las contingencias de más magnitud producen siempre mejor aprendizaje que las más bajas.

Elementos del CC: tipos de contingencia

• Positiva total: EI siempre sigue a EC– EC es una señal perfecta de EI

• Positiva parcial: EI sigue a EC la mayoría de las veces, pero no todas– EC es una señal de EI, pero no perfecta.

• Negativa total: EI nunca sigue a EC. – EC es una señal perfecta de la ausencia de EI

• Negativa parcial: EI no sigue a EC la mayoría de las veces. – EC es una señal de la ausencia de EI, pero no perfecta.

• Contingencia nula: EC y EI van cada uno por su lado, sin relación alguna. La aparición de EC no nos dice nada sobre EI. Si aparece EC lo mismo puede aparecer EI que no.

Tipos de contingencia: ejemplos

• 9 de cada 10 veces que suena la campana, le damos un trocito de comida.

• Siempre que le pedimos algo y dice que “ya veremos” luego es que no.

• Cuando sale el sol entre las nubes, lo mismo me puedo encontrar el semáforo abierto que no.

• Si frunce el ceño de esa forma, lo más seguro es que no nos dé nada.

• Si suena el ruido del tubo, fijo que le cae pienso a la rata.

Fases del CC

• Adquisición: progresivo establecimiento de una RC al presentar seguidos EC y EI de forma repetida.

• Extinción: decaimiento de la RC al presentar el EC solo.

Generalización del CC

• Se refiere al hecho de que un organismo emita la RC ante estímulos algo diferentes del EC original

• Por ejemplo, si el EC es un tono de 200 Hz, un organismo puede emitir la RC ante un tono de 210 Hz

• Se tratará siempre de una R más débil que la que se da al EC original.

Discriminación en el CC

• Durante la adquisición se presentan dos ENs semejantes (por ejemplo, dos luces de diferente intensidad)

• Uno de ellos se empareja con el EI (y es por tanto el EC) mientras el otro no se empareja con EI.

• El organismo discrimina entre ambos estímulos: da la RC al verdadero EC y no al otro.

• Caso particular: “neurosis experimental”

Tipos de CC

• Según el carácter del EI:

– Apetitivo: Se usan EIs que naturalmente suscitan RIs de acercamiento, consumo, etc.

– Aversivo: se usan EIs que naturalmente suscitan RIs de huida, defensa, etc.

• Según el efecto conductual:

– Excitatorio: Produce una tendencia a responder al EC. • Se obtiene con contingencias positivas

– Inhibitorio: Produce una tendencia a no responder al EC.• Se obtiene con contingencias negativas.

Tipos de CC

• Muy importante: Existen situaciones de CC

– Excitatorias y apetitivas– Excitatorias y aversivas– Inhibitorias y apetitivas– Inhibitorias y aversivas.

(este punto es fuente típica de errores tontos en exámenes)

Tipos de CC: según la secuencia temporal

• Muy poco eficaz• La contigüidad no es la clave de la asociación.

Condicionamiento simultáneo

Tiempo

EI

EC

Condicionamiento simultáneo: EC y EI aparecen (comienzan) a la vez

Tipos de CC: según la secuencia temporal

• Muy eficaz• Para cualquier par de estímulos hay una demora que es

óptima

Condicionamiento de demora breve: EC aparece un poco antes que EI

Tiempo

EI

EC

Condicionamiento de demora breve

Tipos de CC: según la secuencia temporal

• Menos eficaz que el de demora breve en general, pero hay excepciones notables.

• En adquisiciones prolongadas, produce inhibición de demora.

Condicionamiento de demora larga: EC se inicia bastante antes que EI, hasta 2 o 3 minutos

Tiempo

EI

EC

Condicionamiento de demora larga

Tipos de CC: según la secuencia temporal

• Junto con demora breve, son los más eficaces en general.

Condicionamiento de huella: EC se inicia y termina antes de que aparezca EI. Hay, pues, un intervalo vacío (“de huella”) entre ellos.

Condicionamiento de huella

Tiempo

EI

EC

Tipos de CC: según la secuencia temporal

• Totalmente ineficaz. • A veces produce cierto efecto inhibitorio.• Contribuye a demostrar que no importa la contigüidad, sino

el valor de señal.

Condicionamiento hacia atrás: el EC se inicia después del EI.

Condicionamiento hacia atrás o retroactivo

Tiempo

EI

EC

Notas históricas sobre condicionamiento clásico

Ivan Pavlov

• Primer autor en investigar el CC sistemáticamente (ya era conocido como “secreciones psíquicas”)

• Premio Nobel (1904)

• Gran cirujano. Técnicas innovadoras

• Los”reflejos condicionados” como método para estudiar el cerebro.

Bechterev

• Pionero en el estudio del CC aversivo.

• Estudio típico con perros:– EC: sonido– EI: descarga eléctrica en una pata

– RC: Retracción de la pata al oir el sonido.