of 23 /23
Sesgos comportamentales en la educación Prueba experimental en Instituto Integral de Minas (Lavalleja, Uruguay) 7/9/2016

Sesgos y educación

Embed Size (px)

Text of Sesgos y educación

Sesgos comportamentales en la educacin

Sesgos comportamentales en la educacinPrueba experimental en Instituto Integral de Minas (Lavalleja, Uruguay) 7/9/2016

Marco Conceptual

Marco conceptualIntroduccinDistintas investigaciones en economa comportamental han aportado evidencia sobre la importancia que tiene en nuestro proceso factores psicolgicos como la dependencia de nuestras preferencias a referencias externas, la distorsin producida por la ansiedad frente al consumo presente, y el valor que damos a estmulos no financieros.Estos factores comportamentales pueden ser tan prevalentes como para generar conductas que no redunden en una mejora del bienestar personal contradiciendo por tanto los supuestos de racionalidad econmica(*).(*) Racionalidad econmica: sobre una base de preferencias ordenadas y mediante una funcin de utilidad completa en su dominio los agentes eligen aquello que maximiza su bienestar en forma consistente.

Marco conceptual Economa comportamentalHerbert Simon postul que nuestra capacidad de clculo se encuentra frecuentemente limitada por restricciones cognitivas y de tiempo en nuestra toma de decisiones lo que nos lleva a cometer errores. (Bounded Rationality)Daniel Kahnemann y Amos Tversky aportaron evidencia sustentando la visin de que estos lmites introducen errores no aleatorios en las decisiones de los agentes. (Prospect Theory)Estos sesgos comportamentales se producen por la activacin arbitraria de automatismos (heursticas) que influyen en nuestra toma de decisiones. Richard Thaler estudi la forma en que distintas estmulos activan estas heursticas incentivando decisiones alineadas con nuestros intereses de largo plazo. (Nudges)

Marco conceptualEducacinLos estudiantes toman decisiones referidas a su educacin que a veces redundan en una sub inversin en preparacin y un deterioro de bienestar a largo plazo.A partir de esa constatacin, varios comportamentalistas han estudiado la relacin entre el desempeo acadmico de los estudiantes y los sesgos comportamentales involucrados en las decisiones acadmicas. Simultneamente probaron el efecto de distinto tipo de nudges para mejorar el desempeo acadmico.En particular un estudio del NBER se detiene en tres intervenciones relacionadas entre otros con el sesgo presente.THE BEHAVIORALIST GOES TO SCHOOL:LEVERAGING BEHAVIORAL ECONOMICS TO IMPROVE EDUCATIONAL PERFORMANCE Steven D. Levitt, John A. List, Susanne Neckermann, Sally Sadoff Working Paper 18165 http://www.nber.org/papers/w18165 NATIONAL BUREAU OF ECONOMIC RESEARCH (June 2012)

Marco conceptualSesgo presenteEl sesgo presente refiere a la tendencia de las personas a ponderar desproporcionadamente los beneficios que estn ms cerca en el tiempo cuando son considerados trade-offs entre dos momentos futuros.Ese tipo de descuento intertemporal se resume en la teora de descuento hiperblico formulada por David Laibson que sugiere que el descuento que hacemos los humanos es inconsistente y no lineal. Es estudiado usualmente a travs de preguntas del tipo de: Prefieres recibir 100 pesos hoy o 120 pesos dentro de un mes? o Prefieres recibir 100 pesos dentro de un ao o 120 pesos dentro de un ao y un mes?. Los resultados muestran que las personas estn ms dispuestas a esperar un mes para obtener una gratificacin mayor si la espera ocurre en un futuro distante. Con una funcin de descuento hiperblico el valor que damos a beneficios futuros decrece muy rpidamente para pequeas postergaciones y ms lentamente para grandes postergaciones.

Marco conceptualThe Behavioralist Goes To SchoolEn su trabajo Levitt y sus coautores realizaron intervenciones con el objetivo de alterar la percepcin de los estudiantes con respecto a los beneficios resultantes por aprobar una prueba. Presentaron cuatro grandes conclusiones:Primero, encontraron una mejora sustancial de resultados frente a incentivos financieros y no financieros de cortsimo plazo.Segundo, los incentivos no financieros son considerablemente ms eficientes para los estudiantes ms jvenes que para los mayores.Tercero, todo el poder motivador de los incentivos se desvanece si los premios son entregados con un rezago.Cuarto, contradiciendo experimentos anteriores, enmarcar el estmulo como una prdida no modifica su eficacia.

Marco conceptualThe Behavioralist Goes To SchoolDiseo del experimento de Levitt et al: 5 rodadas en tres escuelas de baja performance en Chicago con jvenes de entre 7 y 16 aos entre 2009 y 2012Se plantearon estmulos en exmenes de evaluacin regular y que normalmente no tienen preparacin previa por parte de los estudiantesLos tests se realizan en computadoras y demoran entre 15 y 60 minutos y los resultados estn disponibles inmediatamenteAntes de comenzar la prueba se anuncia a los estudiantes un incentivo por aprobar el examen.Los incentivos fueron: (a) US$ 10 en efectivo, (b) US$ 20 en efectivo, (c) un trofeoEstos incentivos se formulan en tres modalidades: (a) Se entrega inmediatamente luego del test, (b) Se entrega un mes despus del test, (c) Se entrega antes del test y si el estudiante no llega al mnimo lo tiene que devolverEn el grupo de control no se ofrece incentivo aunque se da una charla motivadora

Marco conceptualThe Behavioralist Goes To SchoolResultados medidos a partir del puntaje sacado en la prueba:1.Los estmulos econmicos inmediatos y grandes provocan mejoras en los resultados, mientras que los estmulos pequeos, no.2.Los estmulos no financieros tambin impactan en la performance 3.Los estmulos presentados como prdida o ganancia tienen impacto similar4.Los estmulos entregados con delay no tienen impacto significativo5.Los estudiantes ms jvenes responden ms a estmulos no monetarios6.Los tests de matemticas fueron ms sensibles que los de lectura7.La evidencia sugiere que los hombres son ms susceptibles a estos estmulos que las mujeres8.Las intervenciones no tuvieron efectos relevantes sobre la performance en los exmenes tomados en fechas posteriores

Marco conceptualThe Behavioralist Goes To SchoolEl estudio examina las fuentes potenciales de la sub-inversin en educacin usando varios esquemas de incentivos inspirados en los hallazgos recientes de la Economa Comportamental. Exploramos los efectos de corto plazo de incentivos al efuerzo y la performance de los estudiantes, variando el tamao y tipo de recompensa as como el contexto en el que ellas son presentadas. Adicionalmente ofrecimos premios inmediatamente y con un rezago. Encontramos promisorios aportes comportamentales al herramental de los gestores de polticas educativas. Es de destacar que la bsqueda de premios inmediatos es fundamental dado el descuento observado en los estudiantes. La mayor parte de las recompensas que se obtienen de la inversin en educacin vienen con un notable rezago, y esto puede conducir a una sub-inversin potencialmente significativa en las pequeas tareas en las que un estudiante debe involucrarse diariamente para acumular capital humano. Sin incentivos de corto plazo, es probable que la base de esfuerzo en muchos estudiantes sea baja.Existe cierta preocupacin porque este tipo de incentivos generen un desplazamiento de cierta motivacin intrnseca. Sin embargo, como es sealado en varios trabajos, las recompensas externas pueden ayudar a estimular la motivacin intrnseca y la formacin de hbitos (Lepper et al 1973, Cameron et al 2005, Bettinger 2010). En familias pudientes los padres habitualmente brindan a sus hijos este tipo de recompensas de corto plazo, incluyendo retornos positivos, elogios, e incentivos explcitos. Es menos probable que padres de familias de bajos ingresos ofrezcan a sus hijos incentivos por su esfuerzo y logros (Gottfried et al 1998), lo que puede afectar la lucha de los maestros para mantener la motivacin y el foco en las escuelas de contextos econmicos bajos. Si las recompensas inmediatas aumentan la utilidad estimada de invertir en educacin, un sistema adecuadamente estructurado de recompensas externas puede potencialmente crear (ms que desplazar) motivacin intrnseca.Tales recompensas de corto plazo pueden resolver problemas relativos a fallas en la planificacin, y a una limitada comprensin de la funcin de produccin de la educacin. Los estudiantes pueden no dominar los pasos necesarios para mejorar sus logros en un test que tendr lugar dentro de seis meses. Sin embargo, pueden responder efectivamente a estmulos de performance basados en tareas intermedias como aprender la leccin del da, completar un deber, o enfocarse en un test de prctica.La aplicacin continua de contribuciones relevantes de la economa comportamental a materias educativas puede ayudar a los maestros en la bsqueda de soluciones frescas para los problemas de las escuelas urbanas. Estas contribuciones comportamentales pueden fortalecer el impacto y la eficiencia de las intervenciones en educacin. Tambin pueden usarse como bases para los empiricistas y experimentalistas que con un amplio espectro de datos y oportunidades experimentales estn en una posicin nica para examinar teoras hasta ahora no testeables. Claramente, sin embargo, teora y trabajos prcticos deben trabajar simbiticamente ha habido pocos avances tericos que combinen los mejores aspectos de las contribuciones comportamentales con materias propias de la educacin. En ese espritu, esperamos que nuestro estudio estimule nuevos trabajos combinando psicologa y economa, que no solamente permita profundizar nuestra comprensin de tpicos empricos relativos a educacin, pero tambin profundice nuestra comprensin de las importantes preguntas que enfrenta en el campo. THE BEHAVIORALIST GOES TO SCHOOL:LEVERAGING BEHAVIORAL ECONOMICS TO IMPROVE EDUCATIONAL PERFORMANCE Steven D. Levitt, John A. List, Susanne Neckermann, Sally Sadoff

Experimento en Instituto de Educacin Integral de Minas

Instituto Integral de MinasDescripcinInstituto privado y laico de educacin primaria y secundaria (ciclo bsico) fundado en 1988 por dos maestras. Inicialmente funcion como un jardn de infantes y en 1994 comenz a dar clases de primaria y en 1998 habilit secundaria.Cuenta actualmente con una poblacin de aproximadamente 300 estudiantes con una divisin por ao desde jardn de infantes hasta tercero de liceo.Se encuentra en la ciudad de Minas a 120 kms de Montevideo (capital de Uruguay). Minas tiene aprximadamente 40 mil habitantes y es la capital y ciudad ms poblada del departamento de Lavalleja.La oferta de enseanza en la ciudad de Minas es mayoritariamente pblica.

Instituto Integral de MinasDiseo experimentalPropsito: Verificar los hallazgos de Levitt et al en referencia al desempeo acadmico de los estudiantes en relacin con estmulos comportamentales.Metodologa: 5 ejercicios utilizados en las Pruebas Pisa de 2012 propuestos a estudiantes de segundo y tercer ao.Parte de la Encuesta utilizada en las Pruebas Pisa de 2012 para evaluar la relacin del estudiante con el centro de estudio y las creencias referidas a s mismo.La Encuesta fue presentada en sobre separado para ser llenada una vez finalizada la prueba.Divisin aleatoria en dos grupos: intervencin y control

Instituto Integral de MinasDiseo experimentalMetodologa:Se compararon los resultados de cada grupo realizando un ANOVA entre el grupo con intervencin y el grupo de control.Se compararon los resultados obtenidos con los promedios PISA registrados en las pruebas y la encuesta en Uruguay y en OCDE.Muestra:27 alumnos18 de segundo ao y 9 de tercero12 hombres y 15 mujeresPrueba:Matemtica: 3 pruebas con tres preguntas cada una de niveles 1 a 6.Letras: 2 pruebas con dos preguntas cada una de niveles 1 y 4Total: 13 respuestasEncuesta50 afirmaciones ordenadas en 4 grandes reas: relacin docente y alumno,sentido de pertenencia,actitudes hacia la educacin, determinacin, motivacin y confianza en si mismos.

Instituto Integral de MinasIntervencinSe dividi aleatoriamente al grupo en dos sub grupos (intervencin y control) y se les someti a la misma prueba generando una intervencin sobre uno de los grupos.Al comenzar la prueba se present la siguiente consigna a ambos grupos: Estn por tomar un examen basado en las pruebas PISA del ao 2012 que sirven para comparar el desempeo acadmico de estudiantes de vuestra edad en Uruguay y el mundo. Por favor den lo mejor de ustedes mismos para responder estas preguntas. Tendrn 40 minutos para completar la prueba.

Al grupo con intervencin se le plante adicionalmente:Si alcanzan un resultado de 60% van a llevar hoy para su casa una medalla como esta [MOSTRAR MEDALLA]. Corregiremos la prueba una vez terminen y los que aprueben recibirn la medalla una vez las tengamos corregidas

Instituto Integral de MinasResultadosPruebaEn trminos generales el porcentaje de respuestas correctas fue mayor a los del promedio de Uruguay y a los del promedio de la OCDE.En trminos de no respuesta a nivel de cada pregunta, los resultados fueron en general mejores que el promedio de Uruguay aunque peores que los del promedio de la OCDE.En todos los casos los resultados fueron peores que los mejores resultados de la OCDE.EncuestaLos cuatro grandes vectores relevados en la encuesta no presentaron significativas diferencias con los promedios de Uruguay ni de la OCDE.

Instituto Integral de MinasResultadosA nivel general:El grupo de control y el grupo con intervencin no presentaron resultados significativamente diferentes al considerar toda la muestra Segn ao cursado de estudiosEl grupo de control y el grupo con intervencin no presentaron resultados significativamente diferentes al considerar los grupos segn ao cursado de estudios (segundo y tercero)Segn materia de la pruebaEl grupo con intervencin present resultados significativamente mejores al considerar los resultados de las pruebas de letras [+21%;F(1,25) = 4,58; p=0,042] pero no present resultados significativamente diferentes al considerar los resultados de las pruebas de matemticas.Dentro de las pruebas de letras, el grupo con incentivo present resultados significativamente mejores para estudiantes de tercero [+33%; F(1,7) = 7,78; p=0,027] y masculinos [+25%; F(1,10) = 23,3; p=0,001] aunque no para estudiantes de segundo y femeninos.Segn grado de dificultadEl grupo de control y el grupo con intervencin no presentaron resultados significativamente diferentes al considerar el nivel de dificultad de la prueba

Instituto Integral de MinasComparacin con hallazgos de Levitt et al.Los incentivos monetarios grandes e inmediatos generan una mejora en los resultados de los tests. Los incentivos monetarios pequeos no.Los incentivos no financieros tambin impactan en los resultados de los tests.Los incentivos presentados como prdidas y ganancias tienen resultados similares.Los premios presentados con un rezago no tienen impacto en la performance de los estudiantes.Los estudiantes ms jvenes son ms propensos a responder a los incentivos, especialmente los no financieros.Las intervenciones en los tests de matemtica fueron ms eficaces.La evidencia sugiere que los nios responden ms que las nias.Los premios no perjudicaron los desempeos futuros.

Evidencia similarEvidencia contrariaEvidencia similar

Instituto Integral de MinasComparacin de resultados con rasgos de personalidadEn distintos estudios en que se relacionan aspectos de personalidad y desempeo acadmico se ha determinado que tanto la perseverancia (Angela Duckworth) como las convicciones sobre el desarrollo de sus competencias para obtener resultado (David Yeager) juegan un rol importante en el desempeo acadmico de los estudiantes.

Instituto Integral de MinasComparacin de resultados con rasgos de personalidadSi bien la investigacin no incluy un test de personalidad, en la encuesta se incluyeron dos preguntas que permiten reflexionar en torno a los rasgos de personalidad.Expresando su nivel de identificacin con 5 afirmaciones, los estudiantes evidenciaban su autopercepcin frente a la persistencia y a su control sobre el xito.Dadas las caractersticas del experimento no es posible concluir sobre al relacin entre el desempeo acadmico y la personalidad. Sin embargo se puede verificar la efectividad de la intervencin segn la autopercepcin en los dos aspectos relevados.

Instituto Integral de MinasComparacin de resultados con rasgos de personalidadSe enfoc el anlisis en los resultados de pruebas en letras.Para los estudiantes que reportaron niveles mayores al promedio en cuanto a su autopercepcin referida a su persistencia o a su control del xito no presentaron diferencias estadsticamente significativas entre el grupo de control ni el con intervencin.Sin embargo, el grupo con intervencin de los estudiantes con autopercepcin inferior al promedio en ambos conceptos present resultados mejores y estadsticamente diferentes (Persistencia: +35%; [F(1,13) = 5,05; p=0,043]; Control del xito +51%; [F(1,11) = 7,18; p=0,021])La evidencia sugiere que las intervenciones pueden ser ms efectivas en aquellas personalidades que ms lo necesitan.

Sntesis y conclusiones

Sntesis y ConclusionesDadas las limitaciones del experimento no fue posible reproducir el amplio set de conclusiones que Levitt et al. abarcan en su estudio.Sin embargo, existe evidencia que se alinea con ese estudio y que sugiere que los estudiantes uruguayos podran ser susceptibles a mejorar su desempeo en cierto tipo de pruebas como respuesta a la presencia de estmulos comportamentales en las mismas.Adicionalmente se obtuvo evidencia preliminar que sugiere que estas intervenciones podran tener mayor impacto en estudiantes con menor perseverancia y menor percepcin de autocontrol del xito.