La eficacia y eficiencia de los cursosmasivos abiertos en línea (MOOCs) para el desarrollo de

aprendizajes auténticos

Avances Mayo 2017 (Trabajo de Campo)

Asesor: Dra. María del Rosario Hernández Castañeda

Jesús Antonio Zatarain de Losada

Estructura presentación

❖ Preguntas de investigación❖ Inducción analítica y ciclo de políticas públicas❖ Principios inducción analítica y sus implicaciones estudio❖ Campo, lógica experimental e inducción analítica❖ Laboratorio de investigación - Desarrollo Kambaal❖ Situaciones experimentales y diseño de MOOCs❖ Definición e integración muestra❖ Ejecución experimento piloto❖ Resultados preliminares

Preguntas de investigación

Contexto estudio actual

●●

●●

●●

Inducción analítica y ciclo de políticas públicas

Inducción analítica y ciclo de políticas públicasI. Identificación ydefinición problema

II. Diseño de lapolítica

III. Implementaciónpolítica

IV. Evaluación

V. Redefinición

Se suele medir impactos cuantitativamente

Principios inducción analítica

Citado por Hammersley, 1998

… Like MacIver, Znaniecki recognizes that for some purposes the statistical method increases the reliability and precision of knowledge…It gives us only tendencies and probabilities, often about what are only superficial features of the phenomena of interest (p. 106)

It is as if a physicist, instead of measuring temperature by the

expansion of certain bodies, counted the bodies which expand as

against those which do not, in order to find out approximately how

true is the statement that bodies expand.

(Znaniecki 1934:312)

Posibilidades y límites investigación cuantitativa● Incrementa confiabilidad y precisión

del conocimiento.● Esto sólo ofrece una vista superficial

sobre tendencias y probabilidades.● Usos equivocados métodos

estadísticos

“Esto es como si un físico, en lugar de medir la temperatura de los cuerpos que se dilatan, cuente los cuerpos que se dilatan y contraste con los que no lo hacen, para encontrar aproximadamente como la proposición sobre la dilatación de los cuerpos es correcta.”

Principios inducción analítica

Citado por Hammersley, 1998

Znaniecki starts from the position that pure research, which he conceivesas research concerned with producing theoretical laws (p. 162),

“is the necessary foundation of all useful legislative and efficient social

reform”.(Znaniecki 1928:307)

The goal of sociology is to identify laws which state that (p. 162)

‘whenever and wherever a certain cause A occurs, a certain effect B

must inevitably follow unless interfered with by some other definite effect D of some other equally definite

cause C”(Znaniecki 1928:309)

El conocimiento sociológico debe ser la base de la reforma social● No basta el conocimiento teórico● Debe ser útil al diseño de políticas

encaminadas reforma social

(La realidad es compleja y multifactorial) El objetivo de la sociología es identificar leyes que establezcan relaciones:

“cuando y donde una cierta causa A ocurre, un cierto efecto B debe inevitablemente seguir, a menos que esté interferido por algún otro efecto específico D de alguna otra causa C igualmente precisa”

(Traducción Valeria Dabenigno)

¿Por qué los MOOCs son eficaces y eficientes?

Para sus defensores en términos simple:

Eficiencia: … aunque los recursos para su desarrollo son altos el modelo de diseño educativo para implementación permite un relación 1 a n estudiantes, sean 50 o 50,000 el trabajo de asesor se mantiene constante.

Eficacia: … en cuanto a sus metas y objetivos, permite que miles tengan acceso a educación de alta calidad (producción contenidos, universidades de élite)

¿Por qué los MOOCs NO son eficaces y NI eficientes?

Para sus detractores:

Eficiencia: … aunque la relación se de 1 a n estudiantes, sean 50 o 50,000 … queda cuestionada si su eficiencia terminal es del 5 al 7 %

Eficacia: … el tener acceso a material educativo de calidad y profesores de élite, no se traduce en aprendizajes en la mayoría de los casos 95 % al 93 %

Estudios que han profundizado en la eficacia y eficiencia.

Un modelo tipo de informes tanto de Coursera como de Edx, describir lo que sucede en los MOOCs, en relación con la eficiencia terminal coinciden con base en análisis estadístico el estudiante promedio que tienen éxito en los MOOCs son:

● Los hombres de 25 a 35 años● Con grado de licenciatura● Dominio nativo idioma inglés● Viven en el hemisferio norte● Certificado● Ambiente positivo (Aprendizaje requeridos empleo y

grupo de apoyo)

Los ignorados del modelo (Casos negativos)

Muhammad Shaheer Niazi (2013)

Modelo estadístico éxito.● Los hombres de 25 a

35 años● Con grado de

licenciatura● Dominio nativo

idioma inglés● Viven en el

hemisferio norte● Certificado● Ambiente positivo

(Aprendizajerequeridos empleo ygrupo de apoyo)

● 12 años● Secundaria● Idioma nativo: Urdu● Pakistán● No le interesa

certificado (aunquelo quisiera)

● Ambiente hostil:amenaza talibanes ygobierno

Terminó con mención: Intro to Physics, Intro to Computer Science y Intro to Statistics

Lo ignorados del modelo (Casos negativos)

Social Psychology by Scott Plous (Coursera)2014 Day of Compassion Award: Qian Zhang

● 19 años (mujer)● Estudiante

licenciatura● Idioma nativo: Chino● China● No le interesa

certificado● Ambiente positivo

La mejor en una generación de 200,000, compitió con 800 que obtuvieron puntaje perfecto. Ganadora premio 2014 compasión

Campo, lógica experimental y la inducción analítica

Citado por Hammersley, 1998

The logic of the experiment consists in simplifying the conditions in which certain facts occur; the scientist builds a definite and limited

system of objects, cut off from irrelevant external influences, and investigates the changes which

are going on in this system, trying to determine their causal relations. The sociologist can do something similar with less difficulty, for he

does not need to build closed systems artificially; he finds them ready-made in social

life. Man in his individual and collective behavior is continually constructing and

reconstructing limited systems of objects which he intentionally tries to keep undisturbed by

external influences. All the scientist needs to do is to determine by exact observation and

analysis what these systems are, and to study by comparative method the processes which occur

within them.

(Znaniecki 1928:311)

“La lógica del experimento consiste en simplificar las condiciones en las que ciertos hechos ocurren ; el científico construye un sistema de objetos definidos y limitados, aislados de influencias externas irrelevantes, e investiga los cambios que suceden en este sistema, tratando de determinar sus relaciones causales. Los sociólogos pueden hacer algo similar con menos dificultad porque no necesitan construir sistemas cerrados artificialmente; éstos se encuentran ya listos [ready-made] en la vida social. El hombre, en su comportamiento individual y colectivo, está continuamente construyendo y reconstruyendo sistemas de objetos limitados que intencionalmente trata de mantener fuera de la distorsión de las influencias externas. Todos los científicos necesitan determinar mediante observaciones y análisis qué son estos sistemas, y estudiar mediante el método comparativo los procesos que ocurren dentro de ellos”

(Traducción Valeria Dabenigno)

Conceptualización laboratorio aprendizaje

Es un sistema de objetos definidos y limitados, está compuesto por objetos instruccionales diseñado, ordenadas y dispuestos en un ambiente con la intención de facilitar el aprendizaje y cobra sentido en la interacción de los estudiantes con los objetos y colectivos (otros estudiantes y asesor).

Tanto los objetos, el ambiente e incluso otros estudiantes son construidos por los sujetos individuales (ya que respondemos a las representaciones de la realidad, no una realidad objetiva independiente de nuestra interpretación).

Es laboratorio porque permite controlar variables del ambiente dentro del sistema y permite realizar observaciones y análisis exhaustivos de casos negativos a partir de registros cuantitativos, complementado con datos cualitativos.

Situación experimental y Laboratorio aprendizaje Los casos negativos:

- Estudiantes preuniversitarios- Los no terminan pero trabajan en

el curso (40%)- Patrones de trabajo

Requerimientos:- Trayectorias específicas- Registro interacción objeto

instruccional:- Visita- Trabajo con el objeto- Tiempo interacción- Valoración utilidad y claridad- Comentarios - recomendación

- Asignación aleatoria a situaciónexperimental

Consideraciones situación experimental:

● Inscripción voluntaria.(Invitacióndigital)

● Cursos autogestivos. Prácticascomunes observadas en eldesarrollo de MOOCs (Coursera,Udacity, Edx y Khan Academy)procedimentales y humanidades.

● Cursos abiertos● Asesoría asincrónica● Estructura y navegación similar

Los MOOCs en Kambaal. Razonamiento Verbal y Redacción Indirecta.

Los MOOCs en Kambaal. Razonamiento Verbal y Redacción Indirecta. Modelo actividad video interactivo

Los MOOCs en Kambaal. Razonamiento Verbal y Redacción Indirecta. Modelo actividad presentación - ejercicio (Deductivo)

Los MOOCs en Kambaal. Razonamiento Verbal y Redacción Indirecta. Modelo actividad lectura de compresión

Los MOOCs en Kambaal. Razonamiento Verbal y Redacción Indirecta. Exámenes de práctica (Similares pretest - midterm - final exam)

Diseño responsive

Los MOOCs en Kambaal. Razonamiento Matemático. Modelo actividad (Concepto básicos - ejercicio - retroalimentación en video)

Diseño responsive

Los MOOCs en Kambaal. Razonamiento Matemático. Modelo actividad (Series de ejercicios de autoevaluación)

Diseño responsive

Los MOOCs en Kambaal. Razonamiento Matemático. Modelo actividad (Ejercicios paso a paso)

Diseño responsive

Inscritos en Kambaal PAA

138 Estudiantes han completado la encuesta inscripción

Perfil demográfico estudiantes

134 Aspiran a la UdeG y 4 a otras Universidades. N = 138

Perfil académico estudiantes

Resultados preliminares (Dimensión Pedagógica - Eficacia y eficiencia) MOOC Razonamiento Matemático

Claridad Utilidad Visitas

Act. 1.1 Problemas básicos de estadística 80% 82.50% 324

Act. 1.2 Problemas intervalos de tiempo 86.70% 90% 117

Act. 1.3 Cálculo de perímetro y área 100% 80% 78

Act. 1.4 Análisis de patrones y secuencias aritméticas 100% 100% 71

Ejercicio Autoevaluación I Semana Uno 80% 80% 89

Act. 2.1 Problemas con ecuaciones de primer grado 0% 0% 48

Act. 2.2 Problemas matemáticos y lenguaje algebraico 0% 0% 25

Act. 2.3 Problemas razones y proporciones 80% 80% 22

Act. 2.4 Problemas en relación con edades y algebra 60% 60% 16

Análisis paso a paso problemas sobre edades 93.30% 90% 16

Ejercicios autoevaluación sobre problemas de edades 0% 0% 15

Claridad Utilidad Visitas

Act. 1.1 Completar oraciones, importancia contexto 100% 100% 143

Act. 1.2 Completar oraciones, identificar palabras claves 100% 80% 54

Act. 1.3 Estrategia para reactivos de completar oraciones 100% 90% 34

Act. 1.4 Conectores gramáticales 100% 80% 34

Ejercicio autoevaluación semana uno. 100% 100% 28

Act. 2.1 Tres puntos claves para la prueba: Leer, Leer y Leer 0% 0% 14

Act. 2.2 Cinco consejos para aprender a leer rápido 0% 0% 24

Act. 2.3 Compresión Lectora: información explícita. 0% 0% 22

Act. 2.4 Compresión Lectora: información implícita 100% 100% 13

Act. 2.5 Lectura compresión: ... sobre la levedad del ser 0% 0% 4

Act. 2.6 Lectura compresión: ... sobre entidades matemáticas 0% 0% 5

Resultados preliminares (Dimensión Pedagógica - Eficacia y eficiencia) MOOC Razonamiento Verbal

Resultados preliminares (Dimensión Ontológica - Actividad estudiantes)

Comentario finalLas estadísticas es el paso preliminar, para describir el fenómeno e iniciar con la identificación de casos negativos.

Objetivos pilotaje actual:- Probar y mejorar interface- Puesta a punto actividades- Línea base desempeño estudiantes- Reporteador semantic tracking - interacción

estudiante objeto- Profundizar casos negativos interesantes- Examen admisión 21 de Mayo...