33
UNIVERSIDAD CATÓLICA DE TEMUCO UNIVERSIDAD CATÓLICA DE LA SANTÍSIMA CONCEPCIÓN. INFORME N° 4 (8D) VALIDACIÓN DE INSTRUMENTO DE MONITOREO – ANÁLISIS DE MONITOREO DE IMPLEMENTACIÓN DEL MODELO. Análisis y sistematización de información con respecto a procedimientos y dispositivos que permitirán monitorear la implementación del nuevo modelo curricular en un marco de aseguramiento de la calidad y considerando niveles de satisfacción.

PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

  • Upload
    others

  • View
    1

  • Download
    0

Embed Size (px)

Citation preview

Page 1: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

UNIVERSIDAD CATÓLICA DE TEMUCO UNIVERSIDAD CATÓLICA DE LA SANTÍSIMA

CONCEPCIÓN.

INFORME N° 4 (8D)

VALIDACIÓN DE INSTRUMENTO DE MONITOREO – ANÁLISIS DE MONITOREO DE IMPLEMENTACIÓN DEL

MODELO.Análisis y sistematización de información con respecto a procedimientos y dispositivos que

permitirán monitorear la implementación del nuevo modelo curricular en un marco de aseguramiento de la calidad y considerando niveles de satisfacción.

Fernando Reyes ReyesConsultor.

Concepción, Octubre de 2012.Fecha actualización: 19 de Octubre de 2012.

Page 2: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

INDICE

Pág. I. GENERALIDADES..............................................................................................................................4

II. RESULTADO DE LA EVALUACIÓN....................................................................................................6

2.1. Características generales de la muestra......................................................................................6

2.2. Resultados escala de Satisfacción del usuario.............................................................................6

2.2.1. Descripción de la escala....................................................................................................6

2.2.2. Propiedades psicométricas de la escala...........................................................................7

2.2.3. Resultados aplicación de la escala....................................................................................8

2.3. Resultados escala Evaluación del Plan de apoyo a estudiantes.................................................11

2.3.1. Descripción de la escala..................................................................................................12

2.3.2. Propiedades psicométricas de la escala.........................................................................12

2.3.3. Resultados aplicación de la escala..................................................................................13

2.4. Resultados escala perfeccionamiento académico y contrataciones..........................................16

2.4.1. Descripción de la escala..................................................................................................16

2.4.2. Propiedades psicométricas de la escala.........................................................................17

2.4.3. Resultados aplicación de escala......................................................................................17

III. COMENTARIOS FINALES..............................................................................................................20

IV. APENDICE....................................................................................................................................21

Evaluación de monitoreo y satisfacción de usuarios. Página 2 de 26

Page 3: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

I. GENERALIDADES.

Los resultados presentados en este informe corresponden a los datos generados a

partir de los instrumentos aplicados con el objeto de recoger información con respecto a

monitoreo de la implementación de algunas acciones del plan curricular en la UCT y la

UCSC. Los instrumentos aplicados como evaluación de seguimiento corresponden a los

generados por el Consultor Víctor San Martín contenidos en un informe de propuesta de

monitoreo y seguimiento, los que fueron revisados y corregidos por el equipo del

proyecto hasta contar con una versión final que es la que se aplicó. Este informe incluye la

información generada por tres de los instrumentos elaborados:

1. Encuesta sobre satisfacción del usuario:

Corresponde a escala likert de 11 afirmaciones que procura evaluar la

percepción de los estudiantes de distintos aspectos de la implementación del

pan curricular.

2. Encuesta plan de apoyo a los estudiantes:

Escala likert de 14 afirmaciones que evalúa la percepción y el grado de

satisfacción que tienen los estudiantes en relación a las distintas acciones del

plan de apoyo a los estudiantes en el primer año.

3. Encuesta sobre perfeccionamiento académico y contratación de personal docente:Escala likert de 13 afirmaciones que avalúa la percepción que tienen los

docentes de la carrera respecto del plan de perfeccionamiento docente y de la

contratación de personal docente según los nuevos requerimientos del plan

curricular.

Evaluación de monitoreo y satisfacción de usuarios. Página 3 de 26

Page 4: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

Debido a que los instrumentos fueron creados ad hoc para el proyecto ya que

procuran evaluar la percepción de profesores y estudiantes respecto a la implementación

de algunas de las acciones contenidas en el nuevo plan curricular, se evalúa dos aspectos

en relación a sus propiedades psicométricas, el primero está referido a la validez del

instrumento, específicamente su validez de contenido, para ello todos los instrumentos

fueron revisados y discutidos por el equipo hasta adecuar su redacción, su cantidad en

función de lo que se pretendía evaluar y la pertinencia con las acciones ya implementadas

del plan curricular. A su vez, como resultado de la aplicación, se pudo contar con una

muestra real de evaluados que permitió calcular una medida de confiabilidad del

instrumento, en este caso y debido a que el instrumento era una escala para la cual existía

solo una aplicación, se estimó el coeficiente de consistencia interna Alfa de Cronbach.

El presente informe incluye los resultados de dichas evaluaciones en una muestra

de estudiantes de ambas universidades correspondiente fundamentalmente a estudiantes

de ingreso 2012 en ambas universidades y algunos ingresados en el año 2011, en el caso

de la UCT, ya que dicha universidad lleva dos años de implementación del nuevo

programa curricular.

Los resultados, de la evaluación anteriormente señalada, se presentarán en el

orden que se indica:

1. Características generales de la muestra evaluada.

2. Resultados encuesta satisfacción del usuario.

3. Resultados encuesta plan de apoyo a los estudiantes.

4. Resultados de la encuesta sobre perfeccionamiento académico y contratación de

personal docente.

Evaluación de monitoreo y satisfacción de usuarios. Página 4 de 26

Page 5: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

II. RESULTADO DE LA EVALUACIÓN.

2.1. Características generales de la muestra.

La muestra total de participantes de esta evaluación corresponde a un total de 177

estudiantes y 14 docentes. Debido a que los estudiantes que respondieron los

instrumentos no siempre fueron los mismos, o no pertenecían a una única promoción de

ingreso, la cantidad en cada instrumento para cada universidad varía. La cantidad de

evaluaciones por universidad se presenta en la siguiente tabla.

Tabla 1.Frecuencia de docentes y estudiantes evaluados por universidad.

UCT (n=93) UCSC (n=72)Escalas aplicadas f % f % Total1. Satisfacción usuario 108 61 69 39 1772. Plan de apoyo estudiantes 63 46.3 73 53.7 1363. Perfeccionamiento docente 14 -- -- -- 14

2.2. Resultados escala de Satisfacción del usuario.

2.2.1. Descripción de la escala.

La escala de satisfacción corresponde a una escala tipo likert de 11 ítems que se

evalúan en cinco niveles de Totalmente en desacuerdo (1), a totalmente de acuerdo (5).

Los ítems estaban orientados a evaluar la satisfacción de los usuarios respecto a los

servicios asociados a la formación académicas de ambas universidades, abarcando

aspectos referidos al cumplimiento de las actividades académicas programadas, la

Evaluación de monitoreo y satisfacción de usuarios. Página 5 de 26

Page 6: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

existencia de recursos bibliográficos y los servicios con que cuentan. A su vez evaluaban

aspecto de recursos humanos como personal docente y administrativo.

2.2.2. Propiedades psicométricas de la escala.

Debido a que las escalas fueron construidas ad hoc para evaluar los diversos

aspectos considerados en el proyecto, previo a su aplicación definitiva se evaluó

fundamentalmente su validez y con los datos de la aplicación se evaluó su confiabilidad. La

evidencia de validez en este caso correspondió a validez de contenido la que se estableció

a través de juicio de expertos, por lo que luego de construidos el banco de ítems originales

en base a los objetivos de la fase del proyecto que se procuraba evaluar, fueron revisados

por profesores de la carrera e investigadores, ajustando fundamentalmente aspectos

referidos a la redacción de los ítems, formato de la escala, pertinencia con los aspectos a

evaluar, e instrucciones. Finalmente el instrumento que se aplicó es el resultado de la

revisión que se hiciera de las versiones preliminares del mismo.

Luego de aplicado el instrumento se evaluó la confiabilidad de la escala, para ello

se estimó la Confiabilidad de Consistencia interna a través de Coeficiente Alfa de

Cronbach, el coeficiente puede oscilar entre 0 y 1, y en términos convencionales se

considera que si este se encuentra sobre 0,7 la prueba es confiable. En el caso de la escala

de satisfacción, en base a 173 estudiantes que respondieron, se obtuvo un alfa de

Cronbach de 0.81, por lo que se considera que este instrumento es confiable. Como se

puede observar en la tabla siguiente, todos los ítems muestran una correlación moderada

con el puntaje total de la prueba, a su vez el coeficiente alfa de Cronbach si se elimina

alguno de los ítems oscila entre 0.78 y 0.81, indicadores que se consideran satisfactorios y

ratifica la consistencia interna de la escala, no habiendo ningún ítem que convenga

eliminar. Los indicadores de los ítems de la escala se presentan en la tabla siguiente.

Evaluación de monitoreo y satisfacción de usuarios. Página 6 de 26

Page 7: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

Tabla 2Media, varianza, correlación elemento-prueba total y alfa de

Cronbach si se elimina un elemento para la escala de satisfacción.

ítems

Media de la escala si se elimina el elemento

Varianza de la escala si se elimina el elemento

Correlación elemento-

total corregida

Alfa de Cronbach si se elimina el

elementop1 39,65 30,519 ,490 ,795p2 39,96 29,039 ,546 ,788p3 39,49 28,635 ,475 ,796p4 39,99 27,418 ,494 ,795p5 39,84 28,322 ,461 ,798p6 39,41 29,115 ,600 ,784p7 39,80 29,034 ,475 ,795p8 39,46 30,343 ,535 ,792p9 39,11 31,296 ,440 ,800p10 39,34 29,889 ,502 ,793p11 39,68 30,941 ,307 ,812

Nota: Los ítems están numerados en el orden en que fueron presentados.

2.2.3. Resultados aplicación de la escala.

Para presentar los resultados de la aplicación de la escala, se presentará los valores

de media y desviación estándar para cada uno de los ítems para la muestra total, y luego

la comparación entre los distintos indicadores por universidad.

Al observar la media de los ítems, ésta oscila entre 3.58 (ítem 4) y 4.45 (ítem 9),

considerando que los ítems fueron tabulados con puntajes de 1 (totalmente en

desacuerdo) y 5 (totalmente de acuerdo), es posible concluir que en todos los ítems

evaluados existe un alto grado de acuerdo, lo que implica para la orientación de los ítems

de la escala que el nivel de satisfacción percibido es fundamentalmente satisfactorio. El

elemento menos valorado corresponde al ítem 4 que evalúa servicios, sin embargo,

debido a que el ítem es inclusivo de múltiples servicios, no es posible saber si existe mayor

insatisfacción con servicios como el casino o la existencia de áreas verdes. En el extremo

Evaluación de monitoreo y satisfacción de usuarios. Página 7 de 26

Page 8: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

de mejor evaluación de satisfacción se encuentra la alta valoración que tienen de los

docentes de la especialidad.

Tabla 3

Media y desviación estándar de los ítems de la escala de satisfacción.

Ítems M D.E.1 La gestión académica de las actividades curriculares se realiza satisfactoriamente. 3.92 0.732 La gestión administrativa de las actividades curriculares se realiza satisfactoriamente 3.62 0.883 La infraestructura (salas de clase, laboratorios de idiomas, etc.) de la carrera es adecuada

para el desarrollo de las actividades curriculares 4.09 1.04

4 Los servicios de apoyo al estudio y al estudiante son adecuados (casinos, áreas verdes, lugares de trabajo en equipo, servicio de bienestar, etc.)

3.58 1.19

5 Los recursos bibliográficos son adecuados y suficientes para el desarrollo de las actividades curriculares

3.73 1.11

6 Los recursos materiales (computadores, proyectores digitales, sistemas de audio, etc.) de la carrera son adecuados para el desarrollo de las actividades curriculares

4.15 0.82

7 El personal docente y administrativo es suficiente para atender las demandas del nuevo Plan Curricular

3.76 0.98

8 Existe un adecuado acompañamiento docente en las distintas actividades curriculares 4.10 0.719 Los docentes del área de especialidad poseen una sólida formación para desarrollar las

competencias del perfil de egreso4.45 0.67

10 Los docentes del área pedagógica poseen una sólida formación para desarrollar las competencias del perfil de egreso

4.22 0.81

11 Los docentes del área teológica- filosófica poseen una sólida formación para desarrollar las competencias del perfil de egreso

3.89 0.94

Nota: El puntaje de la escala es de 1=totalmente en desacuerdo y 5=totalmente de acuerdo.

En la tabla siguiente se presenta el grado de satisfacción para los distintos aspectos

evaluados para cada universidad. Se han comparado las medias de los ítems entre

universidades usando el estadístico t de Student para muestras independientes. Las

medias, desviación estándar así como la comparación de dichas medias se presentan en la

tabla siguiente

Tabla 4Comparación de media en la escala de satisfacción entre la UCT y la UCSC.

UCT (n=108)

UCSC (n=69)

Evaluación de monitoreo y satisfacción de usuarios. Página 8 de 26

Page 9: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

ítems M D.E. M D.E. t P1 La gestión académica de las actividades curriculares se

realiza satisfactoriamente.4.02 0.64 3.77 0.83 2.26 0.025

2 La gestión administrativa de las actividades curriculares se realiza satisfactoriamente.

3,60 0.83 3.65 0.95 -0.40 0.692

3 La infraestructura (salas de clase, laboratorios de idiomas, etc.) de la carrera es adecuada para el desarrollo de las actividades curriculares.

3.94 1.13 4.32 0.83 2.38 0.018

4 Los servicios de apoyo al estudio y al estudiante son adecuados (casinos, áreas verdes, lugares de trabajo en equipo, servicio de bienestar, etc.)

3.33 1.25 3.97 0.97 -3.59 0.001

5 Los recursos bibliográficos son adecuados y suficientes para el desarrollo de las actividades curriculares

3.58 1.12 3.96 1.08 -2.22 0.028

6 Los recursos materiales (computadores, proyectores digitales, sistemas de audio, etc.) de la carrera son adecuados para el desarrollo de las actividades curriculares

4.20 0.72 4.07 0.94 1.05 0.297

7 El personal docente y administrativo es suficiente para atender las demandas del nuevo Plan Curricular.

3.55 1.04 4.1 0.79 -3.80 0.001

8 Existe un adecuado acompañamiento docente en las distintas actividades curriculares.

4.03 0.72 4.22 0.68 -1.75 0.082

9 Los docentes del área de especialidad poseen una sólida formación para desarrollar las competencias del perfil de egreso.

4.38 0.70 4.55 0.63 -1.62 0.108

10 Los docentes del área pedagógica poseen una sólida formación para desarrollar las competencias del perfil de egreso.

4.23 0.76 4.20 0.90 0.23 0.820

11 Los docentes del área teológica- filosófica poseen una sólida formación para desarrollar las competencias del perfil de egreso.

4.03 0.79 3.68 2.26 2.46 0.015

Nota: El puntaje de la escala es de 1=totalmente en desacuerdo y 5=totalmente de acuerdo.

Como se puede observar, en 6 de los 11 ítems de la escala existe una diferencia

estadísticamente significativa entre las universidad (valor p menor a 0.05).

Correspondiendo al ítem 1,3,4,5,7 y 11. En dos de ellos (ítem 1 y 11) la media es mayor en

la UCT, es decir el nivel de satisfacción de la gestión académica y los docentes del área

teológica-filosófica, son mejor evaluados en la UCT que en la UCSC. En todos los otros

ítems son los estudiantes de la UCSC quienes evalúan mejor. En los ítems 2,6,8,9,10 no

existe una diferencia estadísticamente significativa entre las universidades, por lo que la

diferencia de puntajes entre ellas no es relevante.

En el gráfico siguiente se presenta el promedio de la muestra total para cada ítem,

así como el promedio para cada universidad. Como ya se había mencionado, son los

Evaluación de monitoreo y satisfacción de usuarios. Página 9 de 26

Page 10: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

estudiantes de la UCSC quienes evalúan los distintos aspectos de forma más satisfactoria

en 7 de los 11 ítems, y en seis de esas diferencias es posible señalar que la diferencia en

puntaje es suficientemente grande como para que no se deba al azar.

Grafico 1.

Media del grado de satisfacción para cada ítem para la muestra total y por universidad.

1 2 3 4 5 6 7 8 9 10 113.23.33.43.53.63.73.83.9

44.14.24.34.44.54.6

TotalUCTUCSC

Nota: La escala tiene un puntaje entre 1 y 5 puntos, acá se han cortado los puntajes extremos para poder facilitar la lectura del gráfico.

Si bien es posible observar una gran variabilidad entre los ítems en el gráfico, es

necesario recordar que debido al ajuste de la escala del gráfico, todos los puntajes

distribuyen entre 3,3 y 4,5 puntos en una escala de 1 a 5, de tal forma que en todos los

casos la evaluación de cada ítem resulta positiva, estando en todos los casos sobre la

media.

2.3. Resultados escala Evaluación del Plan de apoyo a estudiantes.

Evaluación de monitoreo y satisfacción de usuarios. Página 10 de 26

Page 11: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

2.3.1. Descripción de la escala.

La escala de Apoyo corresponde a una escala tipo likert de 14 ítems que se evalúan

en cinco niveles de Totalmente en desacuerdo (1) a totalmente de acuerdo (5).

Los ítems estaban orientados a evaluar el nivel de satisfacción con las distintas

acciones que cada universidad ha desarrollado como parte del plan de Apoyo a los

estudiantes de primer año. Esta escala incluye ítems que en relación a la evaluación de

entrada de los estudiantes, a las distintas acciones de inducción y/o acompañamiento y las

acciones complementarias para reforzar el desarrollo de distintas competencia en el

estudiante.

2.3.2. Propiedades psicométricas de la escala.

Debido a que las escalas fueron construidas ad hoc para evaluar los diversos

aspectos considerados en el proyecto, previo a su aplicación definitiva se evaluaron

fundamentalmente validez y confiabilidad. La evidencia de validez en este caso

correspondió a validez de contenido la que se estableció a través de juicio de expertos,

por lo que luego de construidos el banco de ítems originales en base a los objetivos de la

fase del proyecto que se procuraba evaluar, fueron revisados por profesores de la carrera

e investigadores, ajustando fundamentalmente aspectos referidos a la redacción de los

ítems, formato de la escala e instrucciones. Finalmente el instrumento que se aplicó es el

resultado de la revisión que se hiciera de las versiones preliminares del mismo.

Luego de aplicado el instrumento se evaluó la confiabilidad de la escala, para ello

se estimó la Confiabilidad de Consistencia interna a través de Coeficiente Alfa de

Cronbach. En el caso de la escala de Apoyo, la que fue respondida por 125 estudiantes de

ambas universidades, se obtuvo un Alfa de Cronbach de 0.81, por lo que se considera que

Evaluación de monitoreo y satisfacción de usuarios. Página 11 de 26

Page 12: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

este instrumento es confiable. Como se puede observar en la tabla siguiente, la gran

mayoría de los ítems tiene un nivel de correlación moderada con el puntaje de la escala

total, sólo dos ítems muestran una correlación que podría ser consideraba baja, el ítems 3

y el ítem 13, los que habría que revisar en futuras aplicaciones de la escala, a su vez el

coeficiente Alfa de Cronbach si se elimina alguno de los ítems oscila entre 0.78 y 0.82,

rango que es aceptable, no considerándose la eliminación de ninguno de los ítems.

Tabla 5Media, varianza, correlación elemento-prueba total y alfa de

Cronbach si se elimina un elemento para la escala de Acciones del Plan de Apoyo.

Item

Media de la escala si se elimina el elemento

Varianza de la escala si se

elimina el elemento

Correlación elemento-

total corregida

Alfa de Cronbach si se elimina el

elementop1 52,60 35,774 ,396 ,803p2 52,82 34,937 ,402 ,803p3 52,85 35,517 ,295 ,812p4 53,12 34,365 ,465 ,798p5 52,78 33,832 ,564 ,791p6 53,28 33,606 ,513 ,794p7 53,23 32,905 ,581 ,789p8 53,20 33,403 ,531 ,793p9 52,82 34,211 ,520 ,795p10 53,23 35,293 ,367 ,806p11 52,94 35,505 ,404 ,803p12 52,98 34,967 ,407 ,803p13 53,08 36,687 ,188 ,820p14 53,19 33,898 ,510 ,795

2.3.3. Resultados aplicación de la escala.

A continuación se presenta la media y desviación estándar para cada uno de los

ítems de la escala, como se puede observar, en todas ellos la valoración es muy alta,

mostrando un alto grado de satisfacción con cada una de las afirmaciones.

Evaluación de monitoreo y satisfacción de usuarios. Página 12 de 26

Page 13: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

Tabla 6.Resultados generales de encuesta plan de apoyo a estudiantes.

Items. M D.E. 1 Se realizan actividades de inducción a los nuevos estudiantes de la carrera. 4.50 0.702 Se le otorga importancia a una buena recepción de los nuevos estudiantes por

parte de la carrera.4.28 0.82

3 Se realiza un diagnóstico adecuado del nivel de inglés de los estudiantes que ingresan a la carrera.

4.24 0.93

4 Las competencias de ingreso están consideradas en la implementación del plan de apoyo.

3.98 .83

5 Existen actividades de apoyo que ayudan a los estudiantes de acuerdo a sus necesidades de aprendizaje.

4.28 0.80

6 Las actividades del plan de apoyo para estudiantes recién ingresados están eficientemente programadas.

3.82 0.89

7 Las actividades del plan de apoyo favorecen el desarrollo de la comprensión lectora en lengua materna.

3.86 0.88

8 Las actividades del plan de apoyo favorecen el desarrollo de la producción escrita en lengua materna.

3.90 0.88

9 Las actividades del plan de apoyo favorecen el desarrollo de la competencia comunicativa en la lengua extranjera.

4.29 0.78

10 Las actividades del plan de apoyo favorecen el desarrollo de competencias de TICs.

3.84 0.86

11 Existe complementariedad entre la formación disciplinar y pedagógica. 4.15 0.7312 En todas las actividades curriculares se promueve mecanismos de

autoaprendizaje, autorregulación y metacognición.4.12 0.81

13 Las actividades curriculares de Alfabetización Académica explicitan claramente las competencias a lograr.

4.0 0.95

14 Los aprendizajes de Alfabetización Académica son promovidos en todas las actividades curriculares de la carrera.

3.89 0.86

Nota: El puntaje de la escala es de 1=totalmente en desacuerdo y 5=totalmente de acuerdo.

El ítem mejor evaluado correspondió al ítem 1, que refiere al desarrollo de

actividades de inducción a nuevo estudiantes de la carrera, seguido por el ítem 2 y 5. El

ítem que muestra un más bajo puntaje, sin embargo teniendo un promedio alto en el

rango de puntajes de la escala, es el ítem 6 que refiere a la organización de las actividades

del plan de apoyo.

En la tabla siguiente se encuentran las medias de cada uno de los ítems de la escala

y su comparación entre universidades. Para dicha comparación se ha usado el estadístico t

de Student, y los único ítems donde existen una diferencia estadísticamente significativa

son los ítems 10,11,12 y 13, para todos los demás ítems, las diferencias que se observan

Evaluación de monitoreo y satisfacción de usuarios. Página 13 de 26

Page 14: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

en las medias no resultan tan grandes como para considerar que se deba a algún aspecto

asociado a la universidad.

Tabla 7Comparación entre la UCT y la UCSC en relación al plan de apoyo a estudiantes.

Ítems. UCT (n=63) UCSC (n=68)M D.E. M. D.E. t p

1 Se realizan actividades de inducción a los nuevos estudiantes de la carrera.

4.5 0.69 4.5 0.70 0,69 0.490

2 Se le otorga importancia a una buena recepción de los nuevos estudiantes por parte de la carrera.

4.4 0.79 4.2 0.85 1.54 0.127

3 Se realiza un diagnóstico adecuado del nivel de inglés de los estudiantes que ingresan a la carrera.

4.2 0.90 4.3 0.96 -0.36 0.720

4 Las competencias de ingreso están consideradas en la implementación del plan de apoyo.

3.9 0.94 4.1 0.70 -1.72 0.090

5 Existen actividades de apoyo que ayudan a los estudiantes de acuerdo a sus necesidades de aprendizaje.

4.3 0.84 4.3 0.76 0.48 0.630

6 Las actividades del plan de apoyo para estudiantes recién ingresados están eficientemente programadas.

3.9 0.89 3.8 0.90 0.69 0.490

7 Las actividades del plan de apoyo favorecen el desarrollo de la comprensión lectora en lengua materna.

3.8 0.99 4.0 0.76 -1.30 0.195

8 Las actividades del plan de apoyo favorecen el desarrollo de la producción escrita en lengua materna.

3.7 1.00 4.1 0.73 -2.20 0.030

9 Las actividades del plan de apoyo favorecen el desarrollo de la competencia comunicativa en la lengua extranjera.

4.3 0.75 4.3 0.81 -0,06 0.950

10 Las actividades del plan de apoyo favorecen el desarrollo de competencias de TICs.

3.7 0.84 4.0 0.85 -2.26 0.026

11 Existe complementariedad entre la formación disciplinar y pedagógica.

4.4 0.66 4.0 0.74 3.35 0.001

12 En todas las actividades curriculares se promueve mecanismos de autoaprendizaje, autorregulación y metacognición.

4.3 0.80 4.0 0.80 2.48 0.015

13 Las actividades curriculares de Alfabetización Académica explicitan claramente las competencias a lograr.

4,2 0.81 3.8 1.03 2.28 0.024

14 Los aprendizajes de Alfabetización Académica son promovidos en todas las actividades curriculares de la carrera.

4.0 0.86 3.8 0.84 1.90 0.060

Nota: El puntaje de la escala es de 1=totalmente en desacuerdo y 5=totalmente de acuerdo.

Evaluación de monitoreo y satisfacción de usuarios. Página 14 de 26

Page 15: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

De los 4 ítems donde se observan diferencias significativas entre las universidades,

sólo en el ítem 10 dicha diferencia se da a favor de la UCSC, en todos los otros es las UCT la

que tiene mejores promedios.

La comparación de los puntajes medios por ítems para el total de la muestra, así

como para cada universidad, se pueden observar en el gráfico 2.

Grafico 2.Media del grado de satisfacción en relación al plan de apoyo a estudiantes

para cada ítem para la muestra total y por universidad.

1 2 3 4 5 6 7 8 9 10 11 12 13 143.6

3.7

3.8

3.9

4

4.1

4.2

4.3

4.4

4.5

TotalUCTUCSC

Nota: La escala tiene un puntaje entre 1 y 5 puntos, acá se han cortado los puntajes extremos para poder facilitar la lectura del gráfico.

2.4. Resultados escala perfeccionamiento académico y contrataciones.

2.4.1. Descripción de la escala.

La escala de perfeccionamiento docente es una escala tipo likert de 13 ítems con 5

niveles de respuesta de totalmente en desacuerdo a totalmente de acuerdo. Evalúa

Evaluación de monitoreo y satisfacción de usuarios. Página 15 de 26

Page 16: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

fundamentalmente la pertinencia en cantidad y calidad de la planta docente en función de

la implementación del plan curricular.

2.4.2. Propiedades psicométricas de la escala.

Como en las demás escalas se evaluó validez de contenido previo a la aplicación,

quedando los ítems que fueron validados por los evaluadores. En relación a la

confiabilidad, esta escala mostró una alta consistencia interna, teniendo un coeficiente alfa

de Cronbach de 0.84, por lo que es posible concluir que es un instrumento confiable. Como

se puede observar en la tabla siguiente, no existen ítems que tengan un comportamiento

muy distinto al conjunto de los ítems que conforman la escala.

Tabla 8Media, varianza, correlación elemento-prueba total y alfa de Cronbach

si se elimina un elemento para la escala de perfeccionamiento académico.

Media de la escala si se elimina el elemento

Varianza de la escala si se elimina el elemento

Correlación elemento-total

corregida

Alfa de Cronbach si se

elimina el elemento

p1 43,92 48,265 ,563 ,833p2 43,67 48,061 ,615 ,830p3 44,00 46,727 ,567 ,833p4 44,50 48,455 ,735 ,824p5 43,83 45,606 ,703 ,822p6 43,67 48,970 ,493 ,838p7 43,83 47,606 ,618 ,829p8 43,58 50,992 ,416 ,843p9 44,17 59,606 -,255 ,865p10 44,00 50,909 ,479 ,839p11 43,58 52,811 ,388 ,844p12 43,50 53,909 ,261 ,851p13 43,75 47,659 ,699 ,824

2.4.3. Resultados aplicación de escala.

Tabla 9.

Evaluación de monitoreo y satisfacción de usuarios. Página 16 de 26

Page 17: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

Resultados generales de encuesta de perfeccionamiento académico y contrataciones.

Ítem M D.E.1 La carrera cuenta con un suficiente número de docentes para el buen desarrollo del nuevo

Plan de Estudios.2 La carrera contempla la proyección del número de docentes que necesitará para

desarrollar el nuevo Plan de Estudios. 3 La capacitación y/o el perfeccionamiento docente están planificados de acuerdo a las

necesidades de la carrera.4 La carrera proyecta el perfeccionamiento académico en todas sus áreas.5 La carrera ofrece oportunidades de perfeccionamiento asociadas al área de la

especialidad.6 La carrera ofrece oportunidades de perfeccionamiento asociadas al área pedagógica.7 La carrera ofrece oportunidades de perfeccionamiento asociadas al área práctica.8 El perfeccionamiento docente se traduce en cambios pedagógicos que favorecen la

formación de los estudiantes.9 La carrera ofrece oportunidades de desarrollo académico de investigación asociadas al área

disciplinar.10 La carrera ofrece oportunidades de extensión académica asociadas al área disciplinar.11 Existe coordinación de los académicos del área de prácticas y pre-prácticas pedagógicas de

la carrera con los profesores guías/mentores de los estudiantes en práctica.12 Existe un seguimiento y evaluación de los profesores supervisores de prácticas de la

carrera.13 Existe un sistema de formación / inducción para los profesores que se desempeñan en el

área de práctica de la carrera.

Tabla 10Comparación entre la UCT y la UCSC en relación al perfeccionamiento académico y

contratacionesUCT (n=13) UCSC (n=)

ítem M D.E. M D.E. t p1 La carrera cuenta con un suficiente número de docentes para el

buen desarrollo del nuevo Plan de Estudios.3.6 1.04

2 La carrera contempla la proyección del número de docentes que necesitará para desarrollar el nuevo Plan de Estudios.

3.8 1.01

3 La capacitación y/o el perfeccionamiento docente están planificados de acuerdo a las necesidades de la carrera.

3.5 1.24

4 La carrera proyecta el perfeccionamiento académico en todas sus áreas.

3.1 0.86

5 La carrera ofrece oportunidades de perfeccionamiento asociadas al área de la especialidad.

3.7 1.11

6 La carrera ofrece oportunidades de perfeccionamiento asociadas al área pedagógica.

3.9 1.12

7 La carrera ofrece oportunidades de perfeccionamiento asociadas al área práctica.

3.8 1.10

8 El perfeccionamiento docente se traduce en cambios pedagógicos que favorecen la formación de los estudiantes.

4.0 1.0

9 La carrera ofrece oportunidades de desarrollo académico de 3.5 .066

Evaluación de monitoreo y satisfacción de usuarios. Página 17 de 26

Page 18: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

investigación asociadas al área disciplinar.10 La carrera ofrece oportunidades de extensión académica

asociadas al área disciplinar.3.6 0.96

11 Existe coordinación de los académicos del área de prácticas y pre-prácticas pedagógicas de la carrera con los profesores guías/mentores de los estudiantes en práctica.

3.9 0.76

12 Existe un seguimiento y evaluación de los profesores supervisores de prácticas de la carrera.

4.0 0.82

13 Existe un sistema de formación / inducción para los profesores que se desempeñan en el área de práctica de la carrera.

3.8 0.93

Evaluación de monitoreo y satisfacción de usuarios. Página 18 de 26

Page 19: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

III. COMENTARIOS FINALES.

1. Si bien los ítems de las escalas fueron revisados previamente, algunos ítem

quedaron muy generales, o inclusivos, por lo que es difícil saber en base a qué

elementos los estudiantes está haciendo la evaluación, por ejemplo al evaluar el

servicio de casino junto al de áreas verdes.

2. Debido a que no siempre fue tabulada la variable sexo y se identificó a los sujetos

por su RUT, no es posible presentar en este informe una comparación por sexo,

por lo que no es posible saber si en alguno de los aspectos medidos existe alguna

diferencia en función de esta variable.

Evaluación de monitoreo y satisfacción de usuarios. Página 19 de 26

Page 20: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

IV. APENDICE.

Proyecto MECESUP 0805

ENCUESTA SOBRE SATISFACCIÓN DE USUARIOS

IDENTIFICACIÓN DEL ESTUDIANTE

UNIVERSIDAD: __________________________________________________

RUT: __________________________________________________

EDAD: __________________________________________________

GÉNERO: __________________________________________________

SEMESTRE QUE CURSA ACTUALMENTE:

__________________________________________________

PROMEDIO DE NOTAS A LA FECHA: __________________________________________________

La siguiente encuesta tiene el propósito de medir la satisfacción de los estudiantes de las Carreras de Pedagogía en Inglés del Consorcio UCSC-UCT respecto del servicio de formación académica entregado, con el fin de retroalimentar la propuesta y proponer las mejoras pertinentes.

Te pedimos expresar tu opinión marcando con una X en cada afirmación:

1. Totalmente en desacuerdo. 2. En desacuerdo. 3. Ni de acuerdo ni en desacuerdo. 4. De acuerdo. 5. Totalmente de acuerdo.

AFIRMACIÓN 1 2 3 4 51 La gestión académica de las actividades curriculares se realiza

satisfactoriamente.2 La gestión administrativa de las actividades curriculares se realiza

satisfactoriamente3 La infraestructura (salas de clase, laboratorios de idiomas, etc.) de la

carrera es adecuada para el desarrollo de las actividades curriculares 4 Los servicios de apoyo al estudio y al estudiante son adecuados

Evaluación de monitoreo y satisfacción de usuarios. Página 20 de 26

Page 21: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

(casinos, áreas verdes, lugares de trabajo en equipo, servicio de bienestar, etc.)

5 Los recursos bibliográficos son adecuados y suficientes para el desarrollo de las actividades curriculares

6 Los recursos materiales (computadores, proyectores digitales, sistemas de audio, etc.) de la carrera son adecuados para el desarrollo de las actividades curriculares

7 El personal docente y administrativo es suficiente para atender las demandas del nuevo Plan Curricular

8 Existe un adecuado acompañamiento docente en las distintas actividades curriculares

9 Los docentes del área de especialidad poseen una sólida formación para desarrollar las competencias del perfil de egreso

10 Los docentes del área pedagógica poseen una sólida formación para desarrollar las competencias del perfil de egreso

11 Los docentes del área teológica- filosófica poseen una sólida formación para desarrollar las competencias del perfil de egreso

Evaluación de monitoreo y satisfacción de usuarios. Página 21 de 26

Page 22: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

APENDICE A. INSTRUMENTOS.

Proyecto MECESUP 0805

ENCUESTA SOBRE PLAN DE APOYO A ESTUDIANTES

IDENTIFICACIÓN DEL ESTUDIANTE

UNIVERSIDAD: __________________________________________________

RUT: __________________________________________________

EDAD: __________________________________________________

GÉNERO: __________________________________________________

SEMESTRE QUE CURSA ACTUALMENTE:

__________________________________________________

PROMEDIO DE NOTAS A LA FECHA: __________________________________________________

La siguiente encuesta tiene como propósito conocer la percepción de los estudiantes respecto del plan de apoyo a estudiantes de primer año propuesto por la Carrera de Pedagogía en Inglés de las Universidades del Consorcio UCSC – UCT, con el fin de retroalimentar la propuesta y proponer las mejoras pertinentes.

Te pedimos expresar tu opinión marcando con una X en cada afirmación:1. Totalmente en desacuerdo. 2. En desacuerdo. 3. Ni de acuerdo ni en desacuerdo. 4. De acuerdo. 5. Totalmente de acuerdo.

AFIRMACIÓN 1 2 3 4 51 Se realizan actividades de inducción a los nuevos estudiantes de la carrera.2 Se le otorga importancia a una buena recepción de los nuevos estudiantes

por parte de la carrera.3 Se realiza un diagnóstico adecuado del nivel de inglés de los estudiantes

que ingresan a la carrera.4 Las competencias de ingreso están consideradas en la implementación del

plan de apoyo.5 Existen actividades de apoyo que ayudan a los estudiantes de acuerdo a sus

necesidades de aprendizaje.6 Las actividades del plan de apoyo para estudiantes recién ingresados están

eficientemente programadas.

Evaluación de monitoreo y satisfacción de usuarios. Página 22 de 26

Page 23: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

7 Las actividades del plan de apoyo favorecen el desarrollo de la comprensión lectora en lengua materna.

8 Las actividades del plan de apoyo favorecen el desarrollo de la producción escrita en lengua materna.

9 Las actividades del plan de apoyo favorecen el desarrollo de la competencia comunicativa en la lengua extranjera.

10 Las actividades del plan de apoyo favorecen el desarrollo de competencias de TICs.

11 Existe complementariedad entre la formación disciplinar y pedagógica.

12 En todas las actividades curriculares se promueve mecanismos de autoaprendizaje, autorregulación y metacognición.

13 Las actividades curriculares de Alfabetización Académica explicitan claramente las competencias a lograr.

14 Los aprendizajes de Alfabetización Académica son promovidos en todas las actividades curriculares de la carrera.

Evaluación de monitoreo y satisfacción de usuarios. Página 23 de 26

Page 24: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

Proyecto MECESUP 0805

ENCUESTA SOBRE PERFECCIONAMIENTO ACADÉMICO Y CONTRATACIÓN DE PERSONAL DOCENTE

IDENTIFICACIÓN DEL DOCENTE

UNIVERSIDAD: __________________________________________________

RUT: __________________________________________________

ESPECIALIDAD: __________________________________________________

CATAGORÍA: __________________________________________________

GRADO ACADÉMICO: __________________________________________________

ACTIVIDADES CURRICULARES QUE IMPARTE:

__________________________________________________

La siguiente encuesta tiene el propósito de recoger la percepción de los docentes de las Carreras de Pedagogía en Inglés del Consorcio UCSC-UCT respecto del Plan de Perfeccionamiento Académico y de la Contratación del Personal Docente adecuado a las necesidades del nuevo Plan Curricular, con el fin de retroalimentar la propuesta y proponer las mejoras pertinentes.

Te pedimos expresar tu opinión marcando con una X en cada afirmación:

1. Totalmente en desacuerdo. 2. En desacuerdo. 3. Ni de acuerdo ni en desacuerdo. 4. De acuerdo. 5. Totalmente de acuerdo.

AFIRMACIÓN 1 2 3 4 51 La carrera cuenta con un suficiente número de docentes para el

buen desarrollo del nuevo Plan de Estudios.2 La carrera contempla la proyección del número de docentes que

necesitará para desarrollar el nuevo Plan de Estudios. 3 La capacitación y/o el perfeccionamiento docente están planificados

de acuerdo a las necesidades de la carrera.4 La carrera proyecta el perfeccionamiento académico en todas sus

áreas.5 La carrera ofrece oportunidades de perfeccionamiento asociadas al

área de la especialidad.6 La carrera ofrece oportunidades de perfeccionamiento asociadas al

Evaluación de monitoreo y satisfacción de usuarios. Página 24 de 26

Page 25: PERFIL DE INGRESOS ESTUDIANTES PEDAGOGÍA …maestro.ucsc.cl/usc0805/documentos/Informes Asistencia... · Web viewLa evidencia de validez en este caso correspondió a validez de contenido

Informe 8D.

área pedagógica.7 La carrera ofrece oportunidades de perfeccionamiento asociadas al

área práctica.8 El perfeccionamiento docente se traduce en cambios pedagógicos

que favorecen la formación de los estudiantes.9 La carrera ofrece oportunidades de desarrollo académico de

investigación asociadas al área disciplinar.10 La carrera ofrece oportunidades de extensión académica asociadas

al área disciplinar.11 Existe coordinación de los académicos del área de prácticas y pre-

prácticas pedagógicas de la carrera con los profesores guías/mentores de los estudiantes en práctica.

12 Existe un seguimiento y evaluación de los profesores supervisores de prácticas de la carrera.

13 Existe un sistema de formación / inducción para los profesores que se desempeñan en el área de práctica de la carrera.

Evaluación de monitoreo y satisfacción de usuarios. Página 25 de 26