Saber Pro Principales Resultados en Competencias Genericas 2011

SABER PRO noviembre 2011

Principales resultados en competencias genricas

Santa Marta, marzo 15 de 2012

No todos los estudiantes presentaban el examen Medidas entre programas no eran comparables (menos en

comprensin lectora e ingls) Restricciones para uso de informacin para toma de decisiones Restringida interpretacin pedaggica de los resultados de los

exmenes. Problemas tcnicos asociados a tamaos muy reducidos de

muestras en buena parte de programas evaluados Ausencia de medida de valor agregado*

Apoyar el Sistema de Aseguramiento de la Calidad de la Educacin Superior con mejor informacin para la toma de decisiones:

Evaluar todo el sistema de educacin superior

Garantizar la utilidad de los indicadores

Garantizar la confiabilidad y la continuidad

Garantizar interpretacin pedaggica

Propsito de los nuevos exmenes

Estructura de los exmenes

Los exmenes SABER PRO se estructuran por mdulos (componentes combinables ) de evaluacin de dos tipos de competencias:

1. Competencias genricas

2. Competencias especficas comunes a grupos de programas

Mdulos de competencias genricas

Lectura crtica

Razonamiento cuantitativo

Escritura

Ingls

Competencias ciudadanas ( desde junio de 2012)

Lectura crtica: desempeos asociados a lectura, pensamiento crtico y entendimiento interpersonal:

Leer analtica y reflexivamente

Comprender los planteamientos expuestos en un texto e identificar sus perspectivas y juicios de valor.

Identificar y recuperar informacin presente en uno o varios textos, construir su sentido global, establecer relaciones entre enunciados y evaluar su intencionalidad


Razonamiento cuantitativo: desempeos relacionados con uso de lenguaje cuantitativo y solucin de problemas

Comprensin de conceptos bsicos de las matemticas para analizar, modelar y resolver problemas, aplicando mtodos y procedimientos cuantitativos y esquemticos

Interpretacin de datos, la formulacin de problemas y la ejecucin, evaluacin y validacin de procedimientos y estrategias


Escritura

Comunicar ideas por escrito referidas a un tema dado. Los escritos se califican teniendo en cuenta los siguientes criterios:

Elaboracin de la intencin y el propsito

Claridad de la estructura y la organizacin

Manejo del lenguaje y las convenciones


Ingls

Comunicarse efectivamente en ingls

Permiten clasificar a los evaluados en cuatro categoras de desempeo, segn las bandas del Marco Comn Europeo


Competencias ciudadanas

Conocer y comprender la Constitucin Poltica de Colombia:Comprender qu es la ConstitucinConocer los derechos y deberes que la Constitucin consagraConocer la organizacin del Estado

Valoracin de argumentos: analizar y evaluar la pertinencia y solidez de un enunciadoMulti-perspectivismo: reconocer, contrastar y valorar distintas perspectivasPensamiento sistmico: comprender que los fenmenos sociales y sus soluciones son multidimensionales y reconocer interacciones entre estas dimensiones


Produccin de resultados

No se pretende que los estudiantes de todas las formaciones desarrollen las competencias genricas a un mismo nivel, ni an las comunes a grupos de programas

Para que las comparaciones tengan sentido y para evitar ordenamientos sobre-simplificados, se han conformado grupos de referencia

Grupos de referencia

Agrupacin de programas con caractersticas similares que se definieron con base en los siguientes criterios:

Clasificacin de programas del Sistema Nacional de Informacin de la Educacin Superior (SNIES) del Ministerio de Educacin Nacional

Clasificacin Internacional Normalizada de la Educacin (CINE) de la Unesco

Nmero de evaluados

Para nov-2011 se conformaron 30 grupos de referencia

Adems de los resultados individuales en competencias genricas

Puntajes promedio y desviaciones estndar

Distribuciones por niveles de desempeo (pruebas de escritura e ingls)

Distribuciones por quintiles (pruebas de lectura crtica y razonamiento cuantitativo)

Grupos de referencia

Niveles de formacin (universitaria, tecnolgica, tcnica)

Sector (oficial privado)

IES

Programas

Otros: nivelessocioeconmicos, situacin de acreditacin

Resultados agregados

para

Las pruebas del mdulo de competencias genricas fueron tomadas por todos los estudiantes por primera vez en

noviembre de 2011

Ya se est evaluando toda la educacin superior

Hay informacin muy potente para apoyar la toma de decisiones a nivel de las IES

Los indicadores para iniciar comparaciones histricas son ms robustos

Hay avances importantes en la interpretacin pedaggica de los resultados: niveles de desempeo (escritura e ingls) y quintiles (razonamiento cuantitativo y lectura crtica)

Las pruebas del mdulo de competencias genricas fueron tomadas por todos los estudiantes por primera vez en

noviembre de 2011

Falta incorporar a los anlisis:

Informacin del nivel acadmico de los estudiantes al ingreso a la educacin superiorInformacin de los niveles socio-culturales

Los resultados que se presentan a continuacin se limitan a presentar un panorama de las competencias de los egresados;no permiten todava identificar mayores o menores logros de los programas de educacin superior

Estadsticas de evaluados en noviembre de 2011

Mdulo de competencias genricas

Total evaluados en el mdulo de competencias genricas, por nivel de formacin

Modalidad No. evaluados PorcentajeUniversitaria 94.991 65%Tecnolgica 25.437 17%Tcnica 20.837 14%Normalistas superiores 4.534 3%TOTAL 145.799 100%

26.398

18.401

11.889 10.421

6.557 5.789 3.669 2.938 2.399 1.904 1.592 1.235 738 134

0

5.000

10.000

15.000

20.000

25.000

30.000

Nmero de evaluados por grupo de referencia - Universitarios

601

688

386

117

198 183

10248

109 83 9943 54

30

100

200

300

400

500

600

700

800

Nmero de programas por grupos de referencia - Universitarios

12.241 11.210

5.018 5.014 4.583

3.007 2.100

1.570 1.418 1.282 1.132 926 797 555 548 334 -

2.000

4.000

6.000

8.000

10.000

12.000

14.000

Nmero de evaluados por grupos de referencia - No Universitarios

10

296

145

192

135 135

5179 81

50 49 53

20 23 25 14

0

50

100

150

200

250

300

350

Nmero de programas por grupos de referencia - No Universitarios

-2.000 4.000 6.000 8.000

10.000 12.000 14.000 16.000 18.000 20.000 22.000 24.000 26.000 28.000 30.000

Eval

uado

s

Nmero de evaluados por sector y grupos de referencia - Universitarios

Oficiales Privados

-2.000

4.000

6.000

8.000

10.000

12.000

14.000

Eval

uado

s

Nmero de evaluados por sector y grupos de referencia - No universitarios

Oficiales Privados

Resultados en competencias genricas

Total nacional

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Promedios en las pruebas del mdulo de competencias genricas, por grupos de referencia - Universitarios

Escritura Ingls lectura crtica Razonamiento cuantitativo

8,5

9,0

9,5

10,0

10,5

11,0

Bacteriologa Enfermera Fisioterapia Odontologa Otros

Prom

edio

Puntajes promedio en algunos programas del rea de Salud

Escritura Ingls Lectura crtica Razonamiento cuantitativo

459 2.037 1.061 855 2.145

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Bacteriologa Enfermera Fisioterapia Medicina Odontologa Otros

Prom

edio

Puntajes promedio en algunos programas del rea de Salud


459 2.037 1.061 855 2.1452.938

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Admn de Empresas Ciales. y Financieros Contadura Economa Otros

Prom

edio

Puntajes promedio de algunos programas del rea de ciencias econmicas y administrativas


9.024 3.350 8.100 1.478 4.446

8,5

9,0

9,5

10,0

10,5

11,0

11,5

12,0

Antropologa Cs. Polticas Otros Psicologa Sociologa Trabajo Social

Prom

edio

Puntajes promedio de algunos programas del rea de ciencias sociales


167 356 528 3.257 237 1.244

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Educacin Normales superiores

Prom

edio

Puntajes promedio de educacin y normalistas superiores


11.889 4.583

10,82 10,71 10,6510,50 10,48 10,43 10,42 10,41 10,38

10,22 10,12 10,12 10,119,82

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Puntajes promedio en lectura crtica - Universitarios

10,84 10,78 10,76

10,36 10,31 10,29 10,18 10,16 10,14 9,99 9,98 9,91 9,919,63

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Puntajes promedio en razonamiento cuantitativo -Universitarios

8,5

9,0

9,5

10,0

10,5

11,0

Prom

edio

Promedios en las pruebas del mdulo de competencias genricas, por grupos de referencia - No universitarios

Escritura Ingls lectura crtica Razonamiento cuantitativo

10,109,92 9,85 9,81 9,81 9,75 9,74 9,69 9,68 9,59 9,58 9,54 9,47 9,46

9,309,08

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Puntajes promedio en lectura crtica - No universitarios

10,1510,02 9,97 9,89 9,85 9,79 9,76 9,69 9,66 9,64 9,63 9,57 9,51 9,49 9,47

9,35

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Puntajes promedio en razonamiento cuantitativo - No universitarios

Ejemplos de preguntas de lectura crtica

Ejemplos de preguntas de razonamiento cuantitativo

Distribucin por niveles de desempeo en la prueba de ingls

Total nacional

Descripcin de los niveles de desempeo en ingls

25%16% 23% 31% 31% 25%

21% 30% 33% 31%20% 24% 20%

35%2%

8%10%

25% 25%

2% 10%

24% 25%39%

15% -13%10%

28%

24% 18% 23% 21% 19%29% 21% 18% 19% 13% 18%

23% 21% 19%

26%34% 30%

17% 17%

38%31%

17% 16%10%

25%27% 31%

15%

14% 24% 14%

6% 8%

5%17%

11% 7%7%

22% 13%18%

3%

Distribucin por niveles de desempeo en ingls - Universitarios

A1 A- A2 B1 B+

37% 38% 33% 28% 32% 36% 39% 38% 39% 36% 37% 37% 37% 38% 39% 37%

43% 37%26%

16%

63% 53%31% 27%

42% 56% 46%34%

50% 47%30% 30%

13% 16% 21% 24% 4% 8%20% 21% 11% 6% 12%

20% 10% 10% 19% 19%5% 8%

16%23%

1% 3%

10% 12%7%

2%4%

8%4% 4%

10% 12%1% 2%

5%8%

1%

1% 1%

1%1% 1% 2%

Distribucin por niveles de desempeo en ingls - No universitarios

A1 A- A2 B1 B+

Distribucin por niveles de desempeo en la prueba de

escritura

Total nacional

Descripcin de los niveles de desempeo en escritura

Nivel Caractersticas del escrito

8El texto trasciende el estmulo dado, complejizando los planteamientos de manera efectiva tanto a nivel de pensamiento como de recursos lingsticos. Incluye el problema planteado en un dilogo de ideas y posiciones, en una perspectiva ms amplia e intertextual que construye y precisa su sentido. El texto de este nivel es de alto inters y motivacin para el lector, debido a la eficacia del escrito.

7En el texto se evidencia una planeacin en la escritura en dos aspectos fundamentales. En el primero, el autor piensa en cmo expresar sus ideas de manera efectiva, aplicando diversos recursos textuales para evidenciar sus planteamientos. En el segundo, el autor adecua su discurso para un pblico determinado, lo que le permite prever los conocimientos previos de su lector, su adecuacin del lenguaje y de los conceptos empleados.

6En el texto se aprecia con claridad la posicin de quien escribe, se expresan con claridad las ideas y hay un uso correcto de las expresiones que permiten conectarlas, lo que le da al texto coherencia completa. Hay un uso adecuado de distintos mecanismos que le dan coherencia y cohesin al texto (signos de puntuacin, conectores). Lo anterior permite que el escrito sea fluido.

5El texto alcanza unidad, por medio de la progresin temtica, es decir, logra encadenar o relacionar efectivamente las ideas, dndole continuidad al escrito: incorpora informacin nueva vinculndola con la anterior, presentando la informacin en un orden cronolgico, partiendo de temas generales para desglosar temas especficos, entre otras maneras de interrelacionar contenidos. Todo el texto se desarrolla en un mismo eje temtico, aunque pueden presentarse fallas en el uso de conectores. Hay un buen uso del lenguaje, aunque pueden encontrarse errores en la aplicacin de algunas reglas de ortografa y puntuacin.

4En el texto se encuentra una idea central que se desarrolla de acuerdo con una intencin comunicativa. El texto tambin posee una estructura bsica, en otras palabras, es posible identificar una introduccin al tema que se abordar, un desarrollo y una conclusin. Sin embargo, el texto no incluye toda la informacin necesaria (progresin temtica), su organizacin no es completamente efectiva, o rompe la unidad al incluir temas que no se relacionan con el marco semntico que desarrolla. Se aprecia un uso aceptable del lenguaje (se aplican las reglas gramaticales ms importantes).

3En el escrito se aprecia el esbozo de una intencin comunicativa, es decir, se ve que quien escribe pretende alcanzar un fin, por medio del escrito busca una reaccin especfica en el lector. Se encuentran problemas de manejo del lenguaje, pero estos no impiden la comprensin de los enunciados.

2 En el escrito se aprecian ideas, pero estas pueden ser incoherentes, o se presentan desarticuladamente. No hubo desarrollo organizado del tema o el escrito pudo ser innecesariamente largo o repetitivo.1 En el escrito se aborda la tarea propuesta, pero hay problemas en el manejo de la convencin (serios errores de sintaxis, puntuacin o escritura de las palabras) o un desarrollo insuficiente del tema (es tan breve que no se pueden aplicar los criterios de anlisis).Sin

calificacinNo contest o el escrito no fue legible.

Distribucin por niveles de desempeo en escritura - Universitarios

N4 N3 N2 N1 Sin nivel N5 N6 N7 N8

Distribucin por niveles de desempeo en escritura - No universitarios

N4 N3 N2 N1 Sin nivel N5 N6 N7 N8

Ejemplo de un texto de nivel 3

Nivel de formacin: tecnolgicaPrograma: Tecnologa deportiva

Ejemplo de un texto de nivel 5,

p. 1

Nivel de formacin: universitariaPrograma: Enfermera

Ejemplo de un texto de nivel 5,

p. 2

Nivel de formacin: universitariaPrograma: Enfermera

Distribucin por quintiles en la prueba de lectura crtica

Total nacional

9% 8% 8% 13% 15% 12% 6% 10% 11%28%

7% 9% 4%17%

18% 16% 17%23% 25% 24%

15%18% 19%

25%

14%18%

12%

25%21% 20% 21%

21%21% 31%

17%19% 19%

17%

15%20%

15%

20%25%

23% 23%

22% 20%17%

25%21% 21%

15%

20%

23%

22%

19%

27% 32% 31%22% 19% 16%

38% 31%29%

14%

43%29%

47%

20%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Distribucin por quintiles en la prueba de lectura crtica - Universitarios

Q1 Q2 Q3 Q4 Q5

32% 26% 22% 15%

45% 39%27% 20%

30%

58%

36%23%

38% 33% 30% 25%

32%31%

30%

26%

30%28%

31%28%

31%

26%

30%

29%

32%31%

29%30%

19%20%

22%

21%

15%16%

19%22%

19%

10%

17%

21%

16%17%

20%20%

11%14% 17%

22%

6%12%

13%18%

13%

4%11%

16%9% 12% 13%

15%

6% 9% 10% 16%2% 5% 10% 12% 7%

2% 6% 10% 5% 6% 8% 11%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Distribucin por quintiles en la prueba de lectura crtica - No universitarios

Q1 Q2 Q3 Q4 Q5

Distribucin por quintiles en la prueba de razonamiento

cuantitativo

Total nacional

10% 16%20% 13% 16% 13% 6%

24% 22%33%

17%7% 6%

19%16%

18%21%

16%18% 21%

11%

22% 22%

25%

22%

10% 10%

21%23%

23%25%

22%24% 19%

15%

23% 24%

22%

20%

17% 17%

25%22%

20%17%

21%18%

16%

18%

15% 16%11%

17%

19% 19%

17%

30% 24%18%

28% 23% 31%49%

16% 15%9%

24%

47% 48%

17%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Distribucin por quintiles en la prueba de razonamiento cuantitativo - Universitarios

Q1 Q2 Q3 Q4 Q5

31% 25% 29% 23%36% 30%

20% 14%

35%45% 38%

24%35% 29% 22% 19%

26%25%

26%23%

26%28%

20%19%

23%

27%27%

23%

29%28%

22% 21%

24%26%

25%24%

24%23%

25%24%

25%

19%21%

26%

23%24%

26%23%

13% 14% 13%16%

10%12%

17%20%

10%7% 10%

17%

9%12%

17%18%

7% 10% 8% 13%4% 8%

17% 23%7% 3% 4% 10% 3% 7% 14% 19%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Distribucin por quintiles en la prueba de razonamiento cuantitativo - No universitarios

Q1 Q2 Q3 Q4 Q5

Resultados por sector (razonamiento cuantitativo)

8,5

9,0

9,5

10,0

10,5

11,0

11,5

Prom

edio

Puntajes promedio por sector en la prueba de razonamiento cuantitativo - Universitarios

Oficial Privado

8,5

9,0

9,5

10,0

10,5

11,0

Prom

edio

Puntajes promedio por sector en la prueba de razonamiento cuantitativo - No universitarios

Oficial Privado

Muchas gracias!

SABER PRO noviembre 2011Principales resultados en competencias genricasNmero de diapositiva 2Nmero de diapositiva 3Nmero de diapositiva 4Nmero de diapositiva 5Nmero de diapositiva 6Nmero de diapositiva 7Nmero de diapositiva 8Nmero de diapositiva 9Nmero de diapositiva 10Nmero de diapositiva 11Nmero de diapositiva 12Nmero de diapositiva 13Nmero de diapositiva 14Nmero de diapositiva 15Nmero de diapositiva 16Nmero de diapositiva 17Nmero de diapositiva 18Nmero de diapositiva 19Nmero de diapositiva 20Nmero de diapositiva 21Nmero de diapositiva 22Nmero de diapositiva 23Nmero de diapositiva 24Nmero de diapositiva 25Nmero de diapositiva 26Nmero de diapositiva 27Nmero de diapositiva 28Nmero de diapositiva 29Nmero de diapositiva 30Nmero de diapositiva 31Nmero de diapositiva 32Nmero de diapositiva 33Nmero de diapositiva 34Nmero de diapositiva 35Nmero de diapositiva 36Nmero de diapositiva 37Nmero de diapositiva 38Nmero de diapositiva 39Nmero de diapositiva 40Nmero de diapositiva 41Nmero de diapositiva 42Nmero de diapositiva 43Nmero de diapositiva 44Nmero de diapositiva 45Nmero de diapositiva 46Nmero de diapositiva 47Nmero de diapositiva 48Nmero de diapositiva 49Nmero de diapositiva 50Nmero de diapositiva 51Nmero de diapositiva 52Nmero de diapositiva 53Nmero de diapositiva 54Nmero de diapositiva 55Nmero de diapositiva 56Nmero de diapositiva 57Nmero de diapositiva 58Nmero de diapositiva 59Nmero de diapositiva 60Muchas gracias!

Documents

Saber Pro Principales Resultados en Competencias Genericas 2011