29
E valuació n de proyectos de intervención socioeducativa I Introducción 11 Competencias III Mapa conceptual IV Contenidos 1 La evaluación de proyectos de intervención socioeducativa 1.1 Consideraciones generales 1.2 Modalidades en la evaluación de proyectos 1.3 Elementos y fases de la evaluación de proyectos 1.4 Modelos de evaluación de proyectos 1.5 Funciones de la evaluación de proyectos 1.6 Identificación de los criterios e indicadores de la evaluación de proyectos 1.7 Algunas observaciones sobre la evaluación de proyectos V Resumen VI Actividades VII Autoevaluación l. Introducción El punto de partida de cualquier intervención socioeducativa es la elaboración de un pro- yecto que planifique la acción profesional. Esta planificación es fundamental para garan- tizar el éxito del proyecto, ya que aporta racionalidad, eficacia y un carácter científico a la intervención. A la hora de planificar un proyecto de intervención socioeducativa, es necesario analizar el problema sobre el que se quiere intervenir, elegir una estrategia de 11

Capitulo 6- Evaluacion de Proyectos de Intervencion Socioeducativa

Embed Size (px)

DESCRIPTION

educacion

Citation preview

  • Evaluacin de proyectos de intervencin socioeducativa

    I Introduccin

    11 Competencias III Mapa conceptual

    IV Contenidos

    1 La evaluacin de proyectos de intervencin socioeducativa 1.1 Consideraciones generales

    1.2 Modalidades en la evaluacin de proyectos

    1.3 Elementos y fases de la evaluacin de proyectos

    1.4 Modelos de evaluacin de proyectos

    1.5 Funciones de la evaluacin de proyectos

    1.6 Identificacin de los criterios e indicadores de la evaluacin de proyectos

    1.7 Algunas observaciones sobre la evaluacin de proyectos

    V Resumen VI Actividades VII Autoevaluacin

    l. Introduccin

    El punto de partida de cualquier intervencin socioeducativa es la elaboracin de un pro-

    yecto que planifique la accin profesional. Esta planificacin es fundamental para garan-

    tizar el xito del proyecto, ya que aporta racionalidad, eficacia y un carcter cientfico a

    la intervencin. A la hora de planificar un proyecto de intervencin socioeducativa, es

    necesario analizar el problema sobre el que se quiere intervenir, elegir una estrategia de

    11

  • 1' '

    Evaluacin de la intervencin socioeducativa

    accin, formular objetivos y metas concretas, identificar los medios para lograr los obje-

    tivos y poner en marcha las acciones previstas, de modo que el proyecto pueda ponerse

    en marcha.

    Hay que pensar, por otra parte, que en algn momento de la intervencin socioeduca-

    tiva ser necesario analizar cmo se est comportando el proyecto, es decir, qu posibili-

    dades existen de que se logren los objetivos.

    Por esa razn, un proyecto de intervencin socioeducativa debe contemplar algn pro-

    cedimiento de autocorreccin (feedback), que permita su valoracin de manera racional

    y emprica.

    No ser posible realizar una buena evaluacin, si previamente no se ha realizado el

    adecuado diseo, y por el contrario, no puede darse un completo diseo y planificacin sin

    que ambos formen parte de los elementos a evaluar.

    En la obra anterior (Evaluacin de programas de intervencin socioeducativa: agentes

    y mbitos, 2004) sealbamos "en este libro nos referiremos solamente a programas de

    intervencin socioeducativa, sin hacer mencin expresa a los proyectos o al plan general

    del que forman parte. La diferencia fundamental entre ellos est, por lo tanto, en la previ-

    sin temporal de aplicacin y en la concrecin de la ejecucin mediante la propuesta de

    acciones determinadas" (pg. 70) . Tambin decamos que "la evaluacin de un programa

    de intervencin socioeducativa debe realizarse teniendo en cuenta sus referentes funda-

    mentales: los agentes que lo llevan a cabo y el mbito en el que se desarrolla" (pg. 67).

    La necesaria relacin de agentes y mbitos con los planes y programas que les afecta nos

    lleva a centrarnos prioritariamente en el proyecto como el marco referencial de accin

    ms prximo al educador social en su intervencin socioeducativa.

    A lo largo de este captulo sexto, analizamos tanto los diferentes elementos que deben

    formar parte de un proyecto de intervencin socioeducativa, como todo lo relacionado

    con su evaluacin .

    11. Competencias

    Con el estudio de este captulo se pretende facilitar al estudiante la adquisicin de las si-

    guientes competencias como resultado de su aprendizaje:

    l. Saber disear planes, programas , proyectos y actividades de intervencin socioedu-

    cativas.

    2. Disear e implementar procesos de evaluacin de programas, agentes, mbitos y estra-

    tegias de intervencin socioeducativa.

    3. Supervisar centros, planes, programas y proyectos socioeducativos .

    4. Gestionar procesos de mejora, calidad e innovacin.

  • Evaluacin de proyectos de intervencin socioeducativa 6 111. Mapa conceptual

    Referentes de la evaluacin de proyectos ...

    H Contexto 1 1 mbito

    1 1

    1

    Agentes 1

    1 PROYECTO 1

    1 1

    1

    Objetivos 1

    1 Recursos 1 1 1-

    [ Funcionamiento l .1 Recogida de 1

    1 informacin

    1

    1 Resultados del 1

    l PROYECTO j 1 Toma de 1

    1 decisiones

    1

    '

    .. de educacin social

    IV. Contenidos

    1. La evaluacin de proyectos de intervencin socioeducativa

    1.1. Consideraciones generales

    La evaluacin de un proyecto de intervencin socioeducativa es un proceso por el cual se

    determina el establecimiento de los cambios generados por dicho proyecto a partir de la com-

    paracin entre el estado final y el estado determinado en su planificacin. Es decir, se intenta

    conocer hasta qu punto un proyecto ha logrado cumplir sus objetivos .

    11

  • Evaluacin de la intervencin socioeducativa

    'En la evaluacin de un proyecto de intervencin socioeducativa se pretende ir obteniendo , .... ,. . . ' ' . ' una informacin depurada que fundamente la posterior toma de decisiones, por lo cual tam-

    bin se puede considerar como una actividad orientada a mejorar la eficacia del proyecto en

    relacin con sus fines, adems de promover mayor eficiencia en la asignacin de recursos. En

    este sentido, conviene recalcar que la evaluacin no es un fin en s misma, sino ms bien un

    medio para optimizar la gestin del proyecto, tanto en el proceso de implementacin como

    en el resultado obtenido.

    Ya Levin (1975), desde un enfoque sistmico, afirmaba que la evaluacin de un proyecto

    es el examen de los efectos, resultados y outputs del programa.

    El Joint Committee (1988), define la evaluacin como la sistemtica investigacin del

    valor o el mrito de algn objeto, y cita cuatro reas de evaluacin:

    Utilidad, referida a responder las necesidades de la persona que evala

    Factibilidad, referida a la necesidad de realizacin de la evaluacin en contextos reales

    Probidad, a la tica y legalidad de la propia adecuacin

    Adecuacin de la evaluacin a la realidad

    Por su parte, Femndez Ballesteros (1995) introduce en la evaluacin elementos como la

    sistematicidad o la cientificidad del procedimiento de evaluacin.

    En todas las definiciones sobre evolucin de proyectos hay elementos comunes: concebir-

    la como un proceso sistemtico orientado hacia la toma de decisiones.

    Desde un enfoque ms funcional, tambin es posible definir la evaluacin de proyectos

    en funcin de sus propsitos:

    a. Para saber si est logrando los objetivos

    b. Para determinar costes y beneficios

    c. Para evaluar a los participantes

    d. Para recopilar datos de cara a otras actuaciones

    e. Para ayudar a la toma de decisiones

    En cualquier caso, se concibe la evaluacin de proyectos de intervencin socioeducativa

    como un proceso de mejora continua, como proceso de indagacin y desarrollo de la planifi-

    cacin previa en un mbito concreto, con la finalidad de tomar las decisiones pertinentes en

    cada momento. Se trata de un proceso que puede utilizar tcnicas de evaluacin, que se aplica

    sobre las actuaciones realizadas, con una problemtica especfica, con el objeto de valorar,

    tanto el diseo y elaboracin del proyecto, como su aplicacin y resultados, el mbito en

    el que se desarrolla y los agentes que lo ejecutan, con la intencionalidad de mejorarlo en lo

    posible (como proceso de mejora) .

    11

  • Evaluacin de ro ectos de intervencin socioeduc~ ... .,w.:r1~ o ,, e, ... ~,

    Hay que tener presente, que las evaluaciones en el campo de la Educacin So . ijT ~"' - ; ;, tener en cuenta los destinatarios de la accin socioeducativa, los agentes que la ~- r,: . , . ~ , ~ y los mbitos donde se realiza la intervencin. Para evaluar proyectos de intervenc ~-:, ' .

  • Evaluacin de la intervencin socioeducativa

    D En qu contexto se aplica y cules son sus caractersticas?

    D Para quin va dirigido el proyecto?

    D Qu recursos ofrece?

    D Qu necesidades cubre el proyecto?

    D Qu limitaciones puede tener?

    b. Evaluacin del diseo y planificacin del proyecto

    Se refiere a los componentes fundamentales que constituyen el proyecto de intervencin

    socioeducativa:

    D Estn bien planteados los objetivos respecto a las necesidades que atiende el

    proyectos?

    D Qu finalidad tiene el proyecto?

    D La planificacin de tareas es la adecuada?

    D Existe una secuenciacin de la realizacin de actividades?

    D Cul es el cronograma o temporalizacin del proyecto?

    c. Evaluacin del proceso

    Se evala el proyecto de intervencin socioeducativa valorando los procedimientos

    y las actividades que se proponen con dicho proyecto . Las cuestiones que se plantea 1

    el evaluador son:

    D Cmo y quin ejecuta el proyecto?

    D Se cumple la planificacin previa de las actividades?

    D Qu limitaciones o dificultades surgen en su aplicacin?

    D Qu mejoras se introducen en el propio proyecto?

    D Cmo se participa en su aplicacin?

    D Cmo es recibido por los participantes?

    D Los recursos que ofrece son los adecuados?

    d. Evaluacin del producto

    Se valoran los efectos que ha producido , los logros y las limitaciones que ha tenido el pro-

    yecto , tanto en el proceso de aplicacin como en el anlisis de sus resultados . Se plantean

    cuestiones como las siguientes:

    D Qu resultados se han obtenido?

    D Qu dificultades ha habido?

    D Qu limitaciones tiene el proyecto?

    D Qu mejora ha supuesto?

    1.2. Modalidades en la evaluacin de proyectos

    En el proceso de evaluacin de proyectos, debemos plantearnos cuestiones como las

    siguientes :

  • Evaluacin de proyectos de intervencin socioeducativa6

    Qu se evala Objetivos

    Dnde se evala mbito

    Por quin se evala Agentes

    Por qu se evala logros

    Cmo se evala Modalidad

    Con qu se evala Tcnicas e Instrumentos

    Cundo se evala Temporalizacin

    En funcin de las respuestas dadas a esas cuestiones, se evaluar un proyecto de una u

    otra forma. En cualquier caso, el planteamiento para evaluar un proyecto de intervencin

    socioeducativa, debe partir en un primer momento de la identificacin de las necesidades y

    su priorizacin, para pasar ms tarde a seleccionar y delimitar el problema a tratar. El conoci-

    miento del estado de la situacin ayuda a plantear los objetivos del proyecto a aplicar para la

    mejora de una situacin carencial o desfavorable dentro del campo socioeducativo donde se

    aplicar. En este caso, nos planteamos qu queremos lograr con el proyecto, lo que nos obliga

    a ajustar los objetivos que pretendemos alcanzar.

    Los elementos que configuran un proyecto son los que se presentan en el grfico siguien-

    te, y todos ellos deben ser evaluados.

    ~ Informe final Deteccin de necesidades

    ( Temporalizacin

    \ Metodologa

    ~

    PROYECTO

    mbito de intervencin

    \ Finalidad

    ) Objetivos

    / Para Stufftebeam (1993), una intervencin socioeducativa puede evaluarse utilizando las

    siguientes modalidades de evaluacin:

    11

  • /

    Evaluacin de la intervencin socioeducativa

    a. Evaluacin del contexto, para lo que es necesario:

    D Definir el marco de intervencin

    D Valorar las necesidades de la poblacin con la que hemos de trabajar

    D Diagnosticar los problemas que subyacen

    D Juzgar si los objetivos propuestos son coherentes

    b. Evaluacin del diseo:

    D Evaluando las estrategias ms adecuadas para desarrollar los objetivos del proyecto

    D Seleccionando los recursos

    D Estructurando las actividades

    c. Evaluacin del proceso, evaluando:

    D La descripcin del proceso

    D La observacin de las actividades

    D La interaccin con otros profesionales que tambin intervienen

    d. Evaluacin del producto:

    D Interpretando los resultados obtenidos

    D Tomando decisiones en caso necesario

    Para Garca (1998) , la evaluacin de proyectos presenta una serie de ventajas, como son:

    a. Recibir un continuo conocimiento sobre su efectividad

    b. Identificar a los destinatarios que tienen dificultades

    c. Seleccionar aquellas estrategias de intervencin eficaces y eliminar las inadecuadas

    d. Justificar la solicitud de recursos de personal y materiales

    e. Contribuir a la calidad de vida de los destinatarios

    Autores como Daz Barriga y Hernndez Rojas (1998) sostienen que evaluar implica

    tener en cuenta seis aspectos centrales:

    l. La demarcacin del objeto , situacin o nivel de referencia que se ha de evaluar.

    2. El uso de determinados criterios para la realizacin de la evaluacin.

    3. Una cierta sistematizacin mnima necesaria para la obtencin de la informacin (tcni-

    cas, procedimientos e instrumentos)

    4. La elaboracin de una presentacin de lo ms fidedigna posible del objeto de evaluacin.

    5. La emisin de juicios esencialmente cualitativos sobre lo que hemos evaluado.

    6. La toma de decisiones para producir retroalimentacin.

    La evaluacin se puede llevar a cabo sobre el proyecto de intervencin socioeducativa en

    general, pero tambin podemos concretar la evaluacin sobre aspectos como:

    Elaboracin. Donde se podr observar las audiencias implicadas en el proyecto y su

    mbito de intervencin .

  • /

    Evaluacin de proyectos de intervencin socioeducativa 6 Fundamentacin terica. Referida a las bases conceptuales sobre las que se fundamenta

    el proyecto .

    Contextualizacin del proyecto. Cuando evaluamos este aspecto, consideramos en qu

    mbito y a quin va dirigido, sabiendo que las dimensiones educativa, social, poltica ...

    juegan un papel muy importante.

    Perfil del usuario. Referido a la experiencia, necesidades e intereses que el proyecto tiene

    que satisfacer.

    Calidad del proyecto. Referida a todos los componentes y a la consecucin de los

    objetivos, teniendo en cuenta la propia metodologa de evaluacin aplicada.

    La evaluacin de un proyecto de intervencin socioeducativa puede hacerse bajo diferen-

    tes modalidades, que estn en funcin de quien realiza la evaluacin, de la concepcin que

    de la evaluacin tiene el evaluador y de los fines que persigue con ella. Al igual que hemos

    indicado en la evaluacin de los mbitos de intervencin socioeducativa, las modalidades

    para evaluar un proyecto de intervencin socioeducativa en la prctica son:

    a. Evaluacin interna llevada a cabo por el personal que ha diseado y aplicado el proyecto,

    con un enfoque ms formativo y por lo tanto centrada en los procesos. Esta es la modali-

    dad ms deseable para evaluar un proyecto de intervencin socioeducativa.

    b. Evaluacin externa a cargo de expertos o de la institucin responsable del proyecto, que

    suele estar ms centrada en los rendimientos y en los resultados.

    c. Modelo mixto, en el que participan tanto los profesionales que han diseado y aplicado

    el programa, como otras personas designadas por la institucin responsable o de la

    Administracin.

    El tratamiento de los datos obtenidos en la evaluacin de proyectos de intervencin socio-

    educativa se realizar en funcin de la modalidad de evaluacin utilizada:

    D Experimentalista, que utiliza diseos experimentales o cuasi-experimentales, intentan-

    do establecer relaciones causales entre proyectos y resultados .

    D Eclctica, que busca la causalidad mltiple mediante la utilizacin de diseos experi-

    mentales de relaciones causales.

    D Descriptiva, que hace descripciones profundas del proyecto en el contexto en el que se

    desarrolla. Es la ms adecuada.

    D Presupuestaria, que determina si un proyecto es viable y sostenible o no en relacin con

    el coste-beneficio.

    En cualquier caso, evaluar un proyecto de intervencin socioeducativa es un proceso

    complejo que requiere de una secuenciacin y planificacin. Para llevarla a cabo es necesario

    abordar cada uno de los elementos que lo configuran, estableciendo con claridad los criterios

    que van a regir la funcin evaluadora. Para Marn (en Martnez, 1996): "junto a las posicio-

    nes clsicas que pretenden comprobar si se han cumplido las metas o si sirve para la toma de

    decisiones, un criterio que ha ganado una amplia audiencia es la de identificar las necesida-

    11

  • 1

    Evaluacin de la intervencin socioeducativa

    des, las ideas o los valores sociales o la calidad de objetos o proyectos alternativos", ya que,

    a su juicio, segn sea la necesidad de la evaluacin de cada mbito, variar la informacin, el

    tratamiento de los datos y la presentacin de resultados. A ello contribuyen algunas dimen-

    siones de la evaluacin de proyectos de intervencin socioeducativa:

    a. Dimensin didctica. La dimensin didctica de la evaluacin de proyectos de interven-

    cin socioeducativa tiene su fundamento en la ayuda que presta a los procesos formativos

    socioeducativos, constituyndose en un elemento fundamental de planificacin y de va-

    loracin de dichos proyectos.

    b. Dimensin psicopedaggica. Desde esta ptica evaluadora la funcin formativa de la

    evaluacin adquiere su pleno sentido al permitir el desarrollo de las personas mediante

    proyectos de intervencin socioeducativa. La dimensin psicopedaggica de la evalua-

    cin permite recoger informacin relevante y til para la finalidad que se persigue: por

    una parte determinar las causas de los posibles problemas de desarrollo del proyecto de

    intervencin socioeducativa, y por otra, que las personas a las que se dirige tomen con-

    ciencia de las estrategias que ms les favorecen.

    c. Dimensin social. La evaluacin de proyectos de intervencin socioeducativa est ligada

    tambin a determinadas actuaciones que inciden de forma notable en los aspectos sociales

    de la persona: relaciones en su entorno social, relaciones con amigos, compaeros, otras

    personas, etc. Las decisiones adoptadas por la evaluacin de proyectos de intervencin so-

    cioeducativa adquieren relevancia en lo social, en lo familiar y por lo tanto en lo personal.

    A la hora de evaluar un proyecto de intervencin socioeducativa, es conveniente tener en

    cuenta la utilizacin de las siguientes modalidades de evaluacin en funcin de los ejecutores:

    EVALUACIN DE PROYECTOS

    COEVALUACIN

    HElERO EVALUACIN

    Estas modalidades de evaluacin ya fueron explicadas en el captulo 3 de esta obra .

  • Evaluacin de proyectos de intervencin socioeducativa6

    1.3. Elementos y fases de la evaluacin de proyectos

    Los elementos para evaluar un proyecto de intervencin socioeducativa son los siguientes:

    l. Identificacin de las necesidades

    En un estudio inicial se determinan las carencias o deficiencias que presenta un grupo so-

    cial o un individuo en una situacin o mbito desfavorable o de necesidad. Es el momento

    de definir el estado de la situacin y las necesidades que hay que considerar previamente

    al diseo del proyecto . El estudio previo de la situacin del contexto o mbito de inter-

    vencin es uno de los factores determinantes en la elaboracin de un proyecto y de su

    puesta en prctica, de cara a su eficacia final. Los objetivos y las finalidades del proyecto

    dependen de las necesidades detectadas en el estudio previo.

    2. Planificacin de tareas, recursos y plazos

    Una vez estudiado el contexto en el que se lleva a cabo y al que se dirige la actuacin

    socioeducativa, se debe pensar qu tipo de tareas y recursos, y en qu plazos se van a uti-

    lizar, ya que los recursos, tanto materiales como humanos, son los que van a hacer posible

    la puesta en marcha y el desarrollo del proyecto con suficiente garanta de xito.

    3. Aplicacin del proyecto

    La aplicacin o puesta en prctica del proyecto se debe desarrollar respondiendo a las

    siguientes cuestiones que se planificaron en la fase anterior:

    Quin lo llevar a cabo?-7Agente educador de la intervencin

    Cundo?-7Temporalizacin de los plazos

    Con qu medios?-7Seleccin de los recursos a utilizar

    A quin se aplica?-7 Destinatarios de la intervencin.

    4. Evaluacin propiamente dicha

    La evaluacin desempea un papel decisivo durante toda la vida del proyecto, y de

    ella depende su xito o fracaso. Por esta razn, la evaluacin constituye un instru-

    mento por medio del cual podemos saber si hemos logrado o no los objetivos pro-

    puestos en el proyecto.

    En el proceso de evaluacin de un proyecto de intervencin socioeducativa podemos

    distinguir tres fases:

    Primera fase

    Consiste en familiarizarse con el proyecto a evaluar, mediante la observacin y el anlisis

    de documentacin. Se trata de conocer todos los extremos sobre el proyecto: caractersticas,

    estructura, poblacin a la que se dirige, cules son sus necesidades y oportunidades, etc., para

    elaborar un diseo evaluador ajustado. Podra decirse que se trata de una evaluacin inicial

    de carcter diagnstico . La fase diagnstica se convierte en una fase de informacin acerca

    de la comunidad para conocer en toda su extensin sus necesidades y problemas .

  • \

    Evaluacin de la intervencin socioeducativa

    Segunda fase

    En esta fase , se considerar la viabilidad de la evaluacin, es decir, la pertinencia

    de esta, grado de adecuacin del diseo evaluador realizado (cuantitativo , cualitativo

    o mixto) , oportunidad, etc ., mediante la comparacin del diseo realizado con la rea-

    lidad percbida en la primera fase, deteccin de posibles dificultades, etc. Esto puede

    realizarse mediante anlisis documental , observacin participante , cumplimentacin de

    registros, alguna entrevista con los responsables del proyecto, etc . Se trata de una eva-

    luacin de proceso .

    Tercera fase

    Que consistir en realizar la evaluacin propiamente dicha, de acuerdo con el diseo

    evaluador previamente elaborado , y en la obtencin de conclusiones que se recogern

    en un informe final.

    Ahora bien, al no existir un modelo unificado, la evaluacin de programas puede

    abordarse desde varios paradigmas , entendiendo como tal el marco de referencia ideo-

    lgico o conceptual que se utiliza para interpretar una realidad. La evaluacin de pro-

    yectos suele hacerse en funcin de alguno de estos tres paradigmas:

    D Paradigma cuantitativo

    D Paradigma cualitativo

    D Paradigma mixto

    La eleccin de uno u otro estar en funcin del tipo de proyecto a evaluar y a los criterios

    que se establezcan, teniendo en cuenta que la eleccin de uno u otro paradigma condicionar

    tanto las tcnicas e instrumentos a utilizar, como el informe de evaluacin.

    a. Las fases para evaluar un proyecto , desde el paradigma cuantitativo, son:

    D Organizacin de la informacin existente

    D Seleccin de la tcnica y los instrumentos de evaluacin

    D Recogida y tratamiento de datos

    D Anlisis de resultados

    D Elaboracin del informe cuantitativo

    b. Las fases para evaluar un proyecto , desde el paradigma cualitativo, son:

    D Observacin generalizada: participante, no participante, etnogrfica, etc.

    D Recopilacin de datos

    D Intercambio de impresiones

    D Elaboracin del informe cualitativo

    c. Las fases que pueden desarrollarse para evaluar un proyecto, desde el paradigma mixto,

    son una combinacin de las fases de los dos paradigmas anteriores .

  • Evaluacin de proyectos de intervencin socioeducativa 6 EVALUACIN DE PROYECTOS

    DE INTERVENCIN SOCIOEDUCATIVA

    ~ EVALUACIN Con criterios de

    Aplicabilidad

    DEL CONTEXTO Predisposicin Viabilidad

    ~

    EVALUACIN Con criterios de Coherencia Pertinencia DE LA PLANIFICACIN Adecuacin

    t EVALUACIN Con criterios de

    Eficiencia Ajuste DEL PROCESO Satisfaccin

    ~ Eficacia

    EVALUACIN Con criterios de Efectividad DE LOS RESULTADOS Suficiencia

    Satisfaccin

    t EVALUACIN Con criterios de

    Repercusin Permanencia DIFERIDA Proyeccin

    Hay que tener presente que la evaluacin debe formar parte del diseo de todo pro-

    yecto de intervencin socioeducativa, en vez de ser considerada como algo extrao o

    apendicular. Es por ello, que el diseo de la evaluacin de un proyecto de intervencin

    socioeducativa debe hacerse cuando se est diseando el propio proyecto , y por lo tanto

    los momentos evaluadores estarn definidos en funcin de los tiempos en los que se

    desarrolle .

    Con carcter general , podemos establecer los siguientes momentos para evaluar pro-

    yectos de intervencin socioeducativa, en relacin con el objeto de evaluacin y las

    dimensiones a evaluar:

  • Evaluacin de la intervencin socioeducativa

    MOMENTOS DIMENSIONES A EVALUAR OBJETO DE EVALUACIN

    Contenido del proyecto CALIDAD INTRNSECA

    Calidad tcnica 1.1NICIAL DEL PROYECTO

    Evaluabilidad

    (SE EVALA EL PROYECTO ADECUACIN AL CONTEXTO

    Respuesta a necesidades y carencias

    MISMO) Priorizacin

    ADECUACIN SITUACIN DE Viabilidad

    PARTIDA

    Actividades

    2. PROCESUAL Secuencias EJECUCIN Tiempo

    (EL PROYECTO EN SU Flexibilidad

    DESARROLLO) Clima MARCO

    Coherencia

    Contestacin MEDIDA Y LOGROS

    Contraste

    3. FINAL Criterios VALORACIN

    (EL PROYECTO Referencias EN SUS RESULTADOS) Decisiones

    CONTINUIDAD Incorporacin de las mejoras

    Seguimiento

    Por lo que respecta a las tcnicas para evaluar proyectos de intervencin socioeducativa,

    aunque son tratadas de forma exhaustiva en el captulo 7 de este libro, pueden ser utilizadas

    alguna de las siguientes:

    TCNICAS CUANTITATIVAS TCNICAS CUALITATIVAS

    Encuestas formales Entrevistas con informantes Encuestas informales Entrevistas de grupo Medicin directa Entrevistas comunitarias Anlisis coste-beneficio Anlisis documental Anlisis coste-eficacia Observacin participante y no participante Otras ... Otras ...

  • Evaluacin de proyectos de intervencin socioeducativa 6 1.4. Modelos de evaluacin de proyectos

    Para evaluar proyectos de intervencin socioeducativa, es necesario fijar algunos criterios

    adecuados y los correspondientes indicadores segn las caractersticas del proyecto. Sobre

    este particular existen diversos enfoques que se han materializado en modelos concretos y

    que utilizan criterios diferentes . Recordamos aqu de forma sucinta algunos de los modelos y

    sus autores que ya se han reseado en pginas anteriores:

    El modelo de Tyler, que fue uno de los primeros modelos utilizados para la evaluacin,

    centrado en el logro de objetivos, y que no tiene en cuenta los contextos de aplicacin ni

    otros elementos complementarios.

    El modelo de Stake, ms centrado en las necesidades de las personas que participan en

    el proyecto .

    El modelo de Cronbach, que defiende el uso de diseos funcionales para la evaluacin de

    proyectos, en contra de diseos ms estructurales .

    El modelo de Rossi, Freeman, Wright y Chen, de carcter comprensivo, que supone un intento

    por actualizar la evaluacin de proyectos, ofreciendo tres conceptos no conocidos hasta ese

    momento: evaluacin comprensiva, evaluacin adaptada y evaluacin conducida por la teora.

    Para Stuffiebeam y Shinkfield (1993), la evaluacin de proyectos debe programarse como

    un proceso cclico para valorar si ha conseguido alcanzar los objetivos para los que se puso

    en marcha o ha dado lugar a otros efectos y resultados . Por ello, consideran necesario:

    D Identificar los objetivos del proyecto

    D Identificar las necesidades de los participantes

    D Establecer indicadores

    D Recoger datos relativos a las variables o indicadores seleccionados

    D Analizar qu objetivos se han alcanzado

    D Juzgar el valor o el mrito en su consecucin

    Por nuestra parte, proponemos los siguientes criterios a tener en cuenta para evaluar un

    proyecto de intervencin socioeducativa:

    Si se seleccion el caso o mbito correctamente

    Si los datos obtenidos fueron suficientes en cantidad y en calidad

    Si su tratamiento fue el adecuado

    Si el supuesto de partida fue correcto

    Si el proyecto de intervencin socioeducativa estuvo bien diseado

    Si su ejecucin y puesta en prctica fue adecuada

    Con carcter general, un modelo de evaluacin de un proyecto de intervencin socioedu-

    cativa debe caracterizarse por las siguientes dimensiones:

    a. La contextualizacin del modelo de evaluacin y la fundamentacin, que debe centrarse

    en la delimitacin del mbito o rea de aplicacin, de manera que podamos identificar la

    situacin problemtica.

    11

  • Evaluacin de la intervencin socioeducativa

    b. El anlisis y diagnstico, que debe servir para saber qu medios y recursos disponemos,

    y las circunstancias socioeducativas o de cualquier otro tipo de los destinatarios a quienes

    va dirigido.

    c. La programacin de los objetivos , actividades, mtodos, medios , tiempos y luga-

    res de actuacin de proyectos de intervencin socioeducativa es fundamental para

    garantizar su xito.

    d. La intervencin propiamente dicha en la situacin o mbito previsto.

    e. La evaluacin del diseo, primero, la evaluacin del proceso de funcionamiento del mo-

    delo propuesto, despus , y al final del proyecto, la evaluacin del xito o fracaso en fun-

    cin de los resultados y de los objetivos alcanzados.

    Los modelos o marcos de referencia de evaluacin de proyectos de intervencin socio-

    educativa son abundantes, por lo que trataremos de clasificar las aportaciones de diversos

    autores en la sntesis siguiente:

    MODELOS DE EVALUACIN

    ! ! Orientados Orientados Orientados

    hacia objetivos al valor o juicio a contenidos

    l. Modelos orientados hacia objetivos

    Por lo general , estos modelos se caracterizan por que:

    D Se centran en los propsitos y finalidades de la educacin en la medida que se consi-

    guen los objetivos y su grado de consecucin .

    D Pretenden comprobar si los objetivos de los proyectos educativos logran las metas

    definidas en su elaboracin.

    D La definicin de los objetivos y las metas es el principal elemento de estos modelos.

    D Estos modelos son conocidos como "clsicos" .

    2. Modelos orientados hacia contenidos

    Las caractersticas de estos modelos son:

    D Se centran en los propsitos y finalidades de la educacin en la medida que se consi-

    guen los contenidos propuestos .

    D Las metas de contenidos son los fines a conseguir.

  • Evaluacin de proyectos de intervencin socioeducativa 6 O Suelen estar ligados a enfoques "tecnolgicos" del desarrollo curricular.

    D Suelen estar relacionados con la escuela psicolgica denominada "conductismo".

    3. Modelos orientados al juicio del mrito o valor

    Las caractersticas de estos modelos son:

    D Consideran fundamentalmente las necesidades del sujeto o destinatario.

    D Es necesaria una formacin adecuada con dominio de tcnicas para el anlisis de datos

    y la emisin del juicio.

    D La funcin del evaluador es valorar el mrito y valor de un proyecto, es decir, la efica-

    cia o no de este y su forma de llevarlo a cabo o no.

    D Elementos del anlisis sistmico:

    mbito especfico

    Contexto

    Entrada

    Proceso

    Producto

    Entre los modelos orientados al juicio o valor destaca la autoevaluacin como mtodo

    principal. Entre sus limitaciones ms destacadas cabe sealar que la posibilidad de aplicar

    una metodologa adecuada para obtener informacin y emitir juicios no suele estar ajustada a

    los valores que se recogen en el proyecto. En los cuadros siguientes se ofrece una sntesis de

    los modelos y autores ms relevantes a los que nos hemos referidos:

    TYLER (1950} PROVUS (1969}

    La evaluacin como logro El estadio del diseo o descripcin de las

    Grado en el que se consiguen los objetivos intenciones del programa es:

    Proceso evaluativo: El estadio de instalacin

    Establecimiento de metas u objetivos El estadio del proceso o medida de los logros del

    Clasificacin de las metas u objetivos programa

    Definicin de los objetivos en trminos El estadio del producto o de resultados

    conceptuales El estadio de comparacin final del programa

    Bsqueda de situaciones en las que los objetivos se realizan HAMOND (1971}

    Desarrollo o seleccin de tcnicas a medida. Recogida de datos de la prctica Desarrolla un cubo tridimensional para

    Comparacin de los datos con los objetivos describir las variables de los programas

    conductuales educativos y la organizacin de la evaluacin.

    Definicin del problema Definicin de las variables descriptivas Enunciacin de los objetivos Valoracin de la prctica Anlisis de los res u Ita dos Comparacin de los resultados con los objetivos

  • Evaluacin de la intervencin socioeducativa

    CRONBACH (1963) STAKE (1967)

    Nos presenta la teora evaluativa referida a la Defensor de los mtodos cualitativos para evaluacin formativa y las distintas funciones la evaluacin de programas. Considera la que puede presentar la evaluacin en el evaluacin como respondiente. currculum. la teora de evaluacin de Stake se refiere a:

    Considera que los datos que interesan a la Evaluacin como servicio evaluacin son: Evaluacin como reflejo de valores

    Estudios de procesos Evaluacin respondiente

    Valoracin de las actitudes Sus principios de evaluacin son: logro de los alumnos Igualdad Datos para el estudio de investigacin Ubicuidad En la obra "Hacia la Reforma de Evaluacin de Diversidad Programas" destaca: Utilidad

    los estadios de maduracin de Programas. Redundancia

    Los propsitos de la evaluacin Ambigedad

    Diseos de evaluacin flexible. Generalizacin

    SCRIVEN (1975) STUFFLEBEAM Y SKINFIELD (1987)

    Considera la evaluacin como valoracin Conciben la evaluacin como el proceso de formativa y sumativa, y la meta-evaluacin. identificar, obtener y proporcionar informacin

    la lista de control de Scriven (Scriven, 1974; til y descriptiva acerca del valor y mrito de

    Kirkahart y Scriven, 1989) consiste en: las metas.

    Evaluacin El marco conceptual de la evaluacin segn

    Descripcin estos autores son:

    Clientes Evaluacin del contexto

    Antecedentes y contexto Evaluacin de entrada

    Recursos Evaluacin de proceso

    Funciones Evaluacin de producto

    Distribucin del sistema las decisiones que la evaluacin nos Consumidor proporcionan son: Necesidades y valores Decisiones de realizacin Normas Decisiones de reciclaje Procesos Decisiones de planificacin Resultados Decisiones de estructura Generabilidad Costes Comparaciones Significatividad Recomendaciones Informes Meta-evaluacin

  • Evaluacin de proyectos de intervencin socioeducativa 6 STENHOUSE (1984) GUBA Y LINCOLN (1989)

    Considera que la evaluacin debe dirigirse al Consideran la evaluacin naturalista, en cuya desarrollo del currculum y estar integrada en l. concepcin la negociacin tiene un papel Por ello este modelo se define como evaluacin importante. El criterio fundamental de esta teora para la mejora de la escuela. es el consenso entre todos los participantes.

    La prctica evaluativa consiste en: Esta teora est dentro de la concepcin del paradigma constructivista.

    Conocer el contexto Proceso evaluativo: Destacar el valor de las relaciones e intercambios

    de carcter psicosocial Recogida de las demandas, intereses,

    Interpretar representativamente los hechos necesidades .. .

    Subrayar el valor de los procesos y resultados Conocimiento de las demandas, intereses ...

    Utilizar la opinin de los protagonistas de la Cuestiones no resueltas en la fase anterior

    accin Conocimiento de los hallazgos del evaluador,

    Mantener una visin global del centro discusin y negociacin

    Dar prioridad de la vertiente cualitativa de la Proceso de investigacin evaluativa: evaluacin 1. Contratacin. 2. Organizacin 3. Identificacin

    Crear hbitos y actitudes que favorezcan la de las audiencias. 4. Desarrollo de construcciones autorreflexin sistemtica y rigurosa articuladas dentro del grupo. 5. Ampliacin de las

    En este modelo la planificacin y la negociacin construcciones a travs de nuevas informaciones. son estrategias claves. 6. Identificacin de las cuestiones resueltas. 7.

    Priorizacin de las cuestiones no resueltas. 8. Recogida de informacin. 9. Elaboracin de una agenda de negociaciones. 1 O. Realizacin de las negociaciones. 11. Realizacin del informe. 12. Reinicio del informe. 13. Reinicio del ciclo.

    1.5. Funciones de la evaluacin de proyectos

    Las funciones de la evaluacin de proyectos son, segn Ventosa (2001):

    Funcin optimizadora , mediante la cual se realiza una seleccin activa del proyecto a

    aplicar.

    Funcin sistematizadora , que ayuda a la comparacin de un proyecto de intervencin

    socioeducativa con otros proyectos y a su realizacin .

    Funcin adaptativa o retroalimentadora , que sirve para ver si el proyecto de intervencin

    socioeducativa que estamos utilizando es til. Esta funcin , segn el autor, sirve para el

    automantenirniento y automejora del proyecto, ya que permite adaptarlo.

    Funcin motivadora o de aprendizaje, planteada como "formacin-en-la-formacin"

    en referencia a que la persona que implementa este proyecto tambin aprende. Las

    consecuencias de la accin mejoran la situacin problemtica de partida.

    Funcin de maduracin grupal, que "ayuda a la cohesin del grupo" . En este caso

    debemos reflexionar y analizar el grupo a quien va dirigida la accin .

    11

  • ,, 1

    Evaluacin de la intervencin socioeducativa

    Funcin participativa, en la medida en que en la elaboracin, aplicacin y evaluacin

    de un proyecto de intervencin socioeducativa intervienen muchas personas internas y

    externas al proceso. Ello hace que una evaluacin participativa sea enriquecedora desde

    las distintas perspectivas.

    1.6. Identificacin de los criterios e indicadores de la evaluacin de proyectos

    Para evaluar proyectos de intervencin socioeducativa, debemos establecer indicadores ob-

    servables que definan cada uno de los criterios establecidos y nos guen en ese proceso. La

    fijacin, cantidad y variedad de los criterios a utilizar para evaluar un proyecto de interven-

    cin socioeducativa estarn en funcin de factores diversos, unos relacionados con la propia

    estructura del proyecto, otros relacionados con la institucin que lo patrocina o promueve y

    otros relacionados con la actitud de los agentes evaluadores . Por lo tanto, ni puede ni debe

    pretenderse que exista uniformidad a la hora de evaluar proyectos de intervencin socio-

    educativa, ya que son muchos los factores que intervienen en cada uno de ellos, y que van a

    condicionar el establecimiento y fijacin de los criterios de evaluacin, a no ser que desde la

    institucin que lo promueve se den previamente fijados los criterios de evaluacin.

    LOS PROYECTOS SE ESTRUCTURAN EN

    t OBJETIVOS

    1

    l QUE ANALIZAN SU LOGRO

    EN FUNCIN DE

    t CRITERIOS DE EVALUACIN

    QUE ESTN DEFINIDOS POR

    t INDICADORES

    11

  • Evaluacin de proyectos de intervencin socioeducativa6

    Una vez fijados los criterios que se utilizarn para evaluar un programa o un proyecto

    de intervencin socioeducativa, el siguiente paso es seleccionar los indicadores observables

    que permitirn realizar tal evaluacin. Por la misma razn expuesta para los criterios, en la

    seleccin de los indicadores, tampoco es lgico esperar uniformidad, sino que ser la natu-

    raleza de cada uno de los proyectos a evaluar, junto a otros elementos de muy diverso tipo

    (administrativo, econmico, poltico, ideolgico, etc.), los que permitan fijar los criterios a

    utilizar y los indicadores que los definan.

    Algunos de esos indicadores, en relacin con los criterios anteriormente citados, po-

    dran ser:

    l. Criterio: Planificacin del proyecto

    Indicadores:

    D Contenido

    D Objetivos

    D Finalidad

    D Actividades

    D Temporalizacin

    D Evaluabilidad ...

    2. Criterio: Metodologa del proyecto

    Indicadores

    D Adecuacin a los objetivos de partida

    D Evaluacin inicial

    D Deteccin de necesidades

    D Marco de aplicacin del proyecto

    D Temporalizacin

    D Funcionamiento

    D Desarrollo del proyecto ...

    3. Criterio: Recursos utilizados en el proyecto

    Indicadores:

    D Cantidad de recursos

    D Calidad

    D Adecuacin de los recursos a las necesidades

    D Disponibilidad ...

    4. Criterio: Valoracin final del proyecto

    Indicadores:

    D Grado de satisfaccin general

    D Logros conseguidos

    D Valoracin de los resultados obtenidos

    D Continuidad del proyecto

    11

  • Evaluacin de la intervencin socioeducativa

    El Ud-Norad (1997) establece como criterios para evaluar proyectos de intervencin so-

    cioeducativa, los siguientes:

    Viabilidad. Se refiere a la medida en que los efectos positivos del proyecto continuarn

    despus que la ayuda externa haya finalizado . La viabilidad estar en funcin de otros

    factores, tales como: polticas de apoyo, aspectos institucionales , aspectos socioculturales ,

    factores tecnolgicos , medioambientales, econmico-financieros , etc .

    Pertinencia. Se refiere a la medida en que se justifica un proyecto en relacin con las

    prioridades de desarrollo local y nacional.

    Impacto. Hace referencia a los cambios positivos y negativos del proyecto, previstos o no

    previstos, analizados en relacin con sus beneficiarios.

    Eficacia. Se refiere a la medida en que los objetivos del proyecto han sido alcanzados.

    Eficiencia. Hace referencia a los resultados obtenidos en relacin con el esfuerzo realizado.

    A continuacin, y a ttulo de ejemplo, se presenta una tabla con algunos criterios e indicadores

    utilizados para evaluar proyectos educativos, en funcin de tres modelos previamente fijados para

    hacerlo, cada uno con sus caractersticas. Quedan sin definir los indicadores que se utilizaran para

    cada uno de los criterios de evaluacin, que estaran en funcin del proyecto concreto a evaluar.

    MODELOS DE EVALUACIN DE PROYECTOS EDUCATIVOS

    ~ EFICIENTISTA HUMANISTICO HOLISTICO S FINALIDAD Control tcnico

    Transformacin Valoracin integral

    socio-contextua!

    FUNDAMENTACIN Tecnolgica Psicosociolgica Sistemtica e integral

    TIPO DE INVESTIGACIN Experimental Sociolgica Socio-emprica

    ROL DEL EVALUADOR Tcnico externo Promotor Apoyo tcnico colaborativo colaborativo

    MODALIDAD DE Eficiencia Idoneidad de Implicacin global EVALUACIN procesos

    INSTRUMENTOS Objetivo-cuantitativos Cuantitativos Cuantitativos

    TRATAMIENTO DE Tcnicas estadsticas Tcnicas estadsticas Evidencia cientfico-

    INFORMACIN y participativas interpretativa

    EXPLOTACIN DE Por autoridades Por los implicados

    Por protagonistas y RESULTADOS externas autoridades

  • Evaluacin de proyectos de intervencin socioeducativa 6 Presentamos como ejemplo los indicadores generales y subindicadores que propuso la

    Comisin Europea, como marco global para la evaluacin homognea de los programas "S-

    crates" y "Comenius" , llevados a cabo en distintos pases europeos, entre ellos Espaa:

    INDICADORES PROPUESTOS POR LA COMISIN EUROPEA PARA LA EVALUACIN DE LOS PROGRAMAS "SCRATES" Y "COMENIUS" (ACCIN 2)

    Indicador 1. La accin ha llegado hasta los grupos-clave especficos.

    Indicador 2. Eficacia de la cooperacin transnacional como instrumento para alcanzar objetivos y para el mejor rendimiento de los tipos de intervencin puramente nacionales.

    Indicador 3. Las actividades realizadas se corresponden con las prioridades polticas nacionales en este campo.

    Indicador 4. Nivel de impacto de los proyectos de evaluacin intercultural en las escuelas y sistemas educativos en general.

    Los indicadores deben servir para constatar si se estn produciendo o no avances para

    conseguir un criterio concreto de evaluacin y, por lo tanto , constatar en qu medida se

    conseguirn los objetivos finales del proyecto, teniendo en cuenta que los indicadores no

    informan de por qu se est o no se est produciendo un avance, aunque proporcionan una

    base para la interpretacin y la toma de decisiones .

    La seleccin de los indicadores para la evaluacin de proyectos de intervencin socioedu-

    cativa debe responder a criterios de calidad, tales como:

    Deben ser operativos

    Deben ser independientes unos de otros

    Deben permitir definir claramente un criterio de evaluacin del proyecto

    Deben permitir fijar claramente un criterio de evaluacin del proyecto

    Deben permitir delimitar claramente un criterio de evaluacin del proyecto

    Pueden ser cuantitativos o cualitativos

    Deben ser empricos y cuantificables, cuando sea posible

    Deben permitir medir claramente resultados

    Deben ser sensibles a los cambios

    1.7. Algunas observaciones sobre la evaluacin de proyectos

    Es necesario tener en cuenta que cuando se va a realizar la evaluacin de un proyecto,

    pueden surgir dificultades relacionadas con:

  • '

    '

    Evaluacin de la intervencin socioeducativa

    La toma de posicionamiento, no reconociendo nuestras limitaciones.

    Subjetividad, ya que es frecuente tender a evaluar personas en vez de estructuras.

    Valoracin sin feed-back, ya que la valoracin debe permitir la intervencin formativa de

    mejora durante su desarrollo.

    Imposibilidad de cuantificar determinados aspectos del proyecto .

    Personalizacin de la evaluacin, en la medida en que se realice solamente por una

    persona sin la colaboracin del resto de participantes en el proyecto.

    Utilizacin de tcnicas e instrumentos inadecuados para evaluar.

    No devolver los datos a la comunidad de la que proceden.

    Por ello, y para finalizar este captulo, recogemos la seleccin de algunas de las afirmacio-

    nes que se encuentran en "Noventa y cinco tesis" que establece Cronbach (1980) en relacin

    con la evaluacin de proyectos, y que suscribimos.

    (El nmero entre parntesis al final de cada tesis es el que corresponde a la numeracin

    establecida por el autor):

    l. La evaluacin es un proceso por el cual una sociedad aprende de s misma. (1)

    2. La evaluacin de un proyecto particular es solamente un episodio en la continua evolu-

    cin sobre el conocimiento de un rea de problemas. (4)

    3. El mejor y ms completo de los trabajos sobre programas sociales es la comprensin y,

    seguidamente, su poltica, y tambin su contribucin a una mejor calidad de vida. (5)

    4. La observacin de proyectos sociales requiere un anlisis en profundidad tal que

    pueda hacerse una interpretacin laica, sin ayuda de juicios que conduzcan a falsas

    interpretaciones . (6)

    5. Los responsables administrativos de la evaluacin se quejan de que los mensajes de estas

    no son tiles, mientras que, a su vez, los evaluadores se quejan de que sus mensajes no

    son atendidos. (9)

    6. La influencia poltica del evaluador es inevitable. (10)

    7. Una teora de la evaluacin es como mucho una teora de la interaccin poltica, es decir,

    una teora de cmo se determinan las cosas. (11)

    8. La esperanza de que una evaluacin pueda ofrecer inequvocas respuestas convincentes

    suficientes para distinguir las controversias de un programa social es una falacia. (12)

    9. Las conclusiones de un evaluador profesional no pueden sustituirse por procesos

    polticos. (13)

    lO. La nocin del evaluador como un "superman" que puede realizar todas las tareas fcil-mente y ser eficiente en todo, dentro de una gestin pblica de carcter tecnolgico, es

    una quimera. (21)

    11

    11. En un contexto de negociacin, el evaluador adopta una actitud no directiva, es decir, no

    asesora en las decisiones sobre los resultados . (25)

  • Evaluacin de proyectos de intervencin socioeducativa6

    12.Apenas puede decirse que se "elaboran" decisiones sobre proyectos, ms al contrario, que

    las decisiones "emergen" en los proyectos. (28)

    13.Los polticos generalmente formulan metas ambiguas, pero demandan a los gestores que

    expliciten dichas metas. (33)

    14. "Evale este proyecto" es frecuentemente un encargo ambiguo, ya que los proyectos so-

    ciales no tienen unas fronteras claras. (35)

    15.Despus de planificar la obtencin de datos, el evaluador puede externamente acceder a

    suficiente informacin sobre la existencia y percepciones del proyecto. (36)

    16.Cuando el prototipo del proyecto es evaluado, podra observarse el amplio rango de rea-

    lizaciones que probablemente ocurren en la prctica. (41)

    17 .La flexibilidad y diversidad son preferibles a la rigidez de muchos contratos de evalua-

    cin. (42)

    18.La evaluacin de un proyecto est muy relacionada con los posibles proyectos quepo-

    dran proponerse en el futuro. (51)

    19. Un estudio de evaluacin presenta una evidencia peligrosamente convincente cuando pa-

    rece responder a una cuestin que , de hecho, no ha sido formulada. (57)

    20.El evaluador sabio no debe declarar lealtad a ninguna de las metodologas sumativas

    (cientfico-cuantitativas) o descriptivas (cualitativo-naturalistas). (59)

    21. Un control que fortalece un aspecto del proyecto probablemente debilita otro aspecto; por

    ejemplo, coste del proyecto y calidad de los datos. (61)

    22. Una muestra estricta de los datos ofrece menos informacin que un estudio de casos de

    diferentes caractersticas representativas . (62)

    23.Cada proyecto de evaluacin analiza una pequea parte de la realidad inmersa en un mar

    de incertidumbres. (65)

    24.En un primer estudio estadstico, antes de ser distribuida la informacin, el anlisis se

    llevara a cabo mejor por equipos independientes. (66)

    25.La importancia de la comparacin de datos depende de la naturaleza de la comparacin

    propuesta y de la etapa de madurez del proyecto. (70)

    26.Las medidas institucionales para la evaluacin dificultan o imposibilitan alcanzar un tipo

    de evaluacin ms til. (72)

    27. El incremento de los contratos de evaluacin es considerable, pero las limitaciones im-

    puestas no siempre son el mejor camino para obtener una informacin til. (76)

    28. Una macro-evaluacin no tiene por qu ser mejor que una micro-evaluacin. (77)

    29.La mayora de las evaluaciones tienen varios patrocinadores, la mayora de ellos con sus

    particulares perspectivas. (78)

    30.La descentralizacin administrativa de la evaluacin podra facilitar su buen desarrollo.

    (79)

    31. Una comunidad puede beneficiarse de una evaluacin solo cuando esta se ha realizado

    11

  • Evaluacin de la intervencin socioeducativa

    por profesionales conscientes del papel (rol) social de la evaluacin y de la naturaleza de

    su trabajo. (80)

    32.Las revisiones (reviews) de una evaluacin favorecen su avance, as como las revisiones

    desde diversas perspectivas. (88)

    33.Respecto a la formacin del evaluador, parece ser que el doctorado en alguna ciencia

    social es preferible a cursos restringidos a mtodos y tcnicas de evaluacin. (89)

    34.La formacin en evaluacin es frecuentemente un apndice de un departamento encarga-

    do de la formacin de acadmicos o de proveedores sociales. (90)

    35.El evaluador es un educador; su trabajo es juzgado por otros. (93)

    V. Resumen

    Las evaluaciones en el campo social han de tener en cuenta los destinatarios de la accin

    social, as como los agentes y mbitos de intervencin . Para evaluar los proyectos de in-

    tervencin socioeducativa, debern tenerse en cuenta la eficacia de estos en funcin de las

    necesidades, considerando su contexto de aplicacin y sus necesidades de partida.

    La evaluacin de proyectos de intervencin socioeducativa se relaciona con los concep-

    tos de planificacin y de intervencin que, junto a la evaluacin, son fases en el proceso de

    intervencin, y a su vez, fases en la elaboracin del proyecto.

    Las fases de la elaboracin de proyectos de intervencin socioeducativa son las si-

    guientes:

    Identificacin de las necesidades

    Planificacin de tareas, recursos

    Aplicacin o intervencin

    Evaluacin

    La evaluacin de proyectos de intervencin socioeducativa es un proceso orientado

    hacia la mejora en la intervencin social y debe partir de unos objetivos realistas .

    Un modelo de evaluacin de proyectos de intervencin socioeducativa se caracteriza

    por las siguientes dimensiones:

    Contextualizacin

    Anlisis y diagnstico

    Programacin

    Intervencin

    Evaluacin

    Considerando que en el campo de la Educacin Social, los destinatarios de los proyec-

    tos son los propios actores sociales como beneficiarios de la accin social, debemos eva-

  • Evaluacin de proyectos de intervencin socioeducativa 6 luar teniendo en cuenta sus necesidades. Esta evaluacin mejorar el desarrollo del propio

    proyecto, considerando las demandas y expectativas que surgen a lo largo de este.

    Un proyecto de intervencin socioeducativa tiene que convertirse en un instrumento para

    la mejora, partiendo de las necesidades de las personas al que va dirigido, concretado en la

    prctica real de un mbito de intervencin en situacin de desventaja y con la finalidad de

    solventar las dificultades y necesidades detectadas .

    En el seno del proyecto, la evaluacin tiene que ser un proceso permanente y continuo

    que innove y se incardine a su vez en un proceso de investigacin y valoracin sistemtica.

    El Standardfor Evaluations of Educational programs, proyect and materials, cita cuatro

    reas de evaluacin:

    Utilidad

    Factibilidad

    Adecuacin

    Seguridad

    Para la prctica adecuada de la evaluacin de proyectos es necesario tener en cuenta una

    serie de normas que nos guen y nos ayuden a comprobar nuestro trabajo:

    Normas de utilidad

    Normas de viabilidad

    Normas de correccin

    Normas de exactitud

    Las funciones de la evaluacin de proyectos de intervencin socioeducativa son:

    Funcin optimizadora

    Funcin sistematizadora

    Funcin adaptativa o retroalimentadora

    Funcin motivadora o de aprendizaje

    Funcin de maduracin grupal

    Funcin participativa

    La evaluacin se puede llevar a cabo sobre el proyecto de intervencin socioeducativa

    general, pero tambin podemos concretar la evaluacin sobre aspectos individuales del pro-

    yecto, como pueden ser:

    Elaboracin del proyecto

    Fundamentacin terica

    Contextualizacin del proyecto

    Perfil del usuario

    Calidad del proyecto

    Adems, hay que evaluar la actuacin de los agentes de intervencin socioeducativa y los

    mbitos de intervencin.

    11

  • Evaluacin de la intervencin socioeducativa

    VI. Actividades

    l. Recordar el concepto de evaluacin de proyectos de intervencin socioeducativa.

    2. En la fase de desarrollo de proyectos de intervencin socioeducativa, sealar la caracte-

    rstica que se considera ms necesaria:

    D Necesidades y demanda de la audiencia

    D Conocer la temporalizacin del diseo

    D Utilidad del proyecto

    3. Ordenar de modo ascendente las fases de elaboracin de un proyecto de intervencin

    socioeducati va:

    D Metodologa utilizada

    D Planificacin de las necesidades

    D Logros y resultados

    D Desarrollo del proyecto

    D Anlisis de las necesidades

    D Fundamentacin terica

    VIl. Autoevaluacin

    Con qu conceptos se relaciona la evaluacin de proyectos en Educacin Social?

    Qu fases podemos establecer en el proceso de elaboracin, aplicacin y evaluacin de

    un proyecto de intervencin socioeducativa?

    Qu cuestiones podemos planteamos en el proceso de la evaluacin de proyectos de

    intervencin socioeducativa?

    Soluciones:

    La evaluacin de proyectos en Educacin Social se relaciona con los conceptos de

    intervencin y planificacin, formando parte de un contexto conceptual interrelacionado.

    Las fases que podemos establecer en el proceso de elaboracin, aplicacin y evaluacin

    de un proyecto de intervencin socioeducativa son las siguientes:

    D Identificacin de necesidades

    D Planificacin de tareas, recursos y plazos

    D Aplicacin del proyecto

    D Evaluacin

    En el proceso de la evaluacin de proyectos de intervencin socioeducativa, podemos

    planteamos las siguientes cuestiones:

    11

  • Evaluacin de proyectos de intervencin socioeducativa 6 Qu se evala Objetivos

    Dnde se evala Contexto mbito

    Por quin se evala Agentes

    Por qu se evala Logros/Resultados

    Cmo se evala Modalidad

    Con qu se evala Tcnicas e Instrumentos

    Cundo Temporalizacin

    11