EVALUACIÓN DE SERVICIOS DE EVALUACIÓN DE SERVICIOS DE SALUD MENTALSALUD MENTALDr. Gaspar A. Da Costa F.

Psiquiatra. Maestría en Salud PúblicaPostgrado en Docencia Superior

Coordinador del Programa Nacional de Cuidados Paliativos MINSA PANAMÄ

EVALUACIÓN “Un método de determinación del valor o del grado

de alcance de un objetivo determinado”. Asociación Americana de Salud Pública.

“Consiste en una comparación entre aquello que se hace y aquello que se debe hacer” Sarraceno y col.

“Un juicio sobre una actividad en cuanto al grado de alcance de un objetivo previamente establecido, valorando incluso los recursos utilizados, y comparándola con otra actividad que hemos considerado ideal” Aparicio, Víctor.

PARA PODER EVALUAR DEBO SABER QUE QUIEROPARA PODER EVALUAR DEBO SABER QUE QUIERO

EVALUACIÓN - CONCEPTOSEVALUACIÓN - CONCEPTOS

Principios de Proceso de Evaluación y Mejora

1. Se debe desarrollar una cultura de la evaluación:Ø implica empezar a vencer ciertas resistencias que toman la forma de excusas,

como la falta de tiempo o de dinero para hacer la evaluación. Los gestores o líderes deben trabajar para esto.

2. Se debe tener una actitud de autoevaluación y participaciónuna actitud de autoevaluación y participación Ø lo que depende de la motivación del equipo.

3. Se debe contar con información apropiadainformación apropiada. 4. Es importante el uso de metodologías correctasmetodologías correctas. 5. Se requiere tiempotiempo y dedicación suficientes. 6. Es preciso ser realistas y pragmáticospragmáticos, es decir, fijarse metas

modestas, sobre todo al inicio de la cultura evaluativa. 7. Debe haber un fuerte liderazgo de quienes son las cabezas de estas

unidades. 8. Los objetivosobjetivos deben estar bien definidos bien definidos.

Liderazgo y Evaluación La presencia de liderazgos fuertes es fundamental en este

modelo de evaluación y mejora continua de la calidad. Se necesitan líderes fuertes, que logren implementar

políticas y estrategias que generen alianzas y recursos para llevar adelante los procesos de innovación y aprendizaje necesarios para el éxito de los planes de evaluación y mejora

A quién evaluar:Clientes internos, externosIndividuos, grupos, familiasServicios de Salud Mental

Qué evaluar:Políticas, Planes, Programas, Proyectos.Contexto, Recursos, Procesos, Resultados, ImpactoProcesos de Promoción, Prevención, Atención, Rehabilitación, Comunicación

Con qué evaluar:Fuentes de Información, Entrevistas, instrumentos, otros.

Por qué evaluarNecesidad de una aproximación científica al

proceso de gestión de los servicios de salud mentalNecesidad de establecer objetivos y controlar su

cumplimientoNecesidad de una base sobre la que definir las

actuaciones que se realizan o planean realizar

La evaluación marca los estadios de desarrollo de un servicio de salud mental, la programación de objetivos, el diseño de las intervenciones y el control de los resultados

Contra qué evaluar (con qué comparo) Contra un Estándar

Corresponde al patrón de referencia para el análisis.

Se le conoce también como normaDeben elaborarse teniendo en cuenta el

contexto en el cual operan los servicios de salud.

Estándares generales no siempre aplican bajo circunstancias locales

Elementos Básicos para un Sistema de Evaluación de Servicios

Criterio: Elemento predeterminado que define apropiadamente una actividad en términos operativos: Implícito o Explícito

Estándar: Valor preestablecido que expresa cuando un criterio está dentro de los límites aceptables

Indicadores: Variables medibles de recolección periódica, pueden o no expresarse números relativos. No expresan en si mismos juicios de valor.

Algunos Indicadores centinelas para los Servicios de Salud Mental (con estándar)

Morosini & Veltro1. Paciente joven con más de dos crisis aguda por año2. Paciente que no sale de su casa por un tiempo determinado.3. Abandono del seguimiento de un paciente4. Paciente en prisión5. Suicidio posterior al alta después de un período definido6. Actitudes hostiles de la familia7. Desarrollo de Dependencia Alcohólica8. Accidentes con lesiones9. Agresiones a otros pacientes o al staff10. Alta sin autorización médica

NIVELES DE EVALUACIÓN(Donabedian, Galán, otros)

Contexto - Necesidades- Demanda – pertinencia Estructura - Oferta – Recursos – adecuación Proceso – eficiencia Producto – Resultado - Eficacia Impacto – Efectividad

Para cada una de ellas se establece un marco de referencia que incluye: La estructura ( adecuada o Inadecuada), El Proceso (adecuados o inadecuados) y el Producto (Volumen, calidad, tecnología, costos y tiempo)

Sistema de InformaciónTipos de Fuentes

Fuentes Rutinarias.Fuentes Rutinarias.Registro Diario de Actividades

Fuentes Periódicas.Fuentes Periódicas.Contraloría de la RepúblicaAuditoria de ExpedientesEncuestas de Satisfacción de Usuario

Fuentes PuntualesFuentes PuntualesEstudios Cualitativos y CuantitativosEncuestas.

Para la Demanda Estadísticas Registros Médicos

Para la Oferta Estructura orgánica y funcional Recursos Sistema de información

FUENTES DE INFORMACIÓNFUENTES DE INFORMACIÓN Procesos

Administrativos Manuales operativos

Atención Médica Flujogramas de los Servicios Protocolos de Atención Historias Clínicas Registro de los tiempos de espera

Rendimiento, Productividad y Costos

Información de recursos humanosFísicos y financieros Producción de actividades

intermedias y finales

FUENTES DE INFORMACIÓN

Los Resultados (producción del hospital, concentración, oportunidad, utilización de los recursos, gastos de atención y costo beneficio de actividades intermedias y finales) Estadísticas institucionales

Consultas Egresos Cirugías Partos Ocupación de las camas Actividades de apoyo diagnóstico y complementación

terapéutica

FUENTES DE INFORMACIÓN

Impacto Cambios en los riesgos de enfermar o morir

Estadísticas Vitales, DemografíagGráfico de tendencias de tasas de suicidios

Costo efectividad de la atención Estadísticas hospitalarias

Satisfacción de los usuarios Encuestas realizadas en muestras representativas

Evaluación SistemáticaEvaluación Sistemática

RETROALIMENTACIÓN

Demanda Estructura Proceso Producto Impacto EVALUACIÓN INTEGRAL

Oferta Oferta estructura y estructura y

OrganizaciónOrganizaciónDemanda Demanda

ExpectativasExpectativas

ENTRADASENTRADAS

ProcesoProceso

Oferta Oferta

Vs. Vs. DemandaDemanda

Producto Producto ResultadosResultados

Impacto Impacto EfectoEfecto

SALIDASSALIDAS

CONTEXTO

CONTEXTO Son los fenómenos, circunstancias y elementos que se

ubican en el entorno o ambiente del sistema de salud.

Características: Las políticas de salud Características y evaluación de los servicios de salud

en general Proceso de desarrollo económico y social Actitud comunitaria hacia la salud y su salud mental Las políticas educativas Los objetivos, metas del sector salud que dirigen los

programas de salud (su relación con la salud mental)

Aparicio, Víctor. Evaluación de Servicios de Salud Mental. 1993

NECESIDAD Y DEMANDA Aspectos cuantitativos y cualitativos de la formación de los

recursos profesionales, técnicas, auxiliares y administrativos en el área de salud mental

Exigencia de la sociedad en aspectos de consulta externa, hospitalización, urgencias y dispositivos intermedios, otros.

Severidad de los diagnósticos que llegan a las instituciones asistenciales.

Analizar las características de los diferentes programas y su incidencia en el rendimiento y desempeño profesional.

Analizar las características de los usuarios a través de los problemas de salud que son motivo de consulta y la severidad de los mismos.

Evaluación Integral

DEMOGRAFÍADEMOGRAFÍA-ESTRUCTURA Edad Zona Sexo Región

- CRECIMIENTO Natalidad Mortalidad Migración

F. AsociadosF. Asociados

CONDICIÓN DE CONDICIÓN DE SALUDSALUD

-MORBILIDAD

-MORTALIDAD

-INCAPACIDAD

F. Relacionados

NECESIDAD NECESIDAD

-BIOLOGÍA

-SOCIAL

- DEMANDA EFECTIVA

-Atendida y No atendida

F. CondicionantesF. Condicionantes

DEMANDA

ESTRUCTURA

OFERTA

Busca dar respuesta a los requerimientos según la necesidad y demanda.

Determina la organización y funcionamiento de los programas, los insumos, recursos humanos, físicos y financieros, y los servicios de atención a las personas y el medio ambiente.

Evaluación IntegralOFERTAOFERTA

SERVICIOS DE ATENCIÓN A LAS PERSONASSERVICIOS DE ATENCIÓN A LAS PERSONAS-AMBULATORIOS - HOSPITALES

-ACCESIBILIDAD / DISPONIBILIDAD

ORGANIZACIÓNCOMPLEJIDAD NIVELES: De Responsabilidad

Atención Médica

REGLAMENTACIÓN FORMAL / INFORMAL

RECURSOSHUMANOS FÍSICOS ECONÓMICOS

SISTEMA DE INFORMACIÓNCONTENIDO FRECUENCIA NIVELES DE AGREGACIÓN

PARADIGMAS

VARIABLES

DEFINICIÓN CONCEPTUAL

INDICADORES

REDES INTEGRADAS DE SERVICIOS DE SALUD

Descripción de Servicios Existentes

Sistema de Salud

Servicios de SM integrados en el Sistema General

de Salud

Servicios de SM en Atención

Primaria en Salud

Servicios de SM en Hospitales

Generales

Servicios de SM basados en la Comunidad

Servicios de SM comunitaria

formales

Servicios de SM comunitaria informales

Servicios de SM Institucional

Servicios de SM institucionales Especializados

Hospitales Psiquiátricos

Oferta: Ejemplos de Indicadores

Oferta: Ejemplos de Indicadores

PROCESOS

¿Qué es un proceso?Conjunto de actividades que se realizan para obtener un

valor añadido o determinado resultado Pasos para la gestión por procesos

1. Identificar y secuenciar los procesos2. Describir cada proceso 3. Realizar el seguimiento y la medición para conocer los

resultados que obtienen 4. Realizar mejoras en los procesos en base en el

seguimiento y medición

Tipos de procesos Procesos estratégicos Procesos operativos Procesos de apoyo

Para quiénes Para qué Qué Cómo

PROCESOS Evalúa la marcha de los programas de salud mental

analizando las interrelaciones (administrativas, financieras, científicas) entre los recurso humanos, tecnológicos, económicos las actividades intermedias y finales.

La evaluación y el monitoreo: Permite el ajuste periódico del programas. Brinda seguimiento para identificar posibles desviaciones de

lo programado y lo ejecutado, de manera que permite realizar correcciones oportunas y precoz.

Evaluación IntegralPROCESO

PRESTACIÓN DE SERVICIOSNATURALEZA RENDIMIENTOCONTENIDO ATENCIÓN % ocupacional –X

estadía egresos cama/añoTECNOLOGÍA UTILIZADA

COORDINACIÓNFRECUENCIA DE PROCEDIMIENTOS (restricción/aislamiento)

RECEPCIÓN DE SERVICIOSCONTENIDO CONCENTRACIÓN

UTILIZACIÓNOPORTUNIDAD

Proceso: Ejemplos de Indicadores de Proceso

Evaluación de la EficienciaAnálisis de Costo - Efectividad.Análisis de Costo - Efectividad.Mide los resultados en una sola dimensión Ejemplo Tx Mide los resultados en una sola dimensión Ejemplo Tx Ambulatoria vs Tx con Hospitalización vs H. día.Ambulatoria vs Tx con Hospitalización vs H. día.

Análisis de Costo - Utilidad.Análisis de Costo - Utilidad. Mide los resultados Mide los resultados en terminos de años ganados o perdidos por discapacidad en terminos de años ganados o perdidos por discapacidad (AVADS , DALYS)(AVADS , DALYS)

Análisis del Costo – BeneficiosAnálisis del Costo – BeneficiosEvalua los resultados de una intervención en términos Evalua los resultados de una intervención en términos monetarios.monetarios.

PRODUCTOS PRODUCTOS - RESULTADOS- RESULTADOS

Evaluación IntegralPRODUCTO

SERVICIOS BÁSICOS DE ATENCIÓN DIRECTA

EGRESOS EXÁMENES DE LABORATORIOCONSULTAS ESTUDIOS RADIOLÓGICOSDERIVACIONESCIRUGÍA URGENCIAS OTROS

CONCENTRACIÓN DE SERVICIOSGASTOS DE ATENCIÓN

UTILIZACIÓN

PRODUCTOS - RESULTADOS

Evalúa las actividades asistenciales intermedias y finales tales como salidas sin autorización médica, defunciones, despacho de medicamentos, estudios de laboratorios, el volumen de egresos, de consultas y pacientes atendidos en urgencias. (curativas y preventivas).

PRODUCTOS - RESULTADOS 1.Actividades intermedias: Laboratorio Clínico, EEG, CAT, RM Terapia Ocupacional Farmacia Nutrición /Dietética 2. Actividades Fomento y Protección de la Salud: Higiene oral, Autocuidado, Integración social 3. Actividades finales Consulta Externa por profesional Urgencias Hospitalizaciones

Resultados o Productos: Cobertura:Cobertura: (No de personas atendidas por primera vez

en un periodo) Concentración:Concentración: (No. de actividades realizadas en un

mismo sujeto en un periodo) Utilización:Utilización: (relacionar lo disponible en el sistema con

lo utilizado, Cupos utilizados/total de cupos disponibles) Gastos de Atención:Gastos de Atención: (cuantificar los costos de los

recursos que intervienen en las actividades del sistema)

RESULTADOS EN CLIENTES EXTERNOSRESULTADOS EN CLIENTES EXTERNOS¿A qué nos referimos? A que la organización alcance y mida los logros relacionados con sus clientes/usuarios

¿Cómo conoce la organización la consecución de estos logros?

Indicadores directos encuestas de satisfacción de usuarios Indicadores indirectos nº demandas/lista espera/derivaciones...

¿Qué tipo de logros?¿Qué tipo de logros?Los logros que se quieren obtener deben basarse en aspectos como:Los logros que se quieren obtener deben basarse en aspectos como:

Con los serviciosAccesibilidadComunicaciónTransparenciaFlexibilidadCapacidad de respuesta y profesionalidadAsesoramiento y apoyoFidelidadUtilidad de nuestras acciones

UsuariosSatisfacción generalUtilidad solucionar problemasProfesionalidadSatisfacción con las actividadesSatisfacción servicios generales

RESULTADOS EN PERSONAS (CLIENTES INTERNOS)

¿A qué nos referimos?A que la organización alcance y mida los logros relacionados con las personas

que la integran (empleados, voluntarios,..)¿Qué tipo de logros? Los logros en las personas se reflejan en aspectos como:

LiderazgoConocimiento de la organizaciónMotivaciónComunicaciónCondiciones de empleoClima laboralReconocimientoFormaciónIgualdad de oportunidades¿Cómo conoce la organización la consecución de estos logros?

Indicadores directos encuestas de satisfacción de empleados, voluntarios Indicadores indirectos quejas, sugerencias, absentismo, motivo baja ...

RESULTADOS EN LA SOCIEDAD¿A qué nos referimos?

A que la organización alcance y mida los logros relacionados con el entorno en el que desarrolla su actividad.

¿Qué tipo de logros?

Los logros en las personas se reflejan en aspectos como:

Comportamiento éticoDifusión de información relevante a la comunidadParticipación en la comunidadGeneración de empleoCuidado del medio ambienteSensibilización social

¿Cómo conoce la organización la consecución de estos logros?

Felicitaciones y premios recibidosMención en publicacionesCertificaciones

RESULTADOS CLAVESRESULTADOS CLAVES¿A qué nos referimos?

A que la organización (programa, área o servicio) alcance y mida resultados en los aspectos establecidos como claves en su Política y Estrategia

¿Qué tipo de resultados?¿Qué tipo de resultados?Son los logros más relevantes del programa, área o servicio relacionados Son los logros más relevantes del programa, área o servicio relacionados con los dependen directamente de los objetivos.con los dependen directamente de los objetivos.

Indicadores tanto directos como indirectos que estén relacionados con:Indicadores tanto directos como indirectos que estén relacionados con:La financiaciónLa financiaciónLas alianzas y recursosLas alianzas y recursosLas personasLas personasEl liderazgoEl liderazgo

¿Cómo conoce la organización la consecución de estos logros?¿Cómo conoce la organización la consecución de estos logros?

Balance de cuentasBalance de cuentasImplantación de tecnologíaImplantación de tecnologíaInversión en formaciónInversión en formaciónSituación de los procesos dependiendo del objetivo del procesoSituación de los procesos dependiendo del objetivo del proceso

Evaluación de los Productos Volumen:

Cuantificación de las actividades intermedias y finales (Mensual,trimestral, semestral , anual) Ejemplo : Hospitalizaciones y Servicios intermedios.

Calidad: Se relaciona con la satisfacción de las necesidades de aquellos que más necesitan de los servicios al menor costo y dentro de los limites fijados por la institución. Esta estrechamente ligada a la tecnología – Monitoreo -evaluación ( Audit. medico) y la satisfacción del usuario interno - externo.

Evaluación de los Productos Costos: Incluye los mecanismos , sistemas de

contabilidad para la identificación de “Costos Estándares” de los cuales se pueden derivar el régimen tarifario de las institución. Su analisis debe incluir: Relación entre los costos fijos y Costos Variables. Costos por actividades finales e intermedias y la Composición de los Costos.

Tiempo: Variable decisoria e influyente tanto en la determinación del volumen, como la calidad , de la tecnología y de los costos

IMPACTO

Impacto o Efecto: Es el efecto logrado en términos de disminución del

riesgo de enfermar, incapacitarse o morir de la población beneficiaria.

Cumplimiento de los programas, actividades o tareas previstas por el sector salud.

Cambios de actitud de los usuarios en los mismos servicios.

Satisfacción del equipo de salud de la comunidad demandante de servicios

Permite hacer contraste entre los perfiles epidemiológicos o situación de salud en un país, el perfil de los servicios de salud y el perfil de los trabajadores. Calidad de atención Costo-beneficio

Evaluación Integral

IMPACTO DISMINUCIÓN DEL RIESGO DE ENFERMAR Y MORIR

MORBILIDAD INCAPACIDADMORTALIDAD EXPECTATIVA DE VIDA

SATISFACCIÓN

EQUIPO DE SALUD COMUNIDAD

COSTO BENEFICIO CAMBIOS DE ACTITUD DE USUARIOS CALIDAD DE LA ATENCIÓN

ALGUNOS INDICADORES DE CALIDAD

1. Salidas sin autorización médica: (mal llamado Fuga)2. Incidentes ocurridos en el hospital3. Lesión en el uso de los medios de sujeción4. Error en medicación5. Incumplimiento por el personal de la política del hospital

relacionada con los medios de sujeción de los pacientes6. Gesto o intento d suicidio mientras el paciente está

hospitalizado7. Reacción imprevista a los medicamentos8. Traslado no planificado a otro hospital de cuidados agudos.

Fuente: OPS. Desarrollo y Fortalecimiento de los Sistemas Locales de Salud. La Garantía de Calidad: Acreditación de Hospitales para América Latina y el Caribe. 1992

Algunas Áreas de Evaluación de los Servicios de SaludORGANIZACIÓN Y FUNCIONAMIENTO

-Complejidad de la organización- Niveles de autoridad

- Funciones- Mecanismos de cordinación

COMUNIDAD-Receptora de los servicios-Recursos de Apoyo Social

ACTIVIDADES FINALES-Consultas de urgencias

- Consultas externas- Egresos hosp.

RECURSOS FÍSICOS-Tamaño

- Especialidad- Consultorios

- Camas disponibles

ACTIVIDADES INTERMEDIAS- Hospitalizaciones

- Restricción/Aislamiento- Exámenes de laboratorio

RECURSOS ECONÓMICOS-Inversión de la institución

- Presupuesto de funcionamiento

RECURSOS HUMANOS-Volúmen

- Características del personal

Muchas Gracias Por Su Atención.

Dr. Gaspar Da Costagdacosta07@hotmail.com