Validez y ConfiabilidadInstrumentos de Medición

Equipo N°7Mariela CamachoRosa González

Contenido:1. Medición: ¿En qué consiste?

2. Validez: Definición

2.1 De contenido

2.2 De criterio

2.3 De constructo

3. Confiabilidad: Definición

3.1 Test - retest

3.2 Formas paralelas3.3 Split - halves

3.4 Coeficiente alfa de Cronbach

3.5 Coeficiente KR-20

Procedimiento de la Investigación

Diseño de Investigación (seleccionado)

Selección de Muestra(Probabilística o No

Probabilística)

Recolección de datos (Cuantitativos)

Medir variables o conceptos

Instrumentos demedición

Deben cumplir con requisitos

1. Validez

2. Confiabilidad3. Objetividad

Instrumentos demedición

Deben cumplir con requisitos

1. Validez

MediciónProceso que vincula conceptos abstractos con indicadores empíricos.

Significa: “Asignar números, símbolos o valores a las propiedades de objetos o eventos de acuerdo con reglas”. (Stevens, 1951).

Instrumento de Medición

Registra datos observables que representan verdaderamente los conceptos o variables que el investigador tiene en mente.

Recurso que utiliza para

registrar información o

datos sobre las variables

Estandarizar y cuantificar los datos

Requisitos del Instrumento de Medición

Confiabilidad

Validez

Toda medición o instrumento de recolección de datos deben reunir los siguientes requisitos:

y

Validez de un Instrumento

Grado en que un instrumento realmente mide la variable que esta en estudio, se pueden obtener varios tipos de evidencias relacionadas con:

El Contenido El Criterio El Constructo

Ejemplo: Un instrumento para medir la inteligencia válido debe medir la inteligencia y no la memoria

Validez de Contenido

Grado en que un instrumento refleja un dominio específico de contenido de lo que se mide, es decir, la medición requiere tener representados prácticamente a todos, o a la mayoría de los componentes del dominio de contenido de las variables a medir.

Ejemplo:

L RE A N M ÑA Z U G

L R E A N M A Z U G

L E

Instrumento sin validez de contenido

Instrumento con validez de contenido

Instrumento sin validez de contenido

Debe responder: ¿el instrumento mide adecuadamente las principales dimensiones de la variable en cuestión?

Validez de Criterio

Establece la validez de un instrumento de medición al compararlo con algún criterio externo que pretende medir lo mismo. Cuanto mas se relacionen los resultados del instrumento de medición con el criterio, la validez de criterio será mayor.

Evidencias relacionadascon el Criterio

Evidencias relacionadascon el Criterio

Validez ConcurrenteValidez Concurrente

Validez PredictivaValidez Predictiva

El criterio se fija en el presente de manera paralela

El criterio se fija en el presente de manera paralela

El criterio se fija en elpasado

El criterio se fija en elpasado

Si diferentes instrumentos o criterios miden el mismo concepto o variable, el resultado debe ser similar.

¿En que grado el instrumento es comparado con otros criterios externos mide lo mismo ?¿Qué tan cercanamente las puntuaciones de los instrumentos se relacionan con otros

resultados sobre el mismo concepto ?

Debe responder:

Principio:

Validez de Constructo

Se refiere a qué tan exitosamente un instrumento representa y mide un concepto teórico. Debe dar el significado del instrumento, esto es, qué está midiendo y cómo opera para medirlo. Las mediciones de las dimensiones deben estar asociadas entre sí y fundirse en un concepto general (factor), de igual manera debe correlacionarse con mediciones del involucramiento y el compromiso.

¿El concepto teórico está realmente reflejado en el instrumento ?¿Qué significan las puntuaciones del instrumentos?

¿El instrumento mide el constructo y sus dimensiones?¿Por qué sí o por qué no?

Debe responder:

Validez de ConstructoE

T A

P A

S

Se establece y especifíca la relación teórica entre losconceptos (Considerando la base del Marco Teórico)

Se correlacionan ambos conceptos y se analiza cuidadosamente la correlación

Interpreta la evidencia empírica de acuerdo con elnivel en el que clarifica la validez de constructo

de una medición

Item Factor 1A. Social

Item Factor 2A.

Escolar

Item Factor 3A.

Personal

3 0.51 4 0,52 1 0,53

6 0,63 8 0,43 2 0,48

16 0,49 12 0,45 5 0,58

22 0,48 25 0,54 7 0,43

26 0,64 28 0,57 9 0,57

27 0,54 29 0,55 10 0,56

30 0,40 13 0,41

2. Información Correlacional. Ruiz (1988)

Instrumento AC - 2000

Coeficiente de Correlación 0,79

Escala Auto -.Estima de Coopersmith (1959)

Validez de Constructo

EJEMPLO

Validez TotalLa validez de un instrumento de medición se evalúa sobre la base de todos los tipos de evidencia, mientras mayor evidencia de validez de contenido, de criterio y de constructo posea el instrumento de medición, éste se acercará mas a representar las variables que se desean medir.

Validez Total = Validez de Contenido + Validez de Criterio + Validez de Constructo

La validez no puede descansar en un solo tipo de evidencia.

Messick. 1995,1989 y 1988

Confiabilidad de un Instrumento

Se refiere al grado en el que un instrumento produce resultados iguales, es decir, su aplicación repetida al mismo sujeto u objeto resultan consistentes y coherentes.

Relación entre Confiabilidad y Validez

Un instrumento de medición puede ser confiable, pero no necesariamente valido, es decir, un instrumento puede ser consistente en los resultados que produce, pero no mide lo que se desea. Por ello, un instrumento debe cumplir con los requisitos de confiable y valido

La validez y la confiabilidad NO se asumen, se prueban

Factores que Afectan la Confiabilidad y la Validez de los Instrumentos de Medición

1.- Improvisación: Genera que los instrumentos sean poco válidos o confiables, lo cual no debe existir en la investigación

2.- Uso de instrumentos desarrollados en el extranjero sin ser validados para nuestra cultura y tiempo: Las culturas, los grupos y las personas cambian.

3.- Uso de instrumentos inadecuados para las personas a quienes se les aplica (no es empático)

4.- Estilos personalizados de los participantes: deseabilidad social, tendencias a asentir con respecto a lo que se pregunta, respuestas inusuales, entre otros.

5.- Condiciones en que se aplica el instrumento de medición: ruido, iluminación, frío, instrumentos muy largos o tediosos, encuesta telefónica.

6.- Falta de estandarización: Vinculada con la objetividad y esta referida por ejemplo, cuando las instrucciones no son las mismas, orden de preguntas, entre otros.

Cálculo de la Confiabilidad de un Instrumento de Medición

Existen muchos procedimientos para calcular la confiabilidad de los instrumentos de medición, todos utilizan fórmulas que producen coeficientes de confiabilidad, los cuales pueden oscilar entre cero y uno.

0%, de confiabilidad en la medición (La medición está contaminada de error)

100%, de confiabilidad en la medición (No hay error)

Procedimientos para Determinar la Confiabilidad de un Instrumento de Medición

1Medida de EstabilidadMedida de Estabilidad

Confiabilidad por Test - RetestConfiabilidad por Test - Retest

2 Métodos de formas alternativas o paralelasMétodos de formas alternativas o paralelas

3Métodos de las mitades partidasMétodos de las mitades partidas

(Split - Halves)(Split - Halves)

4Medidas de consistencia interna Medidas de consistencia interna (Coeficiente Alfa de Cronbach)(Coeficiente Alfa de Cronbach)

5Medidas de consistencia interna Medidas de consistencia interna

(Coeficiente KR-20)(Coeficiente KR-20)

Medida de EstabilidadMedida de EstabilidadConfiabilidad por Test - RetestConfiabilidad por Test - Retest

Es aplicado repetidas veces el mismo cuestionario a los mismos individuos en un periodo de tiempo breve, o dejando un intervalo de tiempo entre el test y el retest, para comprobar el correcto funcionamiento del cuestionario como instrumento de recopilación de información.  Míde la confiabilidad a través de la correlación entre ambos puntajes

Calcular la correlación entre ambas aplicaciones usando el coeficiente de Pearson.

n

yy

n

xxn

yxyx

rxy

2222

*

..

2222 *

..

yynxxn

yxyxnrxy

Métodos de Formas Métodos de Formas Alternativas o ParalelasAlternativas o Paralelas

Se Administran dos formas equivalentes, es decir, no es el mismo instrumento. Las formas son equivalentes en contenidos, preguntas, instrucciones, duración, etc. Las formas se administran a un mismo grupo dentro de un período de tiempo corto. Se mide la confiabilidad a través de la correlación entre ambos puntajes. Una manera da calcular dicha correlación (aunque no es la única) viene dada por el cociente de la covarianza (SAB) entre el producto de la varianza de las puntuaciones en ambos test:

Los supuestos de paralelismo son aceptados puesto que ambas versiones del test han sido construidas lo más similares posibles.

Sin embargo, Suen (1990) afirma que ello no garantiza que los supuestos de paralelismo se cumplan, por lo cual el coeficiente

r de Pearson entre ambas formas del test se conoce como coeficiente de equivalencia

Métodos de Mitades Partidas Métodos de Mitades Partidas (Split – Halves)(Split – Halves)

Requiere sólo una aplicación de la medición en el mismo grupo de individuos. Se divide la prueba en dos mitades equivalentes y se comparan los resultados de ambas y las puntuaciones deben estar correlacionadas.

tttn r

rttrt

12

rttn= coeficiente de confiabilidad del

instrumento total

rtt = coeficiente de correlación obtenido para

las 2 mitades

El coeficiente de Pearson se corrige aplicando la fórmula de Spearman Brown:

Medidas de Consistencia Interna Medidas de Consistencia Interna (Coeficiente (Coeficiente Alfa de CronbachAlfa de Cronbach))

Requiere sólo una aplicación del instrumento de medición, produce valores que oscilan entre cero (0) y uno (1), no es necesario dividir en mitades los ítems del instrumento. Se aplica la medición y se calcula el coeficiente.

α=[kk−1] [1−∑ki=1S2iS2t],

A partir de las varianzas, el alfa de Cronbach se calcula así:

αest=kp1+p(k−1),

A partir de las correlaciones entre los ítems, el alfa de Cronbach estandarizado se calcula así:

•S2i es la varianza del ítem i,•S2t es la varianza de los valores totales observados y•k es el número de preguntas o ítems

•k es el número de itemsp es el promedio de las correlaciones lineales entre cada uno de los ítems (se tendrán [k(k−1)]/2 pares de correlaciones)

Medidas de Consistencia Interna Medidas de Consistencia Interna (Coeficiente KR-20)(Coeficiente KR-20)

Permite calcular la confiabilidad con una sola aplicación del instrumento. No requiere el diseño de pruebas paralelas. Es aplicable sólo en instrumentos con ítems dicotómicos, que puedan ser codificados con 1 – 0 (correcto – incorrecto, presente – ausente, a favor – en contra, entre otros) .

La fórmula para calcular la confiabilidad de un instrumento de n ítems o KR-20 será:

2

2 .*1 st

qpst

k

krtt

n

xx

sti

2__

2

K = número de ítems del instrumento.P = personas que responden afirmativamente a cada ítem.q = personas que responden negativamente a caca ítem.St2 = varianza total del instrumentoxi = Puntaje total de cada encuestado.

Una alta confiabilidad, por si sola, no garantiza “buenos” resultados científicos.

Pero no puede haber “buenos” resultados científicos sin instrumentos confiables.

Carlos Ruiz Bolívar (2003)