Upload
samircabre
View
2.961
Download
1
Embed Size (px)
DESCRIPTION
Diseño y Validación de Instrumnetos de Medición en Ciencias Sociales
Citation preview
UNIVERSIDAD PEDAGÓGICA EXPERIMENTAL LIBERTADORINSTITUTO PEDAGÓGICO DE BARQUISIMETO
LUIS BELTRÁN PRIETO FIGUEROASUBDIRECCIÓN DE INVESTIGACIÓN Y POSGRADO
MAESTRÍA EN EDUCACIÓNMENCIÓN ENSEÑANZA DE LA QUÍMICA
Validez y confiabilidad
de Instrumentos
de Investigación Educativa
PARTICIPANTES: OROPEZA ALISMAR
CABRE ELIAS SAMIR
GUEVARA FRANCISCO
CURSO: Instrumentos de Recolección de
Datos
FACILITADORA: Profa. ANA Y. ALVARADO
Noviembre de 2011
ESQUEMA GENERAL
VALIDEZValidez de Criterio
Índice de Dificultad ConceptoFórmulaTabla de evaluación
Análisis de DiscriminaciónT Student
Criterio para el tamaño de los gruposCálculo manual (Fórmula) (Datos Dicotómicos)Multicotómicos T Student para muestras independientes (Variable ordinal) en SPSS
Juicio de ExpertoVariable de Razón
ANÁLISIS
DE ITEMS
Calculo del Índice de DificultadÍndice de Dificultad PromedioGrado (Criterio) de Selección
Validez de Constructo
Validez de Contenido
V. Concurrente
V. Predictiva
V. Convergente
V. Discriminante
Coeficiente de Correlación y Confiabilidad(Los ítems se aceptan o se rechazan)
CálculosEvidencias Análisis Factorial
Índ ice de
Di f icu l tad
Pruebas de nivel de conocimiento.
Las alternativas de respuestas deben ser
dicotómicas.
Correcta
IncorrectaSuarez, J. y Rojas de Chirinos, B. (2004)
Condiciones
:Solo es aplicable a ítems de instrumentos que miden
conocimiento . Por ejemplo:
Pruebas de
aprovechamiento.
Pruebas de aptitud.
Grado de dificultad de un ítem.Definición
:
ANÁLISIS DE LOS ÍTEMS
Índ ice de
Discr iminació
n
El análisis de discriminación tiene como propósito determinar si
los grupos con las calificaciones mas altas y las calificaciones
mas bajas (grupo superior e inferior respectivamente), difieren
entre sí.
Suarez, J. y Rojas de Chirinos, B. (2004)
Es decir:
Si hay diferencias entre las calificaciones de ambos grupos el ítem
discrimina.
Si las calificaciones no difieren entre ambos, el ítem no discrimina,
y por lo tanto, no mide adecuadamente el constructo de estudio. En
este caso debe excluirse el instrumento.
Suarez, J. y Rojas de Chirinos, B. (2004)
ID = NRCI x 100
N
Cálcu lo de l
Índ ice de
Di f i cu l tad
Rango Interpretación
81 a100 Muy fácil
61 a 80 Fácil
41 a 60 Moderado
21 a 40 Difícil
0 a 20 Muy difícil
Suarez y Chirinos,
2004Índice Promedio o de
todo el instrumento
IDP = ∑ I D i x 100
total de Items
∑ I D I : Sumatoria de los Indices de
Discriminación de todos los items
NRCI : Número de Repuestas Correctas del
Items
N : Número o total de sujetosEjemplo:ID = 8 x 100 = 66
12
Criterio segúnpropósito del instrumento
¿Se acepta o
rechaza?
Cálculo del Análisis de Discriminación AD = NRCGSi - NRCGIi x 100
NG
Grado Interpretación
81 a100 Muy alto
61 a 80 Alto
41 a 60 Moderado
21 a 40 Bajo
0,1 a 20 Muy BajoSuarez y Chirinos,
2004
NRCGSi : Número de Repuestas Correctas en el Grupo Superior en el Items
evaluado.
NRCGI i : Número de Repuestas Incorrectas en el Grupo Inferior en el Items
evaluado.
NG : Número total de integrantes del grupo
Ejemplo: Items
2AD = 2 - 3 x 100 = -
254
Items
Sujetos 1 2 3 4 5 6 Total
a 1 1 1 1 1 1 6
b 1 1 1 1 1 1 6
c 0 0 1 1 1 1 5
d 1 0 1 1 1 1 5
e 1 0 1 1 0 1 4
f 0 0 1 1 1 1 4
g 1 1 1 0 0 0 3
h 0 0 0 1 1 1 3
i 1 1 0 0 0 0 2
j 0 1 1 1 0 0 2
k 0 0 0 0 1 1 2
l 0 1 0 0 0 0 1
1: Correcta, 0: Incorrecta
Grado Interpretación
81 a100 Muy alto
61 a 80 Alto
41 a 60 Moderado
21 a 40 Bajo
0,1 a 20 Muy Bajo
AD = 3 - 1 x 100 = 504
Ejemplo: Items 1
¿Cómo lo eva luamos?
Análisis de Discriminación
Multicótomos o
Repuestas
múltiples
T de Student SPSS
Eficiencia Análisis sobre el conjunto de repuestas incorrectas
o los distractores.
Ejemplos
Opciones 1º 2º 3º 4º
a 5 26 12 5
b 9 4 12 20
c 10 3 0 5
d 11 2 11 5
Total 35 35 35 35
Teóricamente se espera que las alternativas de
repuestas dadas a un ítems deberían distribuirse más o
menos proporcionalmente a través de las opciones.
• Grado en que uninstrumento realmentemide la variable quepretende medir.
Hernández, Sampieri y otros (1998)
• Es la exactitud con quepueden hacersemedicionessignificativas yadecuadas con uninstrumento, en elsentido de que midarealmente el rasgo quepretende medir.
Ruiz Bolívar (2001)
• La Validez tiene comopropósito determinar si elinstrumento mideexactamente lo que sequiere medir.
• Aplica coeficientes, perorequiere la presencia deevidencias.
Suarez, J. y Rojas de Chirinos, B. (2004)
VALIDEZ Definición Según Diversos Autores
VALIDEZ Concepto de los expositores
La Validez es una cualidad
del instrumento que consiste
en demostrar empíricamente
que puede medir
exactamente la variable
objeto de estudio.
VAL I D E Z D E
C O N T E N I D O
Se refiere al grado en que un instrumento refleja un
dominio específico de contenido de lo que se mide. Es
el grado en que la medición representa al concepto
medido.
Bohrnstedt, citado por Hernadez, Sampieri y otros
(1998)A través de la validez de contenido se trata de determinar
hasta donde los ítems de un instrumento son representativos
del dominio o universo de contenido de la propiedad que se
desea medir.
Ruiz Bolívar (2001)
Problemas de resta,
suma, multiplicación y división
• Instrumento con validez de contenido
Problemas
de resta
• Instrumento sin validez de contenido
Prueba de
Operaciones
Aritméticas
Por Ejemplo:
VAL I D E Z D E
C R I T E R I O
Determina la relación existente entre las puntuaciones de un instrumento de medición y
una variable conocida como criterio.
Entre más se relacionen los resultados del instrumento con el criterio, mayor será su
validez.
Ejemplo:
El rendimiento de un estudiante
en su futura carrera universitaria (criterio)
Prueba de aptitud académica (instrumento de evaluación)
Correlación de promedio de calificaciones obtenidas
con el rendimiento estudiantil (Validez de Criterio)
VAL I D E Z D E
C O N S T R U C T O
Definición:Grado en que un instrumento
es una medida de un
constructo en particular.
Suarez, J. y Rojas de
Chirinos, B.
(2004)
Mediciones indirectas de
ciertas variables internas del
individuo:
rasgos latentes, características
de las personas, motivación,
actitudes, satisfacción.
Ruiz Bolívar (2001)
Constructo:
• Actitud hacia la Química.
•Satisfacción o aprendizaje de la Química.
•Valoración o significado a la Química.
Por Ejemplo:
V. Contenido
Pregunta o
Ítems
PERTINENCIA REDACCIÓN ADECUACIÓN
Buena Regular Deficiente Buena Regular Deficiente Buena Regular Deficiente
1
2
3
4
5
6
7
8
Pregunta o
ÍtemsCONGRUENCIA CLARIDAD TENDENCIOSIDAD
SI NO SI NO SI NO
1
2
3
4
5
6
7
8
Pregunta o
Ítems ESENCIAL ÚTIL PERO NO NECESARIO NO NECESARIO
1
2
3
4
5
6
7
8
(Por Juicio de experto)
R AZ Ó N D E
VAL I D E Z D E
C O N T E N I D O
RVCi = NEE –
N/2
N/2NEE : Número de expertos que indican
esencial
N : Números de expertos
Resultados
positivos indican
aceptación del
items.
Negativos rechazo
Número de expertos Valor mínimo
5 0,99
6 0,99
7 0,99
8 0,78
9 0,75
10 0,62
11 0,59
12 0,56
13 0,54
14 0,51
15 0,49
20 0,42
25 0,37
30 0,33
35 0,31
40 0,29
Ejemplo: RVCi = 7 – 8/2 = 0.75
8/2
Coef ic iente
de Val idez de
Cr i ter io
rxy: correlación entre prueba y criterio
xx : confiabilidad del instrumento
yy : confiabilidad del criterio
rxy (xx)(yy) Ejemplo:
0,85 0,95 se acepta
0,75 0,60 se
rechaza
Validez Concurrente: La evaluación con el criterio
externo se hace más o menos al mismo tiempo con la
aplicación del instrumento.
Validez Predictiva: El criterio esta en tiempo futuro,
Ejemplo para predecir el rendimiento académico.
(Coeficiente de Correlación y Confiabilidad)
Val idez de
Const ructo
Validez discriminante: Correlación con puntajes de otro instrumento con
constructo poco relacionado, no deben correlacionarse.
Validez Convergente: Correlación entre el instrumento y con los puntajes
de otro instrumento parecido con el mismo constructo, que deberían
correlacionarse.
Otras evidencias:
Homogeneidad interna; correlación items – test, mayor a 0,25
Edad; certeza que la edad de los sujetos influye. Si ocurre, tiene
validez.
Preprueba – posprueba ; Aplicación de estrategias
Grupos Diferentes.
Análisis Factorial: análisis complejo de todos los items con el
instrumento. SPSS
Etapas para
la Va l idez de
un Constructo
1• Relación Teórica entre los Conceptos.
2• Correlación de Conceptos y Análisis.
3
• Interpretación de la evidencia empírica de acuerdo con el nivel en que clasifica la validez de un constructo de una medición en particular.