Tema 6 Validez y Confiabilidad
-
Upload
isac-espinoza-montes -
Category
Documents
-
view
248 -
download
0
Transcript of Tema 6 Validez y Confiabilidad
-
7/26/2019 Tema 6 Validez y Confiabilidad
1/32
Dr. Adm. Isac Fernando Espinoza Montes
Docente Principal U.N.C.P.
CREACIN VALIDACIN Y OPTIMIZACIN DE INST
-
7/26/2019 Tema 6 Validez y Confiabilidad
2/32
Caractersticas de un instrumenmedicin
ValidezSe refiere a la consistencia, es decir al grado en qprueba est midiendo lo que en realidad se desea(v.g. inteligenciamemoria; calidad competitivida
eficiencia - eficacia). Confiabilidad
Exactitud y precisinde los instrumentos de medicien que la aplicacin repetida al mismo sujeto u obje
produce resultados iguales (vg. Termmetro, balanza
21
-
7/26/2019 Tema 6 Validez y Confiabilidad
3/32
arac er s cas e un ns rumde medicin
La medicin generalmente tiene un grado de error(lo que se el error sea mnimo).
Medicin: valores observados = valores verdaderos + grado de erro
X = t + e
X = t + 0
X = t
Cuanto mayor sea el error al medir, el valor que observamos sdel valor verdadero.
19/03/2016Dr. Isac Espinoza Montes
31
-
7/26/2019 Tema 6 Validez y Confiabilidad
4/32
Mtodos
Apropiados
Confiabilidad
(Consistencia)
Validez
(Precisin)
Estabilidad Homogeneidad Equivalencia Contenido Criterio
Test Re-Test
Formasparalelas
tem de correlacintotal
Mitadespartidas
KR-20 KR-21
Alfa deCrombach
Formasparalelas
Interobservaciones
Validez facial Concurrente
Predictivo
-
7/26/2019 Tema 6 Validez y Confiabilidad
5/32
Componentes de la confiabilida
Estabilidad temporal, grado en que el instrumedicin arroja el mismo resultado en diversmediciones.
Homogeneidad o consistencia interna, gradose obtienen respuestas homogneas a diferepreguntas sobre una misma dimensin.
Equivalencia, grado de acuerdo entre un inst
y uno o mas versiones equivalentes de este.
-
7/26/2019 Tema 6 Validez y Confiabilidad
6/32
19/03/2016Dr. Isac Espinoza Montes
61
Componentes de la Validez
Evidencia relacionada con el contenido
Evidencia relacionada con el criterio y
Evidencia relacionada con el constructo
La validez es un concepto del que se pueden te
-
7/26/2019 Tema 6 Validez y Confiabilidad
7/32Dr. Isac Espinoza Montes 7
VALIDEZ
-
7/26/2019 Tema 6 Validez y Confiabilidad
8/32
19/03/2016Dr. Isac Espinoza Montes
81
Evidencia relacionada con contenido
Grado en el cual los temsson una muestra represenla variableque se desea medir. Grado en que la mrepresenta al concepto medido.
A C E
G I K
M O Q
A C E
G K
M O Q
AQ
Instrumento convalidez de contenido
Instrumentosinvalidez de contenido
-
7/26/2019 Tema 6 Validez y Confiabilidad
9/32
19/03/2016Dr. Isac Espinoza Montes
91
Evidencia relacionada con contenido
Para lograr una buena evidenciacontenido debe tenerse en cuenta Definicin conceptual
Definicin operacional Pertinencia
Exhaustividad
Evaluacin o juicio de un experto
-
7/26/2019 Tema 6 Validez y Confiabilidad
10/32
19/03/2016Dr. Isac Espinoza Montes
101
Evidencia relacionada con el contenido: EClima organizacional
Alvarez (1992), citando a Forehand y Gilmer (1964), seala que el ambiente interno o medio especifico percibido, conforma lo qvez ms frecuentemente clima organizacional. Este aunque se refiere a propiedades o caractersticas que se encuentran enpuede ser pensado como la personalidad de la organizacin, tal como es visto por sus miembros y que presumiblemente afectacomportamiento.
() A pesar del esfuerzo realizado, en los diferentes trabajos investigativos, todava no existe un consenso sobre lo que realmdimensiones del constructo clima organizacional, y si el clima es definitivamente una variable independiente, una variable depeninterviniente. Las investigaciones demuestran que pueden comportarse como una u otra categora. (Goncalvez, 1999)El clima organizacional contempla las siguientes dimensiones :
1. Relaciones interpersonales: grado en que los empleados se ayudan entre si y sus relaciones son respetuosas y considerad
2. Estilo de direccin: grado en que los jefes apoyan, estimula y dan participacin a sus colaboradores.
3. Sentido de pertenencia: grado de orgullo derivado de la vinculacin a la empresa. Sentimiento de compromiso y responsaobjetivos y programas.
4. Retribucin: grado de equidad en la remuneracin y los beneficios derivados del trabajo
5. Disponibilidad de recursos: grado en que los empleados cuentan con la informacin, los equipos y el aporte requerido de dependencias para la realizacin de sus trabajo.
6. Estabilidad: grado en que los empleados ven en la empresa claras posibilidades de pertenencia y estiman que a la gente scriterio justo.
7. Claridad y coherencia en la direccin: grado de claridad de la alta direccin sobre el futuro de la empresa. Medida en quelas reas son consistentes con los criterios y polticas de la alta gerencia.
8. Valores colectivos: grado en el que se perciben en el medio interno: cooperacin, responsabilidad y respeto
Compare las dimensiones especificadas en la teora, con el instrumento de clima organizacional pl
-
7/26/2019 Tema 6 Validez y Confiabilidad
11/32
Evidencia relacionada con el conten
Se determina antes de laaplicacin del instrumento,
mediante el Juicio deExpertos.Es el grado en que la
medicin representa alconcepto medido.
-
7/26/2019 Tema 6 Validez y Confiabilidad
12/32
19/03/2016Dr. Isac Espinoza Montes
121
Evidencia relacionada con el cr
Establece la validez de un instrumento de medicin comparun criterio externo, que es un estndar con el que juzga la vinstrumento.
Cuando mas se relacionen los resultados del instrumento decon el criterio la validez de criterio ser mayor. Validez concurrente, Los resultados del instrumento, se
correlacionan con el criterio en el mismo momento o punttiempo (encuesta elecciones presidenciales).
Validez predictiva, cuando el criterio se fija en el futuro(capacidad gerencial validada con el futuro desempeo
E d l d l
-
7/26/2019 Tema 6 Validez y Confiabilidad
13/32
131
Evidencia relacionada con el ejemplo
Estudiante Prueba deinteligencia
Calificaciocole
1
2
34
20
E id i l i d l
-
7/26/2019 Tema 6 Validez y Confiabilidad
14/32
141
Evidencia relacionada con el ejemplo
Colaborador Concurso de mritos Evaluacdesempe
1
2
34
20
E id i l i d l
-
7/26/2019 Tema 6 Validez y Confiabilidad
15/32
151
Evidencia relacionada con el ejemplo
Colaborador Evaluacin decapacidad gerencial
Desemgerencia
1
2
34
20
-
7/26/2019 Tema 6 Validez y Confiabilidad
16/32
19/03/2016Dr. Isac Espinoza Montes
161
Evidencia relacionada con el constru Implica relacionar un instrumento de medicin con
hiptesisy el marco terico para determinar si einstrumento est ligado a los conceptosy a lasconsideraciones tericas.
No es posible llevar a cabo la validez de construcmenos que exista un marco tericoque soporte lavariableen relacin a otras variables.
Cuando mayor evidencia de validez de contenidcriterio y de constructotenga un instrumento de meste se acerca mas a representar la variable o vaque pretende medir.
-
7/26/2019 Tema 6 Validez y Confiabilidad
17/32
19/03/2016Dr. Isac Espinoza Montes
171
Validez: ejemplo EVALUACION DE INSTRUMEINFORME DE EXPERTO
Instrumento: A-21
N Criterio:Expe
1
1El instrumento mide las variables que se pretendenmedir? 5
2Los reactivos son suficientes para la medicin detodas las variables? 5
3
Las instrucciones del instrumento le parecen
apropiadas? 5
4Los reactivos son comprensibles y estn bien
redactados? 3
5El ordenamiento de los reactivos es adecuado?
5
6La presentacin formal (tipo y tamao de letra,etc.) del instrumento es apropiada? 5
7La hoja de respuestas est bien presentada?
5
Promedio4.7
Experto N 1.- Mg. Elena Cano CorreaExperto N 2.- Dr. Dw ight OrdoezExperto N 3.- Mg. Mara Eugenia Mansilla Arancibia
-
7/26/2019 Tema 6 Validez y Confiabilidad
18/32
Validacin de instrumentosN TEMS SI NO1 El instrumento tiene estructura lgica X2 La secuencia de presentacin de tems es ptima X3 El grado de complejidad o dificultad de los tems es
aceptable.X
4 Los trminos utilizados en las preguntas son claros ycomprensibles
X
5 Los reactivos o tems reflejan el problema deinvestigacin
X
6 El instrumento abarca en su totalidad el problema deinvestigacin
X
7 Los tems permiten medir el problema de investigacin X8 Los reactivos o tems permiten recoger informacin
para alcanzar los objetivos de la investigacinX
9 El instrumento abarca las variables, sub variables eindicadores
X
10 Los tems permiten contrastar la hiptesis X
Confiabilidad
-
7/26/2019 Tema 6 Validez y Confiabilidad
19/32
Dr. Isac Espinoza Montes 19
CONFIABILIDAD
Confiabilidad
(Consistencia
Estabilidad Homogeneida
Test Re-Test
Formasparalelas
tem de correlactotal
Mitades partida
KR-20 KR-2
Alfa de
Crombach
-
7/26/2019 Tema 6 Validez y Confiabilidad
20/32
Clculo de la confiabilida Existen diversos procedimientos. Todas utilizan coeficiente
confiabilidad que fluctan entre 0 y 1 donde; coeficientenula confiabilidad y coeficiente 1 significa absoluta conf(total).
Entre mas se acerca a cero el coeficiente existe mayor emedicin.
Los procedimientos mas utilizados son: Coeficiente alfa de Cronbach. Medida de estabilidad (confiabilidad por test-retest Mtodo de formas alternativas y paralelas.
19/03/2016Dr. Isac Espinoza Montes
201
C fi i t Alf d C b
-
7/26/2019 Tema 6 Validez y Confiabilidad
21/32
19/03/2016Dr. Isac Espinoza Montes211
Coeficiente Alfa de CronbaDefinicin
Se trata de un ndice de consistencia internatoma valores entre 0 y 1 y que sirve paracomprobar si el instrumento que se est evarecopila informacin defectuosa y por tan
llevara a conclusiones equivocadas o si se tun instrumento fiable que hace medicionesestables y consistentes.
C fi i t Alf d C b
-
7/26/2019 Tema 6 Validez y Confiabilidad
22/32
19/03/2016Dr. Isac Espinoza Montes221
Coeficiente Alfa de CronbaDefinicin
Alfa es un coeficiente de correlacin que mhomogeneidad de las preguntas promedtodas las correlaciones entre todos los temver que efectivamente, se parecen.
Su interpretacin ser que, cuanto ms se ael ndice al extremo 1, mejor es la fiabilidaconsiderando una fiabilidad respetable a de 0,70.
C fi i t Alf d C b
-
7/26/2019 Tema 6 Validez y Confiabilidad
23/32
19/03/2016Dr. Isac Espinoza Montes231
Coeficiente Alfa de Cronbafrmula
22
11
T
i
S
S
K
K
K :El nmero de temsSi^2 : Sumatoria de Varianzas de los temsST^2 :Varianza de la suma de los tems :Coeficiente de Alfa de Cronbach
C fi i t Alf d
-
7/26/2019 Tema 6 Validez y Confiabilidad
24/32
19/03/2016Dr. Isac Espinoza Montes241
Coeficiente Alfa deCronbach: Ejemplo
K
ITEMS i ii iiiSUMAITE
Sujetos
Arias (1) 3 5 5 1
Chenet (2) 5 4 5 1
Gutarra (3) 4 4 5 1
Medina (4) 4 5 3 1
Palacios (5) 1 2 2 5
Roque (6) 4 3 3 1
Si^2 (VARP) 1.58 1.14 1.47
ST^2 9.1
Si2: 4.19
C fi i t Alf d
-
7/26/2019 Tema 6 Validez y Confiabilidad
25/32
19/03/2016Dr. Isac Espinoza Montes251
Coeficiente Alfa deCronbach: Ejemplo
K:El nmero de tems : Si^2 :Sumatoria de varianzas de los tems : ST^2 :Varianza de la suma de los tems : :Coeficiente de Alfa de Cronbach
14.9
19.41
13
3
= 0.81
Entre ms cerca de 1 est , ms alto es el grado de co
K
-
7/26/2019 Tema 6 Validez y Confiabilidad
26/32
19/03/2016Dr. Isac Espinoza Montes261
Medida de estabilidad, Test-Re
Se refiere al grado en que la aplicacin repetidainstrumento,al mismo sujeto u objeto, produce igresultados.
Se aplica un instrumento de medicin a un grupo personas en dos ocasiones diferentes y se calcula correlacin entre las dos series de observaciones.
Al coeficiente obtenido en ese mtodo se le conocfiabilidad estimada.
-
7/26/2019 Tema 6 Validez y Confiabilidad
27/32
19/03/2016Dr. Isac Espinoza Montes271
Medida de estabilidad, Test-Re-T
CORRELACION 85.41%
2
n
ABnr
ITEMS i ii iii
SUMA DEITEMS
Sujetos
Arias (1) 3 5 5 13
Chenet (2) 5 4 5 14
Gutarra (3) 4 4 5 13
Medina (4) 4 5 3 12
Palacios (5) 1 2 2 5
Roque (6) 4 3 3 10
PRIMERA APLICACIN
ITEMS i ii
Sujetos
Arias (1) 3 4
Chenet (2) 4 4
Gutarra (3) 4 4
Medina (4) 2 3
Palacios (5) 2 2
Roque (6) 3 3
SEGUNDA APLICAC
-
7/26/2019 Tema 6 Validez y Confiabilidad
28/32
Procedimiento de mitades part
r
rR
1
2
19/03/2016Dr. Isac Espinoza Montes
281
Procedimiento de dos mitades, consiste en la divisin de tems
impares y requiere una sola aplicacin de la medicin (a difelas dos anteriores que requieren de dos administraciones de laal mismo grupo).
1 Se calcula el ndice de Correlacin (Pearson)
2 Correccin de r con la ecuacin de Spearman Brown
2222
nn
ABnr
roce m ento e m ta es par
-
7/26/2019 Tema 6 Validez y Confiabilidad
29/32
19/03/2016Dr. Isac Espinoza Montes291
roce m ento e m ta es parejemplo
ndice de correlacin de Pearson ( r ) : 0.66Correccin segn Spearman-Brown ( R ) : 0.792r / (1+r)Entre ms cerca de 1 est R, ms alto es el grado de confiabilidad
Items I II III A
SujetosArias (1) 3 5 5 8
Chenet (2) 5 4 5 10
Gutarra (3) 4 4 5 9
Medina (4) 4 5 3 7
Palacios (5) 1 2 2 3
Roque (6) 4 3 3 7
44
-
7/26/2019 Tema 6 Validez y Confiabilidad
30/32
19/03/2016Dr. Isac Espinoza Montes
301
1
de con
en la
(no h
0
0% deconfiabilidad
en la medicin
(la medicin est
contaminada de
error).
CONFIABILIDAD
Muy baja Baja Regular Aceptable E
-
7/26/2019 Tema 6 Validez y Confiabilidad
31/32
19/03/2016Dr. Isac Espinoza Montes
311
TALLER: Validez y confiabilid
Se aplica una prueba piloto para fichas de observacin a una muestra de 30 unidades de anlisis de una empreproductiva. Los indicadores son:
Calidad
Economa de escala
Valor agregado y
Competitividad
Verificar la validez y confiabilidad basado en los datos adjuntan a continuacin.
321ITEM 1 ITEM 2 ITEM 3 ITEM 4
ECONOMIA DE VALOR SUMATOR
-
7/26/2019 Tema 6 Validez y Confiabilidad
32/32
19/03/2016 Dr. Isac Espinoza Montes
CALIDAD ESCALA AGREGADO COMPETITIVIDAD
1 15 14 16 15 60
2 19 22 21 20 82
3 15 14 15 14 58
4 15 14 16 15 60
5 18 19 19 19 75
6 15 16 16 16 63
7 14 15 16 15 60
8 13 14 14 14 55
9 20 19 20 20 79
10 19 18 20 19 76
11 18 19 20 19 76
12 16 17 18 17 68
13 14 14 15 14 57
14 17 18 17 17 69
15 14 14 15 14 57
16 19 20 21 20 80
17 15 16 16 15 62
18 14 15 15 14 58
19 14 14 15 14 57
20 15 14 15 14 58
21 14 15 14 14 57
22 15 14 14 14 57
23 15 16 15 15 61
24 14 14 15 14 57
25 15 15 16 15 61
26 16 14 16 15 61
27 16 15 15 15 61
28 15 16 15 16 62
29 15 14 16 15 60
30 15 13 15 15 58
SUJETOS ITEM