Presentación de PowerPoint - ub.edu 4.pdf · Coeficiente Kappa ( ) (Cohen, 1960, 1966) 15 17 25 34...

TEMA IV

CONTROL DE LA CALIDAD DE LOS DATOS

Objetivos

Diseños Observacionales

Registro

Muestreo Observacional

Control de calidad del dato

Análisis de datos

Interpretación de resultados

Metodología observacional: Proceso

Obtención parámetros

Instrumentos

Control de calidad del dato (1)

Acuerdo

Acuerdo inter-observador

Acuerdo intra-observador

Acuerdo relativo a un criterio

Ausencia de sesgos

Ausencia de errores sistemáticos

Ausencia de errores aleatorios

Calibración

Concordancia

Confiabilidad

Congruencia

Equivalencia

Estabilidad

Exactitud

Exactitud inter-observadores

Fiabilidad

Fiabilidad inter-estimadores

Fiabilidad intra-estimadores

Precisión

Predecibilidad

Replicabilidad

Seguridad

Validez

Validez de …

Extraído de:

Tojár Hurtado, J.C. (1993). Concordancia de los

registros de observación. Calidad de la

investigación educativa en metodología

observacional. Barcelona: P.P.U., p. 12.

Control de calidad del dato (2)

Precisión

Validez Fiabilidad

Concordancia Concordancia

Acuerdo

Inter-

observadores

Intra-

observador

Control de la calidad del dato (3)

Concordancia Acuerdo

Forma

cualitativa

Forma

cuantitativa

Según Ocurrencia

Según Orden

Según Duración

F%A

FA.P.

Fgl

Cc

Pi

C. Feingold

Kappa

Coeficientes de

correlación (lineal,

ordinal, ...)

Forma

mixta

No control del azar F%A

2 observadores

Control parcial del azar

FA.P.

Frecuencia

Control total del azar Fglobal

> 2

observadores

Concordancia canónica

Concordanci

a

FORMA

Orden

Codificación

binaria

Coeficiente de Feingold

FIABILIDA

D

CUANTITATI

VA

SC / FC

Coeficiente

INTER/INT

RA

Duración

SC / FC

Coeficiente

Acuerdo

Coeficientes de correlación /

cuasicorrelación

Concordancia + Acuerdo Concordancia secuencial

FORMA

CUALITATIV

A

Inversión del “tempus” del proceso


Diversificación

de coeficientes


Fiabilidad de porcentaje de acuerdo (F%A)

X X

X X

%80100x10

8100x

desacuerdo intervalos Nº acuerdo rvaloseintºN

acuerdo intervalos ºNF A%

O1

O2


Fiabilidad de acuerdo de puntajes (FA.P.) (Hawkins & Dodson, 1975)

X X

X X

%552

77,7733,33

2

FFF

%77,77100x27

7100x

.O.O.N

.O.NF

%33,33100x21

1100x

.O.N.O

.OF

IUIS.P.A

IU

IS

O1

O2


Fiabilidad global (Fglobal) (Hopkins & Hartmann, 1977)

100 intervalos

O1: Registra ocurrencia de conducta en 10 intervalos

O2: Registra ocurrencia de conducta en 5 intervalos, de los cuales en

1 de ellos concuerda con O1

%18687FFF

%86100x100

)95x90()5x10(100x

T

)xNONO()0x0(F

%87100

861100x

T

NOOF

aleatoria global totalglobalneta global

22

2121aleatoria global

2y12y1

totalglobal


Concordancia canónica (Cc) (Krippendorf, 1980)


Coeficiente de Feingold ( ) (Feingold, 1992)

O1

O2

1 0 0 0 1 1 1 1 0 0 0 1 1 0 0 1 1 1 0 0 1 0

1 1 0 1 0 1 1 1 0 1 0 1 0 0 1 1 1 1 0 0 1 0

1

1 0

0

O2

O1 9 2

7 4

F++=22

7,4

5,4

5,47

5,6

5,64

5,4

5,42

5,6

6,5-9

F̂

F̂F 2222k

1j,i ij

2

ijij2

5,422

9x11F̂ 5,6

22

13x11F̂ 5,4

22

9x11F̂ 5,6

22

13x11F̂ 00011011

F

FFF̂

ji

ij

%46100x22

7,4100x

F

2


O1

D

A

B

D

C

D

B

O2

C

A

B

B

B

D

B

Coeficiente Pi ( ) (Scott, 1955)

% 7,37100x 31,01

31,057,0100 x

p1

pp

k

1 e

eo

% 7,37100x

31,01

31,057,0100 x

p1

pp

k

1 e

eo

31,014

4262pp 57,0

14

8

Total

Acuerdosp

k

12

2222

conjunta espespo

Categorías Acuerdos Desacuerdos Pesp(O1/O2) Pesp conjunta

A 2 0 (2/14) (2/14)2

B 4 2 (6/14) (6/14)2

C 0 2 (2/14) (2/14)2

D 2 2 (4/14) (4/14)2

TOTAL 8 6


O1

A 15

B 17

A 25

C 34

D 8

E 13

F 28

E 10

O2

A 15

B 19

A 23

C 30

D 12

E 13

F 25

G 3

E 10

Coeficiente Kappa ( ) (Cohen, 1960, 1966)

15 17 25 34 8 13 28 10

15 19 23 30 12 13 25 3 10

A B A C D E F E

A B A C D F E G 3

O1

O2

150

150

2 4 3

O1

O2

94,0150

25238301738

Total

AcuerdosP0

% 6,92100x185,01

018594,0100x

p1

ppk

1e

eo

185,00,02 x 0...0,126 x 113,00,253 x 266,02 x 11

k

e PPP

Cat. A B C D E F G P1

A 38 2 0 0 0 0 0 0,266

B 0 17 0 0 0 0 0 0,113

C 0 0 30 4 0 0 0 0,226

D 0 0 0 8 0 0 0 0,053

E 0 0 0 0 23 0 0 0,153

F 0 0 0 0 0 25 3 0,186

G 0 0 0 0 0 0 0 0

P2 0,253 0,126 0,2 0,08 0,153 0,166 0,02 150


Coeficiente Kappa ( ) (Cohen, 1960, 1966) COMKAPPA


Coeficiente de correlación de Pearson (r)

O1 5 5 6 6 6 7 7 11 11 16

O2 25 30 30 35 4 40 45 55 60 65

908,0

43020150 x 1080754 x 10

430 x 803835 x 10

O0nOOn

OOOOnr

222

2

2

2

2

1

2

1

2121

908,0

43020150 x 1080754 x 10

430 x 803835 x 10

O0nOOn

OOOOnr

222

2

2

2

2

1

2

1

2121


Concordancia secuencial

O1 D

A

B

D

C

D

B

D

A

C

B

D

A

C

B

A

O2 D

A

B

C

D

A

B

D

A

D

A

D

A

C

B

A

O1 A B C D

A 1 2 0

B 1 0 3

C 0 2 1

D 3 1 1

Matriz de confusión de O1

O2 A B C D

A 2 1 2

B 1 1 1

C 0 1 1

D 5 0 0

Matriz de confusión de O2

Correlación lineal entre las frecuencias de transición

AB AC AD BA BC BD CA CB CD DA DB DC

O1 1 2 0 1 0 3 0 2 1 3 1 1

O2 2 1 2 1 1 1 0 1 1 5 0 0

r=0,73


Concordancia consensuada

O1

O2

O3

Discusión Registro único

consensuado

Se produce una inversión del tempus del proceso

Presentación de PowerPoint - ub.edu 4.pdf · Coeficiente Kappa ( ) (Cohen, 1960, 1966) 15 17 25 34...

Documents

Transcript of Presentación de PowerPoint - ub.edu 4.pdf · Coeficiente Kappa ( ) (Cohen, 1960, 1966) 15 17 25 34...