Tema 6 Validez y Confiabilidad

download Tema 6 Validez y Confiabilidad

of 32

Transcript of Tema 6 Validez y Confiabilidad

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    1/32

    Dr. Adm. Isac Fernando Espinoza Montes

    Docente Principal U.N.C.P.

    CREACIN VALIDACIN Y OPTIMIZACIN DE INST

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    2/32

    Caractersticas de un instrumenmedicin

    ValidezSe refiere a la consistencia, es decir al grado en qprueba est midiendo lo que en realidad se desea(v.g. inteligenciamemoria; calidad competitivida

    eficiencia - eficacia). Confiabilidad

    Exactitud y precisinde los instrumentos de medicien que la aplicacin repetida al mismo sujeto u obje

    produce resultados iguales (vg. Termmetro, balanza

    21

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    3/32

    arac er s cas e un ns rumde medicin

    La medicin generalmente tiene un grado de error(lo que se el error sea mnimo).

    Medicin: valores observados = valores verdaderos + grado de erro

    X = t + e

    X = t + 0

    X = t

    Cuanto mayor sea el error al medir, el valor que observamos sdel valor verdadero.

    19/03/2016Dr. Isac Espinoza Montes

    31

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    4/32

    Mtodos

    Apropiados

    Confiabilidad

    (Consistencia)

    Validez

    (Precisin)

    Estabilidad Homogeneidad Equivalencia Contenido Criterio

    Test Re-Test

    Formasparalelas

    tem de correlacintotal

    Mitadespartidas

    KR-20 KR-21

    Alfa deCrombach

    Formasparalelas

    Interobservaciones

    Validez facial Concurrente

    Predictivo

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    5/32

    Componentes de la confiabilida

    Estabilidad temporal, grado en que el instrumedicin arroja el mismo resultado en diversmediciones.

    Homogeneidad o consistencia interna, gradose obtienen respuestas homogneas a diferepreguntas sobre una misma dimensin.

    Equivalencia, grado de acuerdo entre un inst

    y uno o mas versiones equivalentes de este.

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    6/32

    19/03/2016Dr. Isac Espinoza Montes

    61

    Componentes de la Validez

    Evidencia relacionada con el contenido

    Evidencia relacionada con el criterio y

    Evidencia relacionada con el constructo

    La validez es un concepto del que se pueden te

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    7/32Dr. Isac Espinoza Montes 7

    VALIDEZ

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    8/32

    19/03/2016Dr. Isac Espinoza Montes

    81

    Evidencia relacionada con contenido

    Grado en el cual los temsson una muestra represenla variableque se desea medir. Grado en que la mrepresenta al concepto medido.

    A C E

    G I K

    M O Q

    A C E

    G K

    M O Q

    AQ

    Instrumento convalidez de contenido

    Instrumentosinvalidez de contenido

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    9/32

    19/03/2016Dr. Isac Espinoza Montes

    91

    Evidencia relacionada con contenido

    Para lograr una buena evidenciacontenido debe tenerse en cuenta Definicin conceptual

    Definicin operacional Pertinencia

    Exhaustividad

    Evaluacin o juicio de un experto

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    10/32

    19/03/2016Dr. Isac Espinoza Montes

    101

    Evidencia relacionada con el contenido: EClima organizacional

    Alvarez (1992), citando a Forehand y Gilmer (1964), seala que el ambiente interno o medio especifico percibido, conforma lo qvez ms frecuentemente clima organizacional. Este aunque se refiere a propiedades o caractersticas que se encuentran enpuede ser pensado como la personalidad de la organizacin, tal como es visto por sus miembros y que presumiblemente afectacomportamiento.

    () A pesar del esfuerzo realizado, en los diferentes trabajos investigativos, todava no existe un consenso sobre lo que realmdimensiones del constructo clima organizacional, y si el clima es definitivamente una variable independiente, una variable depeninterviniente. Las investigaciones demuestran que pueden comportarse como una u otra categora. (Goncalvez, 1999)El clima organizacional contempla las siguientes dimensiones :

    1. Relaciones interpersonales: grado en que los empleados se ayudan entre si y sus relaciones son respetuosas y considerad

    2. Estilo de direccin: grado en que los jefes apoyan, estimula y dan participacin a sus colaboradores.

    3. Sentido de pertenencia: grado de orgullo derivado de la vinculacin a la empresa. Sentimiento de compromiso y responsaobjetivos y programas.

    4. Retribucin: grado de equidad en la remuneracin y los beneficios derivados del trabajo

    5. Disponibilidad de recursos: grado en que los empleados cuentan con la informacin, los equipos y el aporte requerido de dependencias para la realizacin de sus trabajo.

    6. Estabilidad: grado en que los empleados ven en la empresa claras posibilidades de pertenencia y estiman que a la gente scriterio justo.

    7. Claridad y coherencia en la direccin: grado de claridad de la alta direccin sobre el futuro de la empresa. Medida en quelas reas son consistentes con los criterios y polticas de la alta gerencia.

    8. Valores colectivos: grado en el que se perciben en el medio interno: cooperacin, responsabilidad y respeto

    Compare las dimensiones especificadas en la teora, con el instrumento de clima organizacional pl

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    11/32

    Evidencia relacionada con el conten

    Se determina antes de laaplicacin del instrumento,

    mediante el Juicio deExpertos.Es el grado en que la

    medicin representa alconcepto medido.

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    12/32

    19/03/2016Dr. Isac Espinoza Montes

    121

    Evidencia relacionada con el cr

    Establece la validez de un instrumento de medicin comparun criterio externo, que es un estndar con el que juzga la vinstrumento.

    Cuando mas se relacionen los resultados del instrumento decon el criterio la validez de criterio ser mayor. Validez concurrente, Los resultados del instrumento, se

    correlacionan con el criterio en el mismo momento o punttiempo (encuesta elecciones presidenciales).

    Validez predictiva, cuando el criterio se fija en el futuro(capacidad gerencial validada con el futuro desempeo

    E d l d l

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    13/32

    131

    Evidencia relacionada con el ejemplo

    Estudiante Prueba deinteligencia

    Calificaciocole

    1

    2

    34

    20

    E id i l i d l

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    14/32

    141

    Evidencia relacionada con el ejemplo

    Colaborador Concurso de mritos Evaluacdesempe

    1

    2

    34

    20

    E id i l i d l

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    15/32

    151

    Evidencia relacionada con el ejemplo

    Colaborador Evaluacin decapacidad gerencial

    Desemgerencia

    1

    2

    34

    20

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    16/32

    19/03/2016Dr. Isac Espinoza Montes

    161

    Evidencia relacionada con el constru Implica relacionar un instrumento de medicin con

    hiptesisy el marco terico para determinar si einstrumento est ligado a los conceptosy a lasconsideraciones tericas.

    No es posible llevar a cabo la validez de construcmenos que exista un marco tericoque soporte lavariableen relacin a otras variables.

    Cuando mayor evidencia de validez de contenidcriterio y de constructotenga un instrumento de meste se acerca mas a representar la variable o vaque pretende medir.

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    17/32

    19/03/2016Dr. Isac Espinoza Montes

    171

    Validez: ejemplo EVALUACION DE INSTRUMEINFORME DE EXPERTO

    Instrumento: A-21

    N Criterio:Expe

    1

    1El instrumento mide las variables que se pretendenmedir? 5

    2Los reactivos son suficientes para la medicin detodas las variables? 5

    3

    Las instrucciones del instrumento le parecen

    apropiadas? 5

    4Los reactivos son comprensibles y estn bien

    redactados? 3

    5El ordenamiento de los reactivos es adecuado?

    5

    6La presentacin formal (tipo y tamao de letra,etc.) del instrumento es apropiada? 5

    7La hoja de respuestas est bien presentada?

    5

    Promedio4.7

    Experto N 1.- Mg. Elena Cano CorreaExperto N 2.- Dr. Dw ight OrdoezExperto N 3.- Mg. Mara Eugenia Mansilla Arancibia

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    18/32

    Validacin de instrumentosN TEMS SI NO1 El instrumento tiene estructura lgica X2 La secuencia de presentacin de tems es ptima X3 El grado de complejidad o dificultad de los tems es

    aceptable.X

    4 Los trminos utilizados en las preguntas son claros ycomprensibles

    X

    5 Los reactivos o tems reflejan el problema deinvestigacin

    X

    6 El instrumento abarca en su totalidad el problema deinvestigacin

    X

    7 Los tems permiten medir el problema de investigacin X8 Los reactivos o tems permiten recoger informacin

    para alcanzar los objetivos de la investigacinX

    9 El instrumento abarca las variables, sub variables eindicadores

    X

    10 Los tems permiten contrastar la hiptesis X

    Confiabilidad

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    19/32

    Dr. Isac Espinoza Montes 19

    CONFIABILIDAD

    Confiabilidad

    (Consistencia

    Estabilidad Homogeneida

    Test Re-Test

    Formasparalelas

    tem de correlactotal

    Mitades partida

    KR-20 KR-2

    Alfa de

    Crombach

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    20/32

    Clculo de la confiabilida Existen diversos procedimientos. Todas utilizan coeficiente

    confiabilidad que fluctan entre 0 y 1 donde; coeficientenula confiabilidad y coeficiente 1 significa absoluta conf(total).

    Entre mas se acerca a cero el coeficiente existe mayor emedicin.

    Los procedimientos mas utilizados son: Coeficiente alfa de Cronbach. Medida de estabilidad (confiabilidad por test-retest Mtodo de formas alternativas y paralelas.

    19/03/2016Dr. Isac Espinoza Montes

    201

    C fi i t Alf d C b

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    21/32

    19/03/2016Dr. Isac Espinoza Montes211

    Coeficiente Alfa de CronbaDefinicin

    Se trata de un ndice de consistencia internatoma valores entre 0 y 1 y que sirve paracomprobar si el instrumento que se est evarecopila informacin defectuosa y por tan

    llevara a conclusiones equivocadas o si se tun instrumento fiable que hace medicionesestables y consistentes.

    C fi i t Alf d C b

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    22/32

    19/03/2016Dr. Isac Espinoza Montes221

    Coeficiente Alfa de CronbaDefinicin

    Alfa es un coeficiente de correlacin que mhomogeneidad de las preguntas promedtodas las correlaciones entre todos los temver que efectivamente, se parecen.

    Su interpretacin ser que, cuanto ms se ael ndice al extremo 1, mejor es la fiabilidaconsiderando una fiabilidad respetable a de 0,70.

    C fi i t Alf d C b

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    23/32

    19/03/2016Dr. Isac Espinoza Montes231

    Coeficiente Alfa de Cronbafrmula

    22

    11

    T

    i

    S

    S

    K

    K

    K :El nmero de temsSi^2 : Sumatoria de Varianzas de los temsST^2 :Varianza de la suma de los tems :Coeficiente de Alfa de Cronbach

    C fi i t Alf d

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    24/32

    19/03/2016Dr. Isac Espinoza Montes241

    Coeficiente Alfa deCronbach: Ejemplo

    K

    ITEMS i ii iiiSUMAITE

    Sujetos

    Arias (1) 3 5 5 1

    Chenet (2) 5 4 5 1

    Gutarra (3) 4 4 5 1

    Medina (4) 4 5 3 1

    Palacios (5) 1 2 2 5

    Roque (6) 4 3 3 1

    Si^2 (VARP) 1.58 1.14 1.47

    ST^2 9.1

    Si2: 4.19

    C fi i t Alf d

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    25/32

    19/03/2016Dr. Isac Espinoza Montes251

    Coeficiente Alfa deCronbach: Ejemplo

    K:El nmero de tems : Si^2 :Sumatoria de varianzas de los tems : ST^2 :Varianza de la suma de los tems : :Coeficiente de Alfa de Cronbach

    14.9

    19.41

    13

    3

    = 0.81

    Entre ms cerca de 1 est , ms alto es el grado de co

    K

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    26/32

    19/03/2016Dr. Isac Espinoza Montes261

    Medida de estabilidad, Test-Re

    Se refiere al grado en que la aplicacin repetidainstrumento,al mismo sujeto u objeto, produce igresultados.

    Se aplica un instrumento de medicin a un grupo personas en dos ocasiones diferentes y se calcula correlacin entre las dos series de observaciones.

    Al coeficiente obtenido en ese mtodo se le conocfiabilidad estimada.

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    27/32

    19/03/2016Dr. Isac Espinoza Montes271

    Medida de estabilidad, Test-Re-T

    CORRELACION 85.41%

    2

    n

    ABnr

    ITEMS i ii iii

    SUMA DEITEMS

    Sujetos

    Arias (1) 3 5 5 13

    Chenet (2) 5 4 5 14

    Gutarra (3) 4 4 5 13

    Medina (4) 4 5 3 12

    Palacios (5) 1 2 2 5

    Roque (6) 4 3 3 10

    PRIMERA APLICACIN

    ITEMS i ii

    Sujetos

    Arias (1) 3 4

    Chenet (2) 4 4

    Gutarra (3) 4 4

    Medina (4) 2 3

    Palacios (5) 2 2

    Roque (6) 3 3

    SEGUNDA APLICAC

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    28/32

    Procedimiento de mitades part

    r

    rR

    1

    2

    19/03/2016Dr. Isac Espinoza Montes

    281

    Procedimiento de dos mitades, consiste en la divisin de tems

    impares y requiere una sola aplicacin de la medicin (a difelas dos anteriores que requieren de dos administraciones de laal mismo grupo).

    1 Se calcula el ndice de Correlacin (Pearson)

    2 Correccin de r con la ecuacin de Spearman Brown

    2222

    nn

    ABnr

    roce m ento e m ta es par

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    29/32

    19/03/2016Dr. Isac Espinoza Montes291

    roce m ento e m ta es parejemplo

    ndice de correlacin de Pearson ( r ) : 0.66Correccin segn Spearman-Brown ( R ) : 0.792r / (1+r)Entre ms cerca de 1 est R, ms alto es el grado de confiabilidad

    Items I II III A

    SujetosArias (1) 3 5 5 8

    Chenet (2) 5 4 5 10

    Gutarra (3) 4 4 5 9

    Medina (4) 4 5 3 7

    Palacios (5) 1 2 2 3

    Roque (6) 4 3 3 7

    44

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    30/32

    19/03/2016Dr. Isac Espinoza Montes

    301

    1

    de con

    en la

    (no h

    0

    0% deconfiabilidad

    en la medicin

    (la medicin est

    contaminada de

    error).

    CONFIABILIDAD

    Muy baja Baja Regular Aceptable E

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    31/32

    19/03/2016Dr. Isac Espinoza Montes

    311

    TALLER: Validez y confiabilid

    Se aplica una prueba piloto para fichas de observacin a una muestra de 30 unidades de anlisis de una empreproductiva. Los indicadores son:

    Calidad

    Economa de escala

    Valor agregado y

    Competitividad

    Verificar la validez y confiabilidad basado en los datos adjuntan a continuacin.

    321ITEM 1 ITEM 2 ITEM 3 ITEM 4

    ECONOMIA DE VALOR SUMATOR

  • 7/26/2019 Tema 6 Validez y Confiabilidad

    32/32

    19/03/2016 Dr. Isac Espinoza Montes

    CALIDAD ESCALA AGREGADO COMPETITIVIDAD

    1 15 14 16 15 60

    2 19 22 21 20 82

    3 15 14 15 14 58

    4 15 14 16 15 60

    5 18 19 19 19 75

    6 15 16 16 16 63

    7 14 15 16 15 60

    8 13 14 14 14 55

    9 20 19 20 20 79

    10 19 18 20 19 76

    11 18 19 20 19 76

    12 16 17 18 17 68

    13 14 14 15 14 57

    14 17 18 17 17 69

    15 14 14 15 14 57

    16 19 20 21 20 80

    17 15 16 16 15 62

    18 14 15 15 14 58

    19 14 14 15 14 57

    20 15 14 15 14 58

    21 14 15 14 14 57

    22 15 14 14 14 57

    23 15 16 15 15 61

    24 14 14 15 14 57

    25 15 15 16 15 61

    26 16 14 16 15 61

    27 16 15 15 15 61

    28 15 16 15 16 62

    29 15 14 16 15 60

    30 15 13 15 15 58

    SUJETOS ITEM