Qu es confiabilidad?

Qu procedimiento se usa para estimar el coeficiente de estabilidad de una prueba?

Cules son los mtodos usados para hallar la consistencia interna de la prueba?Preguntas de control

RECAPITULACIN CONFERENCIA ANTERIORConcepto de Confiabilidad:Hace referencia a la consistencia de las puntuaciones as como a la estabilidad de los resultados en diferentes evaluaciones.

Tipos de confiabilidad:Test retest coeficiente de estabilidadFormas alternas coeficiente de equivalenciaParticin en mitades coeficiente de consistencia interna

Error estndar de medicin:Otra forma de expresar la confiabilidad de una prueba

En una evaluacin de desempeo, se seleccionan a cuatro trabajadores que encajan en el puesto solicitado. Hay un quinto trabajador, no seleccionado, que solicita una revisin de su caso ante las autoridades de la empresa. Quiere que le digan el por qu no fue seleccionado. El Gerente de la empresa pide al psiclogo encargado de la evaluacin que muestre las pruebas administradas. Ante ello el profesional muestra los protocolos administrados y manifiesta "el trabajador no califica para el puesto" Cmo lo concluye Ud.?, le pregunta el Gerente. "Las pruebas utilizadas para evaluar su capacidad de liderazgo, responsabilidad y eficiencia en el trabajo as lo demuestran". Es decir, las pruebas han sido construidas para evaluar esas capacidades y si las personas puntan bajo quiere decir que no tienen desarrolladas dichas capacidades. "Una prueba es vlida si mide lo que pretende medir", desde este punto de vista, el trabajador no posea adecuadamente desarrolladas estas habilidades.

OBJETIVOSAnalizar los conceptos de validez de una pruebaConocer los procedimientos para su estimacinAnalizar el mtodo de validez de contenidoAnalizar el concepto de validez de facie

CONTENIDOSValidez: Concepto y clasificacin

Validez de facie. Procedimientos para su estimacin

Validez de contenido

PRUEBASJUSTIFICACINTERICA Y TCNICACONFIABILIDADVALIDEZ

La validez se define comoel grado en que un test mide lo que pretende medir.

Propiedades de la validez.....Es cuestin de grado o fuerza ms que del todo o nada. La validez no puede resumirse en un nico coeficiente o ndice numrico.Se valida el uso para el que se destina el instrumento ms que el instrumento en s.

Si bien existen diferentes tipos de validez, todas son diferentes aspectos de un nico concepto que es la validez de constructo.

Es la eficacia de una prueba para representar, describir o pronosticar un atributoSus datos se basan en la evidencia empricaEl proceso de validacin sirve para validar la prueba y la teora en que se basaVALIDEZ

TIPOS DE VALIDEZ:De contenidoDe criterioDe constructo

Aparente o de facie

Psic. Carmen Blzquez QuintanaPsic. Carmen Blzquez QuintanaPsic. Carmen Blzquez Quintana

VALIDEZEs un proceso que sirve para evaluar laEficacia de una pruebaCONTENIDOCRITERIOCONSTRUCTOContiene el test unaMuestra representativa delComportamiento a Medir?Cun efectivo es un test para la prediccinDe un resultado futuro?Qu construccin Psicolgica mide la prueba?La mide bien?

Validez de contenido....Expresa el grado en que el contenido de un test constituye una muestra representativa de los elementos del constructo que pretende evaluar.El propsito de un estudio de validacin de contenido es establecer el grado en que el conjunto de tems del test representa adecuadamente un dominio de conductas de inters especfico.

VALIDEZ DE CONTENIDOTEMSREPRESENTATIVOSRELEVANTESDEL CONSTRUCTOIMPORTANTES

TABLA DE ESPECIFICACIONES: Psicometra N de tems = 40

COMPETENCIASNormas N temsConfiabilidadN temsValidezN temsConoce los trminos bsicos444Explica los procedimientos para obtener 565Interpreta estos datos en las pruebas444

Mtodos para hallar validez de contenido....De juecesEl tem es esencial, til pero no esencial o no es necesario? CVR= ne N/2N/2CVR: Razn de validez de contenido (0.99)e: esencial

Pruebas paralelas

Validez aparente o de facie:

Se refiere no a lo que el test mide sino, a lo que superficialmente parece medir. No tiene validez tcnica. En qu grado el test parece medir lo que pretende?Es un juicio referido a lo relevantes que parecen ser los reactivos de la prueba

Validez referida al criterio....Cuando el usuario de un test quiere hacer inferencias del test a la conducta del sujeto en algn criterio de rendimiento externo al propio test.El criterio es una variable o caracterstica de inters real (rendimiento acadmico, rendimiento laboral, etc.)

Ejemplo:VALIDEZ DE CRITERIO DE UN TEST DE INTELIGENCIANotas escolaresCRITERIODe rendimiento acadmico

EL CRITERIO PUEDE SER.CONCURRENTEPREDICTIVOGRUPOS CONTRASTADOSPRESENTEFUTURODepende del tiempo

Pasos para obtener validez de criterio:Identificar un criterio y un mtodo para medirloIdentificar una muestra de sujetos Administrar el test y calificarloObtener datos del criterio (concurrente) o esperar un tiempo para recoger los datos (predictiva)Determinar el grado de asociacin entre puntajes del test y el criterio

Ejemplo:EPIMelancolaRespuesta al tratamiento1 aoVALIDEZ PREDICTIVAEPIBECKpruebapruebacriteriossimultneoCaractersticas depresivasEncuesta a familiaresVALIDEZ CONCURRENTE

Validez predictivaCun efectivo es el test para laPrediccin de un resultado futuro?La relacin entre las puntuaciones de la prueba y una medida del criterio obtenido en un momento futuro proporcionan un indicio de la validez predictiva de la prueba Es til para los tests de seleccin de personal, de estudiantes universitarios o seleccin de militares para destinarlos a diferentes especialidades

Utilizacin de los datos de validez:Tablas de expectabilidadLas tablas de expectabilidad expresan la relacin entre las puntuaciones del sujeto en el test y su posicin en el criterio (concurrente o predictivo).

Distribucin de dos variables que muestra la relacin entre las puntuaciones en el DAT y las calificaciones en retrica (lenguaje)

ESTIMA LA POSICIN PRESENTE DE UN INDIVIDUOEN UN CRITERIOVALIDEZ CONCURRENTE Se correlacionan los resultados del test y el criterio medido actualmente. Es til para los tests diagnsticosEjemplo: las puntuaciones de una prueba de psicodiagnstico fueron validadas con el criterio de: diagnstico dado por un psiquiatra a los pacientes.

ILUSTRACIN DE VALIDEZ CONCURRENTETest de ComprensinverbalNotas dadasPor profesoresEvaluacin de losprofesoresPuntajes en eltestr =Coeficiente de validez concurrentesimultneo

Cul es el propsito de una tcnica de evaluacin, ya sea psicomtrica o proyectiva? En principio, una respuesta adecuada sera: la tcnica sirve para operacionalizar algn constructo hipottico.Por ejemplo, al evaluar la variable de personalidad Extraversin, mediante alguna tcnica psicomtrica, lo que estamos haciendo es operacionalizar mediante un instrumento dicho constructo hipottico. Puede haber ms de una forma de operacionalizar dicho constructo y, de hecho, tanto el EPQ-R como el Neo-Pi-R miden entre otras dicha variable. Cabra preguntarse si, en realidad, miden el mismo constructo.

VALIDEZ DE CONSTRUCTOEs el principal tipo de validez y a su vez, la ms difcil decomprobar. Su finalidad es comprobar la hiptesis que se deduce de la teora.

Los atributos psicolgicos y los procesos mentales son constructos o conceptos hipotticos que forman parte de las teoras que intentan explicar la conducta humana.

Ejemplos: inteligencia, creatividad, extroversin-introversin, etc.Constructo

Anlisis factorialDiferencias entre gruposCorrelacin con otrasMedidas del constructoMatrices multimtodomulitrrasgoIdentificar Factor o factorescomunesEdades, sexo Convergente o DiscriminanteDiferentes mtodosDiferentes rasgosComprobar la hiptesis que se deduce de la teoraTodos apuntan a lo mismo: A si el instrumento mide lo que dice medirVALIDEZ DE CONSTRUCTO

Pasos para hallar validez de constructo...Formular hiptesis acerca de las relaciones entre los elementos del constructo. Fundamento terico.Seleccionar tems que representen al constructoRecoger datos del testEstablecer consistencia entre los datos

EVIDENCIAS DE LA VALIDEZ DE CONSTRUCTOAnlisis factorialDiferencias entre edadesCorrelaciones con otras medidas del constructoMatrices multimtodo - multirasgo

Anlisis factorialSe utiliza cuando el test est dividido en factores y sirve para medir la validez de constructo, debido a que desde la teora del instrumento se plantean los distintos factores como atributos diferenciados.

El anlisis factorial, se utiliza no solo para evaluar la validez del instrumento, sino tambin su construccin

Se aplica el instrumento a dos o ms grupos, los cuales debieran diferir en el atributo que se mide, en razn de alguna caracterstica que se us para formar los grupos, y que se podra inferir a partir de la teora del constructo que mide el instrumento, que dicha caracterstica estara relacionada con diferencias predecibles en el atributo.Diferenciacin entre grupos

Correlaciones con otras medidas del constructoCuando existe otro test ya validado que mide el mismo constructo, o varios tests,se puede correlacionar el nuevo con el/los antiguos, para establecer su validez de constructo (convergente). Este procedimiento, depende de que exista, por lo menos un test, con un constructo idntico o muy similar, al que se intenta validar o que sean constructos opuestos (discriminante).

Para poder aplicar esta tcnica se precisa que existan como mnimo dos mtodos diferentespara medir el constructo que se va a validar. Tambin se necesitan otros constructos que puedan ser medidos por los mismos mtodos. Se miden en los sujetos de la muestra los distintos constructos con mtodos diferentes. Se calculan las correlaciones entre todas las medidas y se forma con ellas una matriz que contendra todos los datos resultantes.Las Matrices multimtodo-multirasgo

Ejemplo:En el ejemplo anterior del EPI, lo que importara en este caso, si tomamos por ejemplo la variable Neuroticismo no sera tanto si las puntuaciones de Neuroticismo pueden servir para establecer predisposicin para la adquisicin de determinadas psicopatologas sino lo que se considerara ms relevante sera establecer si este factor que mide el test se corresponde con el constructo Neuroticismo, ubicado en la teora de la Personalidad de Eysenck, de la cual se deriva el instrumento al que nos referimos.

Ejemplo: Datos (N=5) X1 X2 X3 Rendim Ansied Neurot 9 3 5 3 12 15 6 8 8 2 9 7 7 7 6

ConclusionesSi un instrumento es poco confiable, esto podra afectar su validez.Si un instrumento tiene alta confiabilidad, eso no significa que tenga que ser vlido; un instrumento puede ser confiable y al mismo tiempo no ser vlido.

los instrumentos tienen como propsito operacionalizar constructos, o sea, medir determinados atributos. La validez tiene que ver con poder determinar si el instrumento est midiendo realmente el atributo que dice medir.Determinar la validez de un instrumento es mucho ms difcil que establecer su confiabilidad.

***