27/03/12

1

1

VALIDEZ

1. Concepto 2. Evolucin histrica

! Antes de los aos 50 ! Aos 50 ! Aos 60-70 ! Aos 80 ! Actualidad

2

Concepto Propiedades psicomtricas sobre la calidad de los tests

FIABILIDAD VALIDEZ

Precisin Ausencia de error

Necesaria No suficiente

TEST

Significado Adecuacin terica

Utilidad prctica

Imprescindible Ms importante

INFERENCIAS

27/03/12

2

3

Muy exacta No nos dir nada

sobre la inteligencia de una

persona

Precisin!

Modelos psicomtricos Precisin de las puntuaciones

Validez!

Medida del permetro del crneo

La evidencia que apoye el significado de las puntuaciones hay que buscarla por otros procedimientos

4

VALIDEZ Fundamentar el significado de las puntuaciones

! El significado de X es el esperado? ! Qu evidencia puedo aportar que demuestre que este

test mide lo que pretende?

! Las puntuaciones me permiten inferir algo acerca de la variable psicolgica para la que aplico el test?

! Es el rasgo pretendido el que produce las diferencias observadas en las respuestas?

27/03/12

3

5

Se valida una interpretacin y utilizacin determinada de las

puntuaciones del test

No se valida el test

6

MODELOS DE MEDIDA

MODELOS PSICOMTRICOS

VALIDEZ

Evalan si los rasgos a medir son cuantitativos

Establecen los requisitos que debe satisfacer una variable para poder ser presesentada

numricamente

Asumen que el rasgo es de naturaleza cuantitativa

Bajo ciertos supuestos, describen la relacin entre el test y el rasgo

X=f(Rs, Ct, E) Asumen que la puntuacin del test est

relacionada con el rasgo

Se evala si la puntuacin en el test es un indicador del rasgo

Informa del significado psicolgico de las puntuaciones

27/03/12

4

7

Evolucin histrica

! Validez antes de los aos 50 ! Aos 50 ! Primeras normas de la APA (1954) ! La postura disidente de Cronbach y Meehl ! Aos 60-70 ! APA y el concepto tradicional (1966, 1974) ! Seguidores de la propuesta de Cronbach y Meehl ! Aos 80 ! Actualidad: nuevas normas de la APA

8

Antes de los aos 50

Correlacin entre las puntuaciones de un test

y alguna otra medida objetiva de lo que el test

intenta medir (Bingham, 1937)

De una forma muy general, un test es

vlido para aquello con lo que correlaciona

(Guilford, 1946)

Concepto reducido a aspectos operacionales:

Sinnimo de correlacin test-variable de inters

Se recurre al criterio de utilidad:

Un test es vlido si es capaz de pronosticar o predecir la puntuacin

en la variable de inters

Validez Predictiva

27/03/12

5

Antes de los aos 50

9

Correlacin entre las puntuaciones de un test

y alguna otra medida objetiva de lo que el test

intenta medir (Bingham, 1937)

De una forma muy general, un test es

vlido para aquello con lo que correlaciona

(Guilford, 1946)

Surge con el paradigma conductista

Elude cualquier referencia a conceptos inobservables

Reaccin al realismo anterior: el objetivo de los test era descubrir

los rasgos a los que se atribuye existencia independiente

10

Aos 50: primeras normas de la APA Technical recommendations for psychological tests and

diagnostic techniques (APA, 1954)

TIPOS DE VALIDEZ

VALIDEZ PREDICTIVA

VALIDEZ CONCURRENTE

VALIDEZ DE CONTENIDO

VALIDEZ DE CONSTRUCTO

Conceptualizacin ligada a criterios externos

Conceptualizacin ligada a criterios internos

27/03/12

6

8

VALIDEZ PREDICTIVA

Es capaz de pronosticar aquello para lo que fue diseado?

Puntuaciones en

el test (X) Puntuaciones en el

criterio (Y)

Si es alta, hay validez, sirve para pronosticar el criterio

rxy

T1 T2

12

Ejemplo: D48. Su criterio es el rendimiento acadmico

27/03/12

7

13

VALIDEZ CONCURRENTE

Es capaz de pronosticar aquello para lo que fue diseado?

Puntuaciones en

el test (X) Puntuaciones en el

criterio (Y)

Si es alta hay, validez, sirve para pronosticar el criterio

rxy

T1

14

VALIDEZ DE CONTENIDO

Es el test una muestra representativa y relevante de los contenidos del constructo a medir?

Se determina en base a juicios de expertos respecto a la pertinencia de los tems

27/03/12

8

15

VALIDEZ DE CONSTRUCTO

En qu grado el test refleja el constructo que pretende medir?

Procedimientos para evaluarla:

Correlacin con otras medidas del mismo constructo

Anlisis factorial

16

Aos 50: primeras normas de la APA Technical recommendations for psychological tests and

diagnostic techniques (APA, 1954)

TIPOS DE VALIDEZ

VALIDEZ PREDICTIVA

VALIDEZ CONCURRENTE

VALIDEZ DE CONTENIDO

VALIDEZ DE CONSTRUCTO

Conceptualizacin ligada a criterios externos

Conceptualizacin ligada a criterios internos

Formas alternativas de evaluar la validez

La validez como propiedad inherente al test

Se recomienda elegir aquel tipo de validez que se adapte mejor al uso al que est destinado el test

27/03/12

9

Aos 50: Cronbach y Meehl

17

TIPOS DE VALIDEZ

VALIDEZ PREDICTIVA

VALIDEZ CONCURRENTE

VALIDEZ DE CONTENIDO

Construct validity in psychological tests (1955)

La validez como un concepto unitario

VALIDEZ DE CONSTRUCTO

18

Cronbach y Meehl (1955): enfoque constructivo

! Los rasgos son constructos inferidos a partir de las consistencias del comportamiento

! Los rasgos no surgen del vaco ! Surgen de un sistema conceptual del relaciones

Los rasgos se definen de dos formas complementarias

Red nomolgica

Constitutiva: definicin conceptual del rasgo

Operacional: definicin en trminos de las conductas observables

27/03/12

10

Ejemplo Neuro,cismo

19

20

Red nomolgica

Conceptos

Datos

Ansiedad Depresin

Autoestima

E. Ansiedad E. Depresin

E. Autoestima

Insomnio

27/03/12

11

21

Definicin constitutiva

Definicin operacional

Test

Grado en que la persona presenta reacciones emocionales ajustadas a la realidad y mantien una estabilidad emocional adecuada. Es independiente de la inteligencia, la extroversin,... est relacionado con el nivel de activacin del sistema nervioso central, con la toleracia al estrs, con las estrategias de afrontamiento, con la ansiedad...

Frecuencia con que la persona pierde los nervios, experimenta cambios de humor, reacciona con sobresalto ante ruido inesperado, mantiene la calma en momentos de tensin...

Conjunto de indicadores del rasgo seleccionados a partir de su definicin operacional

22

La seleccin de indicadores es adecuada?

! A travs de red de relaciones (red nomolgica) que la teora propone entre ese rasgo y otros rasgos y criterios.

! Esa red permite deducir hiptesis de validacin para el test

! Se supera la distincin criterio/constructo

Comprobacin

27/03/12

12

23

! las de una escala de ansiedad fisiolgica ser alta ! las de otro test que mida ansiedad/rasgo (como el

STAI) ser alta

! las de una medida de extroversin ser nula ! las de una medida de insomnio ser alta

La correlacin entre las puntuaciones en este test y

Hiptesis de validacin

Cada hiptesis confirmada aade nueva evidencia a favor de la validez

24

VALIDEZ PREDICTIVA

VALIDEZ CONCURRENTE

VALIDEZ DE CONTENIDO

VALIDEZ DE CONSTRUCTO

TIPOS DE VALIDEZ

Validez como concepto unitario

Correlacin con el

insomnio

Correlacin con la

ansiedad fisiolgica

Evaluacin de jueces

Correlacin con el STAI, Extroversin

27/03/12

13

25

Aos 60-70: APA y el concepto tradicional Standards for educational and psychological tests and

manuals (APA, AERA; NCME 1966, 1974)

TIPOS DE VALIDEZ

VALIDEZ DE CRITERIO

VALIDEZ DE CONTENIDO

VALIDEZ DE CONSTRUCTO

predictiva concurrente

Formas alternativas de evaluar la validez

La validez como propiedad inherente al test

Se recomienda elegir aquel tipo de validez que se adapte mejor al uso al que est destinado el test Se sugiere evaluar la validez bajo ms de uno de los tipos propuestos

26

Aos 60-70: seguidores de Cronbach y Meehl

Campbell y Fiske (1959)

Messick (1975)

Guion (1977) Tenopyr (1977)

Validez convergente

Validez discriminante

VALIDEZ DE CONSTRUCTO

Matrices MRMM

Validez de constructo como requisito fundamental

Tipos de validez Estrategias para evaluar la validez

27/03/12

14

27

Aos 80: unificacin de criterios Standards for educational and psychological testing

(APA, AERA; NCME 1985)

Evidencia relativa al contenido

Evidencia relativa al criterio

EVIDENCIA RELATIVA AL CONSTRUCTO

! La validez como concepto unitario ! NO son formas alternativas de evaluar la validez ! Necesidad de evaluar la validez considerando diferentes tipos de

evidencia

! Cualquier evidencia contribuye al la validacin de constructo ! La validez NO es una propiedad inherente al test

28

Actualidad: nuevas normas de la APA Standards for educational and psychological testing

(APA, AERA; NCME 1999) ! Nueva nomenclatura que refuerza el carcter unitario de la validez ! Nuevos tipos de evidencia de validez

! Evidencia basada en el Contenido del test ! Evidencia basada en la Estructura Interna ! Evidencia basada en las Relaciones con Otras Variables ! Evidencia Convergente y Discriminante ! Relaciones test-criterio ! Generalizacin de la validez ! Evidencia basada en el Proceso de Respuesta ! Evidencia basada en las Consecuencias de la aplicacin del test

Contenido Constructo Criterio

! NO son formas alternativas de evaluar la validez ! La validez NO es una propiedad inherente al test

Samuel Messick

27/03/12

15

29

Resumen: Evolucin histrica del concepto Validez

Enfoque pragmtico y de carcter predictivo

La validez de un instrumento se identifica con su utilidad para

predecir el rendimiento futuro de los individuos

Conceptualizacin fragmentaria de la validez

Inters en validar el test

Enfoque terico-explicativo

El proceso de validacin implica la puesta a prueba de hiptesis en el

contexto de una teora cientfica

Conceptualizacin unitaria de la validez

Toda evidencia informa sobre la validez de la interpretacin de las

puntuaciones del test como medida del constructo

Inters en validar las inferencias hechas a partir de las puntuaciones

obtenidas en el test

30

D48

27/03/12

16

31

32

27/03/12

17

DAT

33

34

27/03/12

18

35

16 PF 4

36

27/03/12

19

16 PF 5

37

EPQ-R

38