Perspectivas actuales y futuras de la medición y...

A la vanguardia de la evaluación psicológica

Perspectivas actuales y futuras de la medición y evaluación psicológicas

David Arribas Águila

TEA EDICIONES: Dpto. de I+D+i

[email protected]

Septiembre de 2014


• Editora de tests desde hace 57

años

• Adaptación, creación y publicación

de tests de evaluación y

programas de recuperación.

• Áreas: Trabajo, clínica,

educativa….

• 50 profesionales

• Miembro del ETPG

TEA EDICIONES…

A la vanguardia de la evaluación psicológica 9/4/2014


Precisión: 0,85 – 0,95

Tests de inteligencia

Precisión: 0,70 – 0,85

Tests de personalidad

Precisión: 0,95

Longitud Brazo D/I

Precisión: 0,50

Presión sanguínea

Precisión: 0,50 - 0,60

Colesterol en sangre

A la vanguardia de la evaluación psicológica 9/4/2014

Métodos selectivos

Correlación

% de incremento del poder predictivo

sobre el uso de los tests de inteligencia

Tests de inteligencia

0,51

Pruebas de trabajo real

0,54

24

Autoinformes (personalidad)

0,41

27

Entrevista estructurada

0,51

24

Entrevista libre

0,38

8

Pruebas de conocimientos

0,48

14

Observación de la conducta anterior

0,45

14

Análisis de referencias

0,26

12

Años de experiencia

0,18

6

Datos biográficos

0,35

2

Assessment center

0,37

4

Años de formación

0,10

2

Grafología

0,02

0

Schmidt y Hunter, 1998

Los tests psicométricos son los mejores predictores del éxito en la escuela y en el mundo laboral (Hunt,

1997; Colom y Andrés-Pueyo, 1999).


PSICÓLOGOS

A DOS VELOCIDADES


Haciendo un poco de historia… Materiales


Haciendo un poco de historia… Aplicación


Haciendo un poco de historia… Corrección


Haciendo un poco de historia… Desarrollo de tests


VAT. Realidad virtual BAMI. Aptitudes TEA-SYSTEM. Personalidad

Segunda velocidad: Hitos importantes


Banco de ítems para su aplicación por PDA

•Desde 2004

•Aptitudes: Atención, Razonamiento, Numérico, Verbal,

Mecánica, Espacial.

•Personalidad y competencias

•Gestión de datos y resultados: en red por XML.

Tercera velocidad: Hitos importantes


TRASI. TAI APTITUDES • Fecha de publicación: 2003

• Test adaptativo informatizado en CD

• Razonamiento secuencial e inductivo

• Ítems: 98

Tercera velocidad…


• Aplicaciones desde 2003: 1.147 • Aplicaciones 2011: 165. • Facturación 2011: 450 euros. • 6/1000 de TEA Ediciones.

• Aplicaciones 2011: 9.400.

• Facturación 2011: 20.000 euros.

• 285/1000 de TEA Ediciones.

PMA-R. Razonamiento

Tercera velocidad…

TRASI. TAI APTITUDES


• Corrección y obtención de resultados online.

• Equivalente a las plantillas antiguas.

• Aplicación en papel y lápiz.

• Lanzamiento: 2005.

• 52 tests disponibles.

• Simple cambio de formato con grandes repercusiones para la profesión.

Segunda velocidad: www.teacorrige.com


Segunda velocidad: www.teacorrige.com


• Primera plataforma europea de aplicación de tests online.

• Tests informatizados de primera generación.

• Lanzamiento: 2001

• Adaptada a todo tipo de tests.

• 65 tests disponibles (20 autoinformes; 45 tests cognitivos).

Tercera velocidad: www.e-teaediciones.com


Tercera velocidad: www.e-teaediciones.com


• Tests: 65

• Aplicaciones desde 2001: 123 020

• Usuarios: 1 268

• Tests: 50

• Aplicaciones desde 2005: 2 327 539

• Usuarios: 31 491

Psicólogos a dos velocidades…


Test 2010 2011 Male Female

BFQ 42.9% 57.1% 46.6% 53.4% 23,647

BIP 54.3% 45.7% 41.6% 58.4% 51,943

compeTEA 43.6% 56.4% 44.1% 55.9% 47,437

NEO PI-R 46.5% 53.5% 42.5% 57.5% 22,055

TPT 48.7% 51.3% 52.3% 47.7% 61,713

16PF-5 46.8% 53.2% 46.2% 53.8% 150,473

TOTAL 169,832 187,436 157,106 182,924 357,268

Year GenderTOTAL

International Test Commission (2012)



0

10

20

30

40

50

60

70

80

90

100

Spain Panama C. Rica

1.7%

98.3%

PPT CBT0

10

20

30

40

50

60

70

80

90

100

Spain Colombia Honduras

BFQ N=23,647



0

10

20

30

40

50

60

70

80

90

100

Spain Guatemala Colombia

1.9%

98.1%

PPT CBT0

10

20

30

40

50

60

70

80

90

100

Spain Others

NEO PI-R N=22,055



0

10

20

30

40

50

60

70

80

90

100

Spain Colombia Others

4.6%

95.4%

PPT CBT0

10

20

30

40

50

60

70

80

90

100


16PF-5 N=150,473



0

10

20

30

40

50

60

70

80

90

100


7.2%

92.8%

PPT CBT0

10

20

30

40

50

60

70

80

90

100


TPT N=61,713



0

10

20

30

40

50

60

70

80

90

100

Spain Colombia Peru

11.1%

88.9%

PPT CBT

0

10

20

30

40

50

60

70

80

90

100


BIP N= 51,943



0

10

20

30

40

50

60

70

80

90

100

Spain Colombia Peru

31.4%

68.6%

PPT CBT0

10

20

30

40

50

60

70

80

90

100

Spain Colombia C. Rica

compeTEA N=47,437


TOTAL

N=357,268




Test Spanish-American local norms

16PF-5

BFQ

BIP

COMPETEA

CPS

CTI

CUIDA

IPP-R

NEO PI-R

TPT


Colombia: Baremos disponibles


Muestras y muestreo

Test Initial sample

compeTEA 98,050

CPS 107,455

CUIDA 98,655

TPT 173,666

Total 477,826

Test Sample

compeTEA 31,069

CPS 38,950

CUIDA 6,909

TPT 39,116

Total 116,044

Gender

Age

Personnel Selection


compeTEA: Evaluación de competencias Country N

Spain 12,316

Argentina 432

Colombia 7,391

Costa Rica 2,912

Chile 712

Ecuador 836

El Salvador 290

Guatemala 1,208

Honduras 326

Mexico 1,942

Nicaragua 274

Panama 286

Paraguay 281

Peru 1,332

Dominican Rep. 237

Uruguay 294

TOTAL 31,069

EST: Emotional Stability

CONFI: Self-confidence

RES: Resistance to Adversity

COM: Communication

REL: Establishment of relationships

NEG: Negotiation

INF: Influence

ORRES: Goal orientation

ANAL: Analysis capability

DECI: Decision making

CONO: Company consciousness

VIS: Vision

ORCLI: Customer Orientation

APER: Openness

IDEN: Identifying with the Company

DIR: Management

LID: Leadership

ORG: Organization and Planning

SIN: Sincerity

Scales


compeTEA: Evaluación de competencias

EST CONFI RES COM REL NEG INF EQUI INI ORRES ANAL DECI CONO VIS ORCLI APER IDEN DIR LID ORG SIN d Median

Argentina 0.04 0.12 0.05 0.08 0.08 0.19 0.18 0.03 0.07 0.10 0.04 0.08 0.10 0.05 0.25 0.09 0.09 0.18 0.21 0.23 0.09 0.09

Colombia 0.27 0.60 0.39 0.43 0.04 0.20 0.83 0.18 0.16 0.27 0.25 0.24 0.41 0.62 0.16 0.15 0.66 0.59 0.22 0.29 0.42 0.27

Costa Rica 0.22 0.36 0.19 0.11 0.10 0.03 0.47 0.06 0.09 0.17 0.01 0.21 0.21 0.46 0.01 0.08 0.37 0.32 0.00 0.04 0.30 0.17

Chile 0.28 0.45 0.28 0.22 0.04 0.03 0.55 0.16 0.12 0.17 0.15 0.21 0.30 0.32 0.15 0.07 0.37 0.49 0.15 0.12 0.09 0.17

Ecuador 0.12 0.56 0.06 0.07 0.15 0.14 0.65 0.16 0.08 0.28 0.02 0.23 0.22 0.53 0.05 0.39 0.54 0.55 0.11 0.07 0.39 0.16

El Salvador 0.29 0.46 0.30 0.13 0.08 0.09 0.58 0.01 0.10 0.32 0.12 0.16 0.28 0.47 0.02 0.21 0.46 0.51 0.08 0.11 0.54 0.21

Guatemala 0.23 0.47 0.16 0.16 0.04 0.06 0.61 0.01 0.08 0.31 0.07 0.21 0.35 0.47 0.14 0.26 0.56 0.59 0.17 0.01 0.53 0.21

Honduras 0.12 0.42 0.09 0.11 0.12 0.05 0.69 0.02 0.13 0.24 0.04 0.22 0.29 0.53 0.03 0.19 0.43 0.55 0.22 0.01 0.41 0.19

Mexico 0.04 0.41 0.06 0.11 0.15 0.09 0.41 0.21 0.05 0.05 0.15 0.01 0.08 0.20 0.03 0.11 0.36 0.18 0.10 0.21 0.29 0.11

Nicaragua 0.10 0.09 0.13 0.03 0.17 0.09 0.56 0.18 0.17 0.00 0.03 0.00 0.17 0.54 0.23 0.06 0.42 0.37 0.19 0.07 0.57 0.17

Panama 0.14 0.36 0.11 0.01 0.17 0.10 0.58 0.17 0.05 0.12 0.07 0.04 0.14 0.43 0.13 0.23 0.29 0.20 0.08 0.07 0.31 0.14

Paraguay 0.01 0.31 0.09 0.05 0.28 0.02 0.40 0.24 0.03 0.03 0.02 0.07 0.04 0.24 0.15 0.04 0.24 0.37 0.10 0.37 0.21 0.10

Peru 0.37 0.64 0.31 0.26 0.05 0.33 0.71 0.11 0.22 0.31 0.17 0.36 0.34 0.67 0.19 0.23 0.57 0.63 0.19 0.09 0.17 0.31

Dominican R. 0.16 0.30 0.37 0.36 0.15 0.16 0.74 0.17 0.37 0.20 0.29 0.24 0.32 0.59 0.09 0.23 0.57 0.55 0.28 0.27 0.49 0.29

Uruguay 0.00 0.06 0.08 0.04 0.08 0.21 0.11 0.01 0.11 0.02 0.14 0.23 0.07 0.02 0.25 0.11 0.12 0.16 0.23 0.29 0.14 0.11

d Median 0.14 0.41 0.13 0.11 0.10 0.09 0.58 0.16 0.10 0.17 0.07 0.21 0.22 0.47 0.14 0.15 0.42 0.49 0.17 0.11 0.31 0.16

• Cohen’s d: 0.1796

Multivariate test Effect Sizes: Local vs Original

Null Medium

Small Large

55.2%

34.0% 0.3%

10.5%


EST: Emotional Stability

ANS: Anxiety

AUC: Self-concept

EFI: Efficiency

CSG: Self-confidence

IND: Independence

DOM: Dominance

CCG: Cognitive Control

SOC: Sociability

AJS: Social Adjustment

AGR: Aggressiveness

TOL: Tolerance

INS: Social Intelligence

INH: Integrity

LID: Leadership

SIN: Sincerity

DES: Social Desirability

CNT: Control Scale

Country N

Spain 12,628

Argentina 297

Chile 342

Colombia 13,874

Costa Rica 3,500

El Salvador 300

Guatemala 4,806

Honduras 814

Mexico 1,200

Panama 597

Peru 292

Dominican Rep. 300

TOTAL 38,950

Scales


EST ANS AUC EFI CSG IND DOM CCG SOC AJS AGR TOL INS INH LID SIN DES CNT d Median

Chile 0.02 0.02 0.37 0.24 0.06 0.08 0.51 0.05 0.23 0.15 0.01 0.19 0.08 0.23 0.57 0.20 0.23 0.06 0.17

Colombia 0.28 0.07 0.58 0.49 0.22 0.15 0.36 0.12 0.15 0.03 0.23 0.15 0.08 0.01 0.70 0.18 0.10 0.19 0.16

Costa Rica 0.17 0.03 0.33 0.26 0.21 0.08 0.20 0.03 0.31 0.00 0.18 0.11 0.12 0.05 0.39 0.02 0.03 0.20 0.15

El Salvador 0.25 0.14 0.21 0.19 0.06 0.24 0.17 0.10 0.34 0.04 0.49 0.24 0.03 0.22 0.44 0.04 0.16 0.21 0.20

Argentina 0.02 0.01 0.32 0.29 0.16 0.00 0.45 0.06 0.03 0.08 0.15 0.21 0.04 0.04 0.54 0.03 0.05 0.14 0.07

Guatemala 0.15 0.07 0.25 0.28 0.07 0.08 0.12 0.03 0.40 0.11 0.34 0.13 0.05 0.16 0.36 0.16 0.06 0.23 0.14

Honduras 0.10 0.19 0.16 0.13 0.05 0.16 0.30 0.13 0.61 0.23 0.08 0.20 0.06 0.25 0.44 0.17 0.36 0.18 0.18

Mexico 0.03 0.10 0.10 0.11 0.03 0.19 0.17 0.19 0.44 0.24 0.09 0.07 0.10 0.38 0.27 0.30 0.32 0.26 0.18

Panama 0.13 0.03 0.22 0.12 0.03 0.19 0.10 0.02 0.31 0.03 0.15 0.08 0.07 0.27 0.30 0.36 0.14 0.31 0.14

Peru 0.33 0.24 0.48 0.44 0.34 0.02 0.30 0.27 0.05 0.04 0.04 0.01 0.22 0.03 0.54 0.33 0.14 0.07 0.23

Dominican R. 0.32 0.15 0.44 0.34 0.17 0.18 0.48 0.18 0.16 0.19 0.00 0.18 0.16 0.03 0.70 0.22 0.03 0.16 0.18

d Median 0.15 0.07 0.32 0.26 0.07 0.15 0.30 0.10 0.31 0.08 0.15 0.15 0.08 0.16 0.44 0.18 0.14 0.19 0.15

• Cohen’s d: 0.2010

Multivariate test

Null Medium

Small Large

61.6%

34.3% 0.0%

Effect Sizes: Local vs Original

4.2%


AL: Altruism

AP: Openness

AS: Assertiveness

AT: Self-esteem

RP: Problem coping

EM: Empathy

EE: Emotional Stability

IN: Independence

FL: Flexibility

RF: Reflectiveness

SC: Sociability

TF: Frustration Tolerance

AG: Attachment Style

DL: Mourning copying

DS: Social Desirability

AGR: Aggressiveness

Country TOTAL

Spain 2,305

Bolivia 531

Colombia 1,331

Costa Rica 419

El Salvador 330

Guatemala 253

Honduras 188

Mexico 1,316

Panama 112

Paraguay 121

TOTAL 6,909

Scales


AL AP AS AT RP EM EE IN FL RF SC TF AG DL DS AGR d Median

Bolivia 0.11 0.33 0.11 0.23 0.36 0.75 0.16 0.17 0.47 0.21 0.85 0.47 0.81 0.30 0.13 0.31 0.30

Colombia 0.06 0.16 0.48 0.38 0.11 0.36 0.11 0.13 0.49 0.12 0.28 0.21 0.32 0.19 0.20 0.11 0.20

Costa Rica 0.04 0.03 0.34 0.27 0.13 0.37 0.16 0.17 0.17 0.02 0.23 0.04 0.27 0.25 0.02 0.04 0.16

El Salvador 0.30 0.02 0.32 0.43 0.20 0.29 0.25 0.01 0.11 0.29 0.19 0.16 0.14 0.32 0.29 0.18 0.22

Guatemala 0.19 0.09 0.12 0.11 0.12 0.56 0.01 0.16 0.40 0.03 0.49 0.26 0.42 0.19 0.37 0.21 0.19

Honduras 0.41 0.09 0.10 0.28 0.05 0.40 0.23 0.29 0.42 0.13 0.22 0.21 0.36 0.03 0.26 0.05 0.23

Mexico 0.33 0.16 0.24 0.28 0.17 0.53 0.20 0.47 0.29 0.02 0.29 0.06 0.14 0.26 0.23 0.06 0.23

Panama 0.21 0.22 0.11 0.13 0.11 0.16 0.09 0.28 0.36 0.11 0.38 0.08 0.29 0.35 0.05 0.03 0.15

Paraguay 0.27 0.33 0.17 0.12 0.13 0.29 0.06 0.34 1.15 0.05 0.28 0.53 0.65 0.57 0.58 0.44 0.31

d Median 0.21 0.16 0.17 0.27 0.13 0.37 0.16 0.17 0.40 0.11 0.28 0.21 0.32 0.26 0.23 0.11 0.21

• Cohen’s d: 0.2383

Multivariate test Effect sizes: Local vs Original

Null Medium

Small Large

45.8%

47.2%

4.9%

2.1%


DAJ: Maladjustment

ANS: Anxiety

DEP: Depression

EST: Stress Tolerance

ACO: Self-concept

TOL: Tolerance & Flexibility

ADA: Adaptation to Changes

CUL: Interest in Other Cultures

DIS: Availability

ISO: Social Intelligence

INS: Social Integration

EQU: Teamwork

PRO: Professional Self-demanding

DIN: Dynamism

TES: Tenacity & Constancy

SIN: Sincerity

Country TOTAL

Spain 23,340

Argentina 249

Colombia 5,988

Costa Rica 1,203

Chile 862

Ecuador 503

Guatemala 2,200

Honduras 932

Mexico 1,564

Panama 1,182

Peru 816

Uruguay 248

TOTAL 39,116

Scales


EST ANS DEP EST ACO TOL ADA CUL DIS ISO INS EQU PRO DIN TES SIN d Median

Argentina 0.06 0.05 0.04 0.05 0.01 0.13 0.19 0.23 0.18 0.06 0.09 0.41 0.01 0.06 0.09 0.07 0.06

Colombia 0.04 0.18 0.23 0.12 0.06 0.03 0.47 0.14 0.18 0.46 0.20 0.10 0.34 0.15 0.03 0.04 0.15

Costa Rica 0.16 0.02 0.16 0.02 0.08 0.06 0.27 0.09 0.38 0.05 0.10 0.40 0.01 0.10 0.18 0.24 0.10

Chile 0.09 0.06 0.31 0.04 0.13 0.24 0.17 0.04 0.26 0.01 0.13 0.24 0.12 0.10 0.06 0.12 0.12

Ecuador 0.36 0.03 0.03 0.04 0.20 0.36 0.38 0.05 0.21 0.08 0.07 0.28 0.11 0.04 0.31 0.04 0.09

Guatemala 0.36 0.10 0.11 0.04 0.16 0.23 0.12 0.37 0.39 0.15 0.19 0.67 0.01 0.08 0.19 0.32 0.17

Honduras 0.62 0.41 0.22 0.30 0.41 0.65 0.10 0.28 0.72 0.27 0.49 0.81 0.28 0.43 0.54 0.12 0.41

Mexico 0.17 0.07 0.16 0.10 0.19 0.06 0.27 0.18 0.29 0.08 0.04 0.34 0.23 0.03 0.15 0.05 0.16

Panama 0.28 0.16 0.04 0.20 0.09 0.01 0.38 0.07 0.32 0.27 0.11 0.38 0.11 0.19 0.21 0.13 0.18

Peru 0.18 0.02 0.05 0.21 0.22 0.42 0.37 0.08 0.35 0.16 0.01 0.29 0.25 0.01 0.22 0.05 0.20

Uruguay 0.01 0.09 0.16 0.03 0.02 0.00 0.28 0.10 0.20 0.07 0.05 0.28 0.12 0.03 0.09 0.06 0.08

d Median 0.17 0.07 0.16 0.05 0.13 0.13 0.27 0.10 0.29 0.08 0.10 0.34 0.12 0.08 0.18 0.07 0.12

• Cohen’s d: 0.1418

Multivariate test Effect sizes: Local vs Original

Null Medium

Small Large

64.8%

31.8%

2.8%

0.6%


Baremos globales

N = 10,102

N = 5,046

N = 10,000

N = 7,000


• La tecnología está a la altura.

• Dos o incluso tres velocidades claramente diferenciadas.

• Recursos informatizados: Aplicaciones individuales y muy

concretas.

• Prevalencia de NNTT: 9-10%, pero aumentando...

• Importancia de acciones formativas y de difusión.

La evaluación psicológica…


• Probablemente derivado del fenómeno de la

globalización, la tendencia a nivel mundial es la

elaboración de baremos internacionales o continentales.

• La ausencia de diferencias notables en la mayoría de

los países de habla hispana apoyan esta posibilidad, pero

con reservas.

• Los baremos locales incrementan la precisión de

algunas escalas, así como la buena imagen de las

pruebas en los países de destino.

La medición psicológica…


COLOMBIA


Uso Pruebas psicométricas Colombia


La evaluación psicológica en Colombia…

• Buenas perspectivas.

• Sólido uso de instrumentos psicométricos, especialmente en el

campo del reclutamiento.

• Objetividad

• Rentabilidad

• Eficiencia

• Uso de nuevas tecnologías: ahora es el momento...


“Los psicólogos, como los físicos, no

podemos liberarnos de los efectos de los

instrumentos que empleamos: lo que

observamos está invariablemente

desvirtuado por las pruebas que elegimos

para observar el fenómeno”

(Das, Kar y Parrila, 1996)

Perspectivas actuales y futuras de la medición y...

Documents

Transcript of Perspectivas actuales y futuras de la medición y...