Temas 3 y 6: Criterios de calidad

y éticos; tests psicológicos

Prof. Fernando L. Vázquez

(Catedrático de Psicología Clínica)

Dep. Psicología Clínica y Psicobiología

Universidad de Santiago de Compostela
E-mail: fernandolino.vazquez@usc.es
 ¿Qué es un test? (I)
◼ Es un instrumento estandarizado y tipificado que
compara la conducta de dos o más personas.
◼ Características:
◼ Material, instrucciones del evaluador, modos de
aplicación, reglas de corrección han sido fijadas.
◼ El resultado obtenido es independiente del profesional
que realiza la evaluación.
◼ El resultado se expresa de forma numérica.
◼ La interpretación de la puntuación obtenida se basa en
la comparación con la de un grupo que se establece
como normal (grupo normativo).
¿Cómo construiríais un test?
 Construcción de un test (Pasos)
1.Determinar - Qué se quiere medir o variable objeto de estudio
objetivo - Para qué: clasificación, predicción, selección, orientación, screening…
- Contexto de utilización (usuarios, tiempo, individual/grupo)
2.Definición - Delimitar variable que se quiere medir y sus dimensiones
operativa del - Definición de los comportamientos indicadores del constructo
constructo (diferentes estrategias: análisis de contenido, observación directa,
juicio de expertos..)
3. Diseño del - Elaboración de la tabla de especificaciones (estructura test e
test ítems): toma de decisiones sobre tipo de ítems (ítems de respuesta
cerrada, de respuesta abierta), el número, la longitud, el contenido
(cognitivo, afectivo…) y orden, formato de respuesta o tipo de
alternativas etc.
4.Redacción - Elaborar los ítems para los indicadores previstos del constructo.
de los ítems - Principios básicos: representatividad, relevancia, diversidad,
claridad, sencillez y comprensibilidad.
- Evitar: términos ambiguos, enunciados confusos, frases
gramaticalmente complejas, etc.
 Construcción de un test (Pasos)

5.Análisis de - Índices de dificultad: : se refiere al

los ítems porcentaje (proporción) de personas que
contestan correctamente a un ítem.

- Índices de discriminación: se refiere

al grado en que un ítem diferencia
correctamente entre los sujetos evaluados
en relación con la conducta que la prueba
pretende medir.
 Ejemplo: análisis de reactivos
Reactivo S M I Índice de Índice de
(20) (20) (20) dificultad discriminación
del reactivo (S-I)
(S+M+I)
1 15 9 7 31 8
2 20 20 16 56* 4
3 19 18 9 46 10
4 10 11 16 37 -6*
5 11 13 11 35 0*
6 16 14 9 39 7
7 5 0 0 5* 5
.
.
.
75
 Construcción de un test (Pasos)
6. Análisis de - Determinación de la fiabilidad: (a) se
fiabilidad y refiere a la precisión con la que mide
validez una prueba; (b) nos informa de la
cuantía del error de medida.

- Determinación de la validez: cuando

la prueba mide aquello que pretende y
dice medir
 Fiabilidad (criterio de calidad)
Concepto Cálculo
Consistencia interna: grado en que los Coeficiente Alfa de
diferentes ítems de una prueba se relacionan Cronbach; coeficientes de
entre sí. Kuder y Richardson
Estabilidad temporal: las puntuaciones de una Test-retest
prueba son similares en diferentes momentos.

Coeficiente interjueces: los resultados Coeficiente de Kappa,

obtenidos por dos o más evaluadores son Coeficiente de correlación
coincidentes. intraclase
Fiabilidad excelente: ≥ 0.9
Fiabilidad buena ≥ 0.8 a < 0 .9
Fiabilidad aceptable: ≥ 0.7 a < 0.8
Fiabilidad cuestionable: ≥ 0.6 a < 0.7
Fiabilidad pobre: ≥ 0.5 a < 0.6
Fiabilidad inaceptable: <.5
 Descripción test
(fiabilidad): ejemplo
◼ Cuestionario de Personalidad de Eysenck Revisado-Abreviado
(Eysenck Personality Questionnaire Revised-Abreviated [EPQR-
A]; Francis, et al., 1992; versión española de Sandín, Valiente,
Chorot, et al., 2002). Es un cuestionario autoinformado que
consta de 24 ítems que conforman cuatro subescalas de seis
ítems cada una. Tres subescalas miden los rasgos de
personalidad neuroticismo, extraversión, psicoticismo y la cuarta
subescala (sinceridad) evalúa la tendencia emitir respuestas de
deseabilidad social. Cada afirmación presentada se contesta de
forma dicotómica (sí/no). El rango de puntuaciones en cada
subescala oscila de 0 a 6, donde una mayor puntuación es
indicativa de mayor presencia del rasgo. Su consistencia interna
(Alpha de Cronbach) es de 0.78 para la subescala de
neuroticismo, 0,74 para extraversión, 0,63 para
psicoticismo y 0,54 para sinceridad.
 Validez (criterio de calidad)
Concepto Cálculo
Contenido Los elementos de una prueba se adecúan a lo que pretende medir (Juicio de
expertos; correlaciones con otras medidas de la misma variable)
Criterio En qué medida una prueba puede predecir un criterio independiente
Concurrente Correlación entre del prueba y un criterio (al mismo tiempo)

Sensibilidad/ Coef. de sensibilidad (capacidad para detectar el trastorno, % de verdaderos

especificidad positivos) y especificidad (capacidad para detectar la ausencia del trastorno,
% de verdaderos negativos)
Predictiva Correlación con el criterio (en un tiempo posterior)
Constructo Grado en que una prueba concuerda un constructo teórico
Convergente/ - Convergente: correlaciones altas entre pruebas que miden el mismo
Discriminante constructo.
-Discriminante: correlaciones nulas entre pruebas que miden constructos
diferentes.
Análisis factorial
 Fiabilidad y validez: ejemplos
◼ Vázquez et al. (2006). An adaptation of the Center for
Epidemiologic Studies Depression Scale for use in non-psychiatric
Spanish populations. Psychiatry Research, 149, 247-252
◼ To adapt the Center for Epidemiologic Studies Depression

Scale for use in non-psychiatric Spanish populations, a Spanish

translation of the scale was interviewer-administered to 554
subjects aged 18–34 years (65.9% women) and the ratings so
obtained were compared with the SCID-CV-based diagnoses of
expert clinicians. The internal consistency of the scale was
satisfactory (Cronbach's α=0.89). Four factors identified by
exploratory factor analysis (Depressive/Somatic, Positive
Affect, Retarded Activity and Interpersonal Relations)
accounted for 55.9% of the variance. A score of 26 was
identified as a suitable cut-off for screening purposes, affording
a sensitivity of 0.906 and a specificity of 0.918.
 Cargas factoriales de los ítems del
EPQR-A en neuroticismo
(análisis exploratorio)
Ítem Neuroticismo
¿Tiene con frecuencia subidas y bajadas de
su estado de ánimo? (1) .72
¿Se siente con frecuencia harto/a (hasta la
coronilla)? (9) .60
¿Se considera una persona nerviosa? (11) .72
¿Es usted una persona demasiado preocupada?
(14) .67
¿Sufre usted de los nervios? (18) .68
¿Se siente muy solo/a con frecuencia? (21) .62
Vázquez et al. (2019). Cuestionario de Personalidad de Eysenck Revisado-
Abreviado para cuidadores informales. Revista Iberoamericana de Psicología y
Salud, 10, 90-106
Vázquez et al. (2019). Cuestionario de Personalidad de Eysenck Revisado-
Abreviado para cuidadores informales. Revista Iberoamericana de Psicología
y Salud, 10, 90-106
 Validez divergente y
convergente: ejemplos
◼ En la subescala de Neuroticismo, se hallaron
correlaciones inversas y significativas con la
autoeficacia (r = -0,35, p < 0,001) y con los
contactos sociales agradables (r = -0,22, p <
0,001). Por otra parte, se hallaron correlaciones
directas y significativas con la sintomatología
depresiva (r = 0,59, p < 0,001) y con los
pensamientos negativos (r = 0,53, p < 0,001).

Vázquez et al. (2019). Cuestionario de Personalidad de Eysenck Revisado-

Abreviado para cuidadores informales. Revista Iberoamericana de Psicología
y Salud, 10, 90-106
 Construcción de un test (Pasos)
7. Normas de - Interpretación referida a criterios o normas.
interpretación • La interpretación referida a criterios de
rendimiento: analiza el desempeño de un
sujeto en relación con alcanzar determinado
nivel o criterio de rendimiento definido de
antemano.

• El uso de normas (baremos) implica

aportar información sobre el desempeño de
un sujeto concreto comparándola con la
distribución de puntuaciones de una muestra
normativa o grupo de referencia.
 Puntuaciones referidas
a la norma
Descripción

Referida a - Se compara la ejecución de un sujeto con su grupo normativo.

normas - La puntuación obtenida por el sujeto indica su posición con respecto al
grupo de referencia.
P. Percentil Indica el porcentaje del grupo normativo que obtienen
puntuaciones iguales o inferiores a las obtenida por el sujeto
evaluado en la prueba.
P. Permite comparar la puntuación de un determinado sujeto
cronológica con las que obtienen los sujetos de su misma edad.
- Edad mental: puntuación media que obtiene en una
prueba el conjunto de la población de esa edad.
- Cociente Intelectual = (edad mental/edad cronológica) x
100.

P. típica (z) Indica el número de desviaciones típicas a la que se encuentra la

puntuación de un sujeto respecto de la media del grupo
normativo.
 Regla: 68-95-99.7

Puntuación Z : la diferencia entre la puntuación directa obtenida por el sujeto en el test y la media
del grupo de referencia dividida por la desviación típica de ese mismo grupo en el test.
 Escalas típicas derivadas
Puntuaciones T Representan una escala con media 50 y
desviación típica 10. Por ejemplo, la puntuación
T de un sujeto cuya puntuación típica estándar (Z)
es -0,5 será 10 (-0,5) + 50 = -5 + 50 = 45.
Puntuaciones S Suponen una escala con media 50 y desviación
típica 20
Decatipos (DE) Constituyen una escala con media 5.5 y desviación
típica 2
Eneatipos (EN) Representa una escala con media 5 y desviación
típica 2
CI de desviación Representa una escala con media 100 y desviación
típica 15
Puntuaciones Suponen una escala con media 10 y desviación
escalares (Pe) típica 3
 Ejemplo puntuaciones referidas
a la norma
Puntuación Centiles Z CI
directa
93 99 + 2 sigmas >130
85 90 + 1,2 sigmas 120
81 80 + 1 sigmas 112
77 70 + 0,5 sigmas 108
74 60 + 0,25 sigmas 104
70 50 0 sigmas 100
67 40 - 0,25 sigmas 96
64 30 - 0,50 sigmas 92
58 20 - 1 sigmas 89
52 10 - 1,30 sigmas 75
26 1 - 2 sigmas <70
Media: 70 0 100
Sigma: 12 1 15
¿Clasificación de los tests?
 Clasificación de los tests
◼ 1.Tets de rendimiento máximo (cognitivos)
◼ Su objetivo es recoger los niveles más altos de rendimiento de
una persona, exigen a la persona que rinda al máximo de sus
posibilidades.
◼ Test de inteligencia y/o aptitudes
◼ De potencia: los ítems aumentan progresivamente de
dificultad, determinado el nivel máximo de ejecución.
◼ De velocidad: ítems con índice de dificultad similar resueltos
en un tiempo limitado.
◼ 2.Tets de ejecución típica (no cognitivos)
◼ Su objetivo es recoger el modo habitual de comportarse de las
personas.
◼ Test de personalidad o algunos cuestionarios, inventarios y
escalas.
 Test inteligencia: ejemplos
Test
WPPSI III: escala de 2,6-7,3 Inteligencia general según 6 subescalas:
inteligencia de Wechsler años verbal y manipulativa, velocidad de
para preescolares procesamiento y lenguaje, y 14 subtests.
WISC-IV: escala de 6-16 Inteligencia general, comprensión verbal,
inteligencia de Wechsler años razonamiento perceptivo, memoria de
para niños revisada trabajo, velocidad de procesamiento y 10
subtests principales y 5 optativos
WAIS-III: escala de 16 a 94 Inteligencia general según dos subescalas:
inteligencia de Wechsler años verbal y manipulativa, y tres índices:
para adultos comprensión verbal, organización
perceptiva, memoria de trabajo y
velocidad de procesamiento
K-Bit: Tes breve de 4-90 Inteligencia general según dos subescalas:
inteligencia de Kaufman años verbal y no verbal
 Test de personalidad: ejemplos
Test
MMPI-2-RF Adolesce 338 ítems. Sus 42 escalas sustantivas permiten una
ntes y evaluación eficiente y actualizada de las variables
adultos clínicamente relevantes en distintas áreas de la
personalidad y la psicopatología (ej., ansiedad,
miedos, obsesiones, depresión).

Inventario A partir 195 ítems que evalúan: 25 escalas clínicas agrupadas

Clínico de los en 4 categorías: 12 patrones clínicos de personalidad
Multiaxial de 18 años (e.j., esquizoide, evitativo, melancólico); 3 patrones
Millon (MCMI- de patología grave de la personalidad (Paranoide,
IV) esquizotípíco, límite); 7 síndromes clínicos (ej.,
ansiedad generalizada, síntomas somáticos, espectro
bipolar; 3 síndromes clínicos graves (espectro
esquizofrénico, depresión mayor y delirante)
¿Qué cuestiones deontológicas
hay que tener en cuenta para
aplicar un test?
 Aspectos deontológicos (I)
◼ Actuar siempre con independencia (art. 4).
◼ Confidencialidad: mantener bajo un estricto secreto
profesional los datos del cliente (art. 39 y 40), aún después de
la muerte (art. 49)
◼ Informar (al menos a los organismos colegiales), acerca
de violaciones de los derechos humanos (malos
tratos, condiciones de reclusión crueles, inhumanas o
degradantes) (art. 8)
◼ No aprovecharse para propio beneficio de la información
obtenida del cliente (art. 11).
◼ Al elaborar un informe usar palabras comprensibles y que
no hieran la sensibilidad del cliente (art. 12).
◼ No firmar un informe que no sea el resultado verdadero de
nuestro proceso de evaluación (art. 14).
◼ No aceptar un caso si no se está suficientemente
preparado para resolverlo (art. 17)
 Aspectos deontológicos (II)
◼ La instrumentación y los procedimientos deben ser los
adecuados, con garantías científicas y no dar acceso
a los mismos a gente no capacitada (arts. 18 y 19).
◼ Precisar cómo la interacción con otros profesionales
para llevar a cabo ha de realizarse directamente o
indicando al paciente con precisión lo que debe hacer
(art. 20).
◼ Cerciorarse del uso correcto de los informes que se
solicitan (art. 24).
◼ No evaluar a un menor sin avisar a sus padres o
tutores legales (art. 25).
◼ Cerciorarse antes de iniciar una evaluación que el
cliente no está ya con otro profesional (art. 30).
 Aspectos deontológicos (IIIF)
◼ No preguntar más allá de lo que el caso requiere (art. 39).
◼ Pedir el consentimiento del cliente para comunicarse con
terceras personas (arts. 40 y 41).
◼ Si la evaluación es solicitada por terceras personas, el
sujeto también tiene derecho a saber su contenido (arts.
42 y 43).
◼ Los datos obtenidos se podrán usar en docencia o
investigación si no es posible la identificación del
sujeto (art. 45).
◼ La presencia de otra persona en el proceso de
evaluación debe ser consentida por el paciente (art. 47)
◼ El informe psicológico ha de tener claridad, sin perder
precisión, e informar de las posibles incertidumbres de
los datos, su validez temporal, las técnicas utilizadas y
la identificación del profesional que lo hizo (part. 48).
 Referencias
◼ Fernández-Ballesteros, R. (Dir.) (2011).
Evaluación psicológica . Madrid: Pirámide.
◼ Cap. 4: “Garantías científicas y éticas de la
evaluación psicológica” (pp. 125-166)

◼ Cap. 9: “Técnicas psicométricas: los tests”

(pp.299-335)