Unidad 3: Validación de Instrumentos

UNIDAD 3: VALIDACIÓN DE INSTRUMENTOS

El Alto – Bolivia
2019
 Unidad 3: Validación de Instrumentos

Contenido
Pág

1 INTRODUCCIÓN .................................................................................................................................................... 1

2 ¿QUÉ SON LA FIABILIDAD Y LA VALIDEZ? ................................................................................................... 1

3 ANÁLISIS DE LA VALIDEZ ................................................................................................................................... 3

4 ANÁLISIS DE LA FIABILIDAD.............................................................................................................................. 5

4.1 El coeficiente alfa de Cronbach............................................................................................................... 6

4.2 Coeficiente de confiablidad de las dos mitades de Spearman-Brown ................................... 9

4.3 Coeficiente de confiablidad KR-20 ..................................................................................................... 11

 Unidad 3: Validación de Instrumentos

1 INTRODUCCIÓN

Es importante usar una prueba, un cuestionario, una lista de verificación u cualquier otro
instrumento, determinando antes su validez y fiabilidad.

Todos los instrumentos que se usan para recoger datos científicos deben ser fiables y válidos,
porque pueden tener la pregunta de investigación más imaginativa del mundo, con una hipótesis
bien definida y claramente expresada, pero si las herramientas utilizas para medir o registrar son
defectuosas, podría llegarse a conclusiones incoherentes.

2 ¿QUÉ SON LA FIABILIDAD Y LA VALIDEZ?

La fiabilidad se relaciona con la precisión y congruencia, es el grado en que la aplicación repetida

de un instrumento al mismo sujeto, objeto u situación, produce iguales resultados. Además, es la
capacidad del instrumento de producir resultados congruentes (iguales), cuando se aplica por
segunda o tercera vez, en condiciones tan parecidas como sea posible.

Para calcular la fiabilidad, generalmente todos los procedimientos utilizan fórmulas que producen
“coeficientes de fiabilidad”, los cuales pueden oscilar entre 0 y 1, donde 0 significa fiabilidad nula
y 1 representa el máximo de fiabilidad. Entre más se acerque el coeficiente a 0 habrá mayor error
en la medición.

La fiabilidad de un instrumento se valora a través de la consistencia, la estabilidad temporal, la

concordancia interobservadores y la triangulación.

• Por consistencia interna (homogeneidad): Se usa para instrumentos cuantitativos: sólo

para escalas o instrumentos que miden constructos. La consistencia interna se refiere al
nivel en que los diferentes ítems de una escala están relacionados entre sí. Esta
homogeneidad entre los ítems indica el grado de acuerdo y concordancia entre los

mismos y, por tanto, lo que determinará que éstos se puedan integrar y dar una
puntuación global. La consistencia se puede comprobar a través de diferentes métodos

estadísticos, siendo el más popular el Alfa de Cronbach.

• Por estabilidad temporal: Se utiliza para instrumentos cuantitativos como: inventarios,
listas de verificación o fichas de registro. La estabilidad temporal es la concordancia
obtenida entre los resultados del test, al ser evaluada la misma muestra de datos por el

mismo evaluador en, por lo menos, dos situaciones distintas (fiabilidad test-retest).

1
 Unidad 3: Validación de Instrumentos

• Por concordancia de interobservadores: Se usa para instrumentos cuali cuantitativos,

como: guías de observación, entrevistas no estructuradas, o guías de discusión de

grupos focales. Es el análisis del nivel obtenido al ser evaluada, la misma muestra y en las
mismas condiciones por dos evaluadores distintos. El instrumento es fiable si se

obtienen iguales resultados.

• Por fidelidad a las fuentes y publicidad en el registro (Triangulación): Se usa para

instrumentos cualitativos como: guías de observación, entrevistas no estructuradas, o

guías de discusión de grupos focales. Es la garantía de que los datos son fieles a la

fuente original. Se garantiza la fidelidad cuando se registra mediante filmaciones,

grabaciones, o base de datos - la fuente original de los datos. Con la fuente original
registrada, se puede medir la fiabilidad, utilizando la concordancia de interobservadores,
o diversos instrumentos al mismo tiempo.

La validez, por su parte, es el grado en que un instrumento realmente mide la variable que
pretende medir. La validez se refiere al grado de evidencia acumulada sobre qué mide el
instrumento, justifica la particular interpretación que se va a hacer del instrumento. Por ejemplo,
un instrumento para medir la inteligencia debe medir la inteligencia y no la memoria. Un
instrumento que mide la actitud del cliente hacia el servicio debe medir la actitud y no el
conocimiento, son dos cosas distintas.

Hay tres tipos de validez, que son enfoques complementarios: de contenido, de constructo y de
criterio.

1. De contenido (criterio de jueces, de expertos): Se refiere a si el instrumento elaborado, y

por tanto los ítems elegidos, son indicadores de lo que se pretende medir. Se somete el

instrumento a la valoración de investigadores y expertos, quienes juzgarán la capacidad

de éste para evaluar todas las variables que se desea medir. Se usa para todo tipo de
instrumentos, cualitativos o cuantitativos.
2. De constructo: Evalúa el grado en que el instrumento refleja la teoría de la variable, que

mide o registra. Sirve para garantizar que las medidas empleadas representan los
conceptos definidos en el marco teórico. La mejor forma de incidir sobre la validez de
constructo es utilizar variables de medida utilizadas en estudios empíricos previos; lo

2
 Unidad 3: Validación de Instrumentos

cual permite comparar los resultados obtenidos, y así favorecer la acumulación de

conocimiento. Puede ser calculada por diversos métodos, los más frecuentes son el

Análisis Factorial y la matriz Multirrasgo-Multimétodo. Estas se usan para escalas e

instrumentos cuantitativos con dimensiones.

3. De criterio: Consiste en correlacionar los puntajes obtenidos con un instrumento con

otros resultados ya conocidos y válidos (llamados “criterios”). Se usa para escalas, listas

de verificación o guías de observación.

3 ANÁLISIS DE LA VALIDEZ
La validez de contenido se determina mediante el juicio de expertos en el tema; también se le
conoce como “criterio de jueces”. Se consulta con especialistas si la variable a medir tiene un
contenido exhaustivo; es decir, si los ítems (indicadores) que componen cada variable son
pertinentes y exhaustivos (suficientes). El número de expertos consultados debe oscilar entre 3 y
10.

Ejemplo:

Has diseñado dos pruebas, una para medir “letras” y otra para medir “números”. La siguiente tabla
contiene los ítems de cada variable.

Variables (constructos) Ítems (indicadores)

Letras A
B
C
4
Números 4
6
7
G

¿Qué ítems crees que no forman parte de la variable? En la variable letras, obviamente “4” no
pertenece allí. En la variable “números” la “G” no pertenece a esa variable. ¿Fácil? Pues así lo ve
un experto en la materia.

La validez de constructo se determina -entre otras- usando una técnica estadística llamada
“Análisis Factorial”. Esta técnica analiza la estructura del instrumento y agrupa los ítems según su

3
 Unidad 3: Validación de Instrumentos

semejanza, obteniendo “factores”. Para ser válido, estos factores deben coincidir con los
constructos o dimensiones propuestos inicialmente para el instrumento.

Ejemplo:

La satisfacción laboral, el clima autoritario en el trabajo y las actitudes hacia el jefe son tres
variables distintas. Como son diferentes, los ítems que miden una y otra variable deben ser
diferentes también. Observa la siguiente tabla. Tienes tres preguntas que miden cada una de las
variables.

Variables (constructos) Ítems (indicadores)

Satisfacción laboral
Pregunta 1
Pregunta 2
Pregunta 3
Clima autoritario Pregunta a
Pregunta b
Pregunta c
Actitudes hacia el jefe Afirmación x
Afirmación y
Afirmación z

Si los ítems (indicadores) en verdad miden cada una de sus variables, entonces el resultado del
Análisis Factorial será más o menos así:

Ítems (Indicadores) Factor 1 Factor 2 Factor 3

Pregunta 1 X
Pregunta 2 X
Pregunta 3 X
Pregunta a X
Pregunta b X
Pregunta c X
Afirmación x X
Afirmación y X
Afirmación z X

Estos resultados demuestran que tus pruebas son válidas porque:

• Cada factor mide una variable. Como tienes tres variables (satisfacción laboral, clima
autoritario y actitudes hacia el jefe) entonces tienes tres factores.

4
 Unidad 3: Validación de Instrumentos

• El factor 1 tiene tres ítems (pregunta 1, 2 y 3). Estos tres ítems miden la satisfacción
laboral.

• El factor 2 tiene tres ítems (pregunta a, b y c). Estos tres ítems miden el clima
autoritario.

• El factor 3 tiene tres ítems (afirmación x, y, z). Estos tres ítems miden las actitudes
hacia el jefe.

Tal como observas, los resultados del Análisis Factorial coinciden con la propuesta teórica que se
hace (matriz de operacionalización). Esa coincidencia demuestra validez de constructo, porque
indica que en verdad se está midiendo lo que se debe medir.

Finalmente, la validez de criterio se determina correlacionando las puntuaciones de la prueba

con un criterio ya válido.

Ejemplo.

Si tu prueba de rendimiento laboral es válida, entonces el trabajador más productivo de la

empresa obtendrá la máxima calificación. En otro caso, si tu prueba de rendimiento laboral es
válida, entonces el trabajador menos productivo obtendrá la menor calificación. La prueba es
válida cuando puede discriminar grupos opuestos de valores.

4 ANÁLISIS DE LA FIABILIDAD
En la práctica, es casi imposible que una medición sea perfecta; generalmente se tiene un grado
de error. Desde luego, se trata que este error sea el mínimo posible y para ello hay formas de
calcular la fiabilidad.

La fiabilidad se relaciona con la precisión y congruencia. La fiabilidad es el grado en que la

aplicación repetida de un instrumento al mismo sujeto, objeto o situación, produce iguales
resultados. La fiabilidad es la capacidad del instrumento de producir resultados congruentes
(iguales) cuando se aplica por segunda o tercera vez, en condiciones tan parecidas como sea
posible.

La fiabilidad de un instrumento, se valora a través de la

• consistencia (homogeneidad, paralela e interna),

• la estabilidad temporal, la concordancia inter-observadores y

• la triangulación.

5
 Unidad 3: Validación de Instrumentos

Para calcular la fiabilidad, generalmente todos los procedimientos utilizan fórmulas que producen
“coeficientes de fiabilidad”, los cuales pueden oscilar entre 0 y 1, donde 0 significa fiabilidad nula
y 1 representa el máximo de fiabilidad. Entre más se acerque, el coeficiente a 0 habrá mayor error
en la medición.

Los procedimientos más utilizados son:

• Test-retest. Un mismo instrumento es aplicado dos o más veces a un mismo grupo

de personas en condiciones similares. Si la correlación entre los resultados de las

diferentes aplicaciones es altamente positiva, el instrumento se considera confiable.

• De las dos mitades. Se aplica una sola vez, pero los ítems se dividen al azar en dos

mitades y se comparan los puntajes obtenidos para cada mitad.

• Alfa de Cronbach. Se aplica una sola vez y se calculan todos los promedios de
coeficientes de correlación.
• Coeficiente Kuder y Richardson. Se aplica y se interpreta igual al coeficiente Alfa.

4.1 El coeficiente alfa de Cronbach

El Alfa de Cronbach (a) es el método más usado y sencillo para saber si una prueba de medición
es fiable. Esta técnica se usa sólo cuando tienes instrumentos que son escalas de constructos; es
decir, instrumentos que miden conceptos mediante varios ítems.

Se trata de un índice de consistencia interna que toma valores entre 0 y 1 y que sirve para
comprobar si el instrumento que se está evaluando recopila información defectuosa y por tanto
nos llevaría a conclusiones equivocadas o si se trata de un instrumento fiable que hace mediciones
estables y consistentes.

Alfa es por tanto un coeficiente de correlación al cuadrado que, a grandes rasgos, mide la
homogeneidad de las preguntas promediando todas las correlaciones entre todos los ítems para
ver que, efectivamente, se parecen.

Su interpretación será que, cuanto más se acerque el índice al extremo 1, mejor es la fiabilidad,
considerando una fiabilidad respetable a partir de 0,80.

Su fórmula de cálculo es la siguiente:

6
 Unidad 3: Validación de Instrumentos

Donde

K: El número de ítems

Si2: Sumatoria de Varianzas de los Items

ST2: Varianza de la suma de los Items

α: Coeficiente de Alfa de Cronbach

Como criterio general, George y Mallery (2003, p. 231) sugieren las recomendaciones siguientes
para evaluar los coeficientes de alfa de Cronbach:

• Coebciente alfa >0.9 es excelente

• Coeficiente alfa >0.8 es bueno

• Coeficiente alfa >0.7 es aceptable

• Coeficiente alfa >0.6 es cuestionable

• Coeficiente alfa >0.5 es pobre

• Coeficiente alfa <0.5 es inaceptable

7
 Unidad 3: Validación de Instrumentos

Ejemplo.

Items I II III Suma de Items

Sujetos

Campos (1) 3 5 5 13

Gómez (2) 5 4 5 14

Linares (3) 4 4 5 13

Rodas (4) 4 5 3 12

Saavedra (5) 1 2 2 5

Tafur (6) 4 3 3 10

VARP 2
(Varianza de la 1.58 1.14 1.47 ST = 9.14
Población)

Sumatoria de
varianzas de 2
los items  Si = 4.19

• K: El número de ítems : 3

• Si2 : Sumatoria de Varianzas de los Ítems : 4.19

• ST2 : Varianza de la suma de los Ítems : 9.14

•  : Coeficiente de Alfa de Cronbach

3  4.19 
 = 1 −
3 − 1  9.14 
= 0.81

El coeficiente cerca de 1 indica que el instrumento dado tiene un alto grado de confiabilidad.

8
 Unidad 3: Validación de Instrumentos

4.2 Coeficiente de confiablidad de las dos mitades de Spearman-

Brown
La ecuación de Spearman-Brown para elementos paralelos: es el método más antiguo y fue
propuesto casi al mismo tiempo por Spearman y Brown.

Para el cálculo del coeficiente:

1. Se aplica el test a una muestra de sujetos.

2. Se divide el test en dos mitades (paralelas).

3. Se calcula la correlación. Dicho valor equivale al rxx’ para cada una de las mitades →

habría que aplicar la fórmula de corrección para el caso de un test con longitud doble.

2rXX '
R XX' =
1 + rXX '

RXX ' = coeficiente de fiabilidad cuando se ha duplicado su longitud.

rXX' = coeficiente de fiabilidad de cada una de las mitades.

El siguiente esquema permite comprender mejor el procedimiento.

http://www.tecnicas-de-estudio.org/investigacion/imagenes/46-3.png

9
 Unidad 3: Validación de Instrumentos

Ejemplo.

En la siguiente tabla, se muestran las puntuaciones de una muestra de participantes en los

ítems pares e impares de un test.

Participantes Par X i Impar Yi NOTA: En el

ejemplo, en lugar de
X’ usaremos Y
1 8 4

2 7 7

3 8 6

4 5 4

5 8 7

6 6 6

Total 42 34

Calcular la fiabilidad utilizando la fórmula de Spearman-Brown.

Solución.

X i
42
x= i
= =7
N 6

Y i
34
y= i
= = 5, 67
5 6

N  X iYi −  X i   Yi
r= i i i

   
2
  
2

  i  i     i  i  
− −
2 2
N X X N Y Y
 i  i    i  i  
6(241) − (42)(34)
=
6(302) − ( 42 )2  6(202) − ( 34 )2 
  
= 0,35
1. Calcular el coeficiente de correlación
entre ambas mitades. Obtenemos que
vale 0,35 rXY = 0,35
2rXY 2*0,35
R XY = = = 0,52
2. Aplicamos la fórmula de corrección de
1 + rXY 1 + 0,35
Spearman-Brown. Obtenemos un valor de
0,52
10
 Unidad 3: Validación de Instrumentos

4.3 Coeficiente de confiablidad KR-20

Es una técnica para el cálculo de la confiabilidad de un instrumento aplicable sólo a
investigaciones en las que las respuestas a cada ítem sean dicotómicas o binarias, es decir, puedan
codificarse como 1 ó 0 (Correcto – incorrecto, presente – ausente, a favor – en contra, etc.)

La fórmula para calcular la confiabilidad de un instrumento de k ítems será:

k st 2 −  p.q
rtt = *
k −1 st 2
Donde,

rtt= Coeficiente de confiabilidad

K=número de ítems del instrumento.

p=personas que responden afirmativamente a cada ítem.

q=personas que responden negativamente a caca ítem.

st2= varianza total del instrumento

Ejemplo.

Matriz de datos de instrumento de 6 ítems aplicado a 15 unidades de estudio

__
x = 51/15 = 3, 4

st 2 = 23, 6 /15 = 1,57

k st 2 −  p.q
rtt = *
k −1 st 2

6 1,57 − 1,16
rtt = *
6 −1 1,57

𝑟 =0,31
tt

11