Confiabilidad

La confiabilidad es la seguridad, exactitud, precisión o consistencia que debe poseer los resultados. Para determinar el índice de confiabilidad de los resultados, se realizó a través del método de Alfa de Cronbach, se basa en la medición de la respuesta del sujeto con respecto a los ítems del instrumento. El índice de confiabilidad ideal es 1, difícil de alcanzar. Los índices de confiabilidad aceptables según Campo y Oviedo (2008) oscilan entre 0,70 y 0,90, como mínimo, es decir, decimales que tienden a acercarse a la unidad. Para su interpretación es necesario obtener algunos valores y articular la siguiente expresión:

Se aplica la medición y se calcula el coeficiente, donde:

K: Es el número de preguntas

ΣSi^2: Sumatoria de varianzas de los ítems.

ST^2: Varianza de la suma de los ítems.

α:Coeficiente de Alfa de Cronbach.

114

Procedimiento para calcular el índice de confiabilidad de la encuesta docente.

Paso 1. Se calcula las varianzas de cada uno de los ítems (Si^2). La varianza de P1 se determinó a través de una hoja de cálculo y dio 0,14 como la siguiente tabla.

Tabla 24

Resultados encuesta docente

Docente P1 P2 P3 P4 P5 P6

1 4 3 3 3 3 4

2 5 3 3 3 4 4

3 5 4 3 4 4 4

4 5 4 4 4 4 4

5 5 4 5 4 4 5

6 5 4 5 4 4 5

7 5 4 5 1 5 5

Si^2 0,14 0,24 1,00 1,24 0,33 0,29

Paso 2. Se suma la varianzas de los ítems. Σ Si^2 = 3,24

Paso 3. Calcular la varianza de la suma de los ítems. Primero se suman los ítems y después se determina su variación con Excel, como lo muestra la tabla 24 donde resume estas

operaciones.

Tabla 25

Sumatoria de los resultados por estudiante.

Total (T) 20 22 24 25 27 27 25

115 Donde, ST^2 = 6,57

Paso 4. Calcular el coeficiente de Alfa de Cronbach.

La encuesta tiene 6 preguntas por lo tanto K es igual a 6.

α = | | = 0,61

Paso 5. Interpretación del índice de α= 0,61; lo que significa que los resultados de opinión de los 7 docentes respeto a los ítems considerados según García (2006), presentan una

consistencia interna baja tratándose de investigaciones. Al analizar los datos se observa un valor atípico que da una desviación estándar alta, esta se puede bajar quitando ese valor atípico para obtener un nivel alto de confiabilidad de los resultados.

Procedimiento para calcular el índice de confiabilidad de un test comprensión lectora con preguntas cerradas de única respuesta. Para hallar el índice de confiablidad se sigue cada uno de los siguientes pasos:

Paso 1. Conversión binaria de los resultados como lo muestra la siguiente tabla 26. Para realizar una conversión de tipo binaria se usa la opción de respuesta correcta, si una respuesta se identifica con esta toma un valor de 1, mientras que cuando es diferente de esta toma valores de 0. Por ejemplo, la opción que marcó el estudiante 1 en la pregunta 1 es D y la respuesta correcta es D, la conversión binaria tomaría el valor de 1, pero en el caso del estudiante 2 en la misma pregunta la conversión sería a 0 puesto que marcó la opción B, siendo D la respuesta correcta.

116 Tabla 26

Resultados del test 1, prueba del caimán aguja.

Estudiante P1 P2 P3 P4 P5

E1 D B C C C

E2 B D B A C

E3 A D B A C

E4 D C B A C

E5 D C B C D

E6 D C B A C

E7 D C B C D

E8 D C B A C

E9 D C C C D

E10 D C C B D

E11 D C C C A

E12 A A D D C

E13 C B C D D

E14 D B C C C

E15 D A A C A

E16 A B B B A

E17 D A B B A

E18 D B B B D

E19 A B B B A

E20 B B B B A

E21 D B C C A

E22 D B C C A

E23 D B B B A

E24 A B B B A

E25 A B D B A

E26 D B D C A

E27 D B C C A

E28 A C C D C

E29 A D A B A

E30 A B B B A

Respuestas D A C C D

La tabla 27 resume los resultados de la conversión binaria.

117 Tabla 27

Conversión binaria de los resultados del test 1, prueba del caimán aguja.

Estudiante 1 2 3 4 5 ∑

Respuestas Ei

E1 1 0 1 1 0 3

E2 0 0 0 0 0 0

E3 0 0 0 0 0 0

E4 1 0 0 0 0 1

E5 1 0 0 1 1 3

E6 1 0 0 0 0 1

E7 1 0 0 1 1 3

E8 1 0 0 0 0 1

E9 1 0 1 1 1 4

E1 0

1 0 1 0 1 3

E1 1

1 0 1 1 0 3

E1 2

0 1 0 0 0 1

E1 3

0 0 1 0 1 2

E1 4

1 0 1 1 0 3

E1 5

1 1 0 1 0 3

E1 6

0 0 0 0 0 0

E1 7

1 1 0 0 0 2

E1 8

1 0 0 0 1 2

E1 9

0 0 0 0 0 0

E2 0

0 0 0 0 0 0

E2 1

1 0 1 1 0 3

E2 2

1 0 1 1 0 3

E2 3

1 0 0 0 0 1

E2 4

0 0 0 0 0 0

E2 5

0 0 0 0 0 0

E2 6

1 0 0 1 0 2

E2 7

1 0 1 1 0 3

E2 8

0 0 1 0 0 1

E2 9

0 0 0 0 0 0

E3 0

0 0 0 0 0 0

T Aciertos

18 3 10 11 6

Paso 2. Determinar el porcentaje de aciertos (p) y desaciertos (q) por ítem. El total de aciertos indica la cantidad de estudiantes que marcaron correctamente la pregunta. Para determinar el porcentaje de aciertos (p) se divide el número de aciertos entre el total de

estudiantes. El porcentaje de desaciertos (q) se determina restando el porcentaje de aciertos (p) a 1, ya que estos dos porcentajes deben sumar 1 o representan el 100%. Después se multiplican estos porcentajes para correlacionarlos (p*q). Véase siguiente tabla.

118 Tabla 28

Cálculo de porcentajes de aciertos y desaciertos

Total Aciertos

18 3 10 11 6

P 0,60 0,10 0,33 0,37 0,20 Q 0,40 0,90 0,67 0,63 0,80 pi*qi 0,24 0,09 0,22 0,23 0,16

Paso 3. Determinar la sumatoria de la correlación entre porcentajes de aciertos y desaciertos de cada ítem.

∑ = 0,94

Paso 4. Determinar la varianza promedio de los resultados por estudiante. Este proceso no se puede hacer directamente porque Excel generalmente no tiene en cuenta las celdas con valor de 0, para ello se determina la sumatoria del porcentaje de aciertos (p) de todos los ítems, se usa este valor como constante para hallar la desviación estándar de los resultados por estudiantes.

∑

La desviación estándar (σx) se determina restando la constante anterior a la sumatoria de los resultados por estudiante.

σx= ∑ – ∑

La fórmula anterior se aplica en la tabla 29 para determinar la desviación estándar (σx), después de hallar la desviación se halla la varianza (σx ^2), elevando simplemente la desviación estándar al cuadrado.

119 Tabla 29

Resumen del cálculo de la desviación estándar y varianza de los resultados por estudiantes.

∑

Desv (σx) (σx )^2 3 (1,40) 1,96 0 1,60 2,56 0 1,60 2,56 1 0,60 0,36 3 (1,40) 1,96 1 0,60 0,36 3 (1,40) 1,96 1 0,60 0,36 4 (2,40) 5,76 3 (1,40) 1,96 3 (1,40) 1,96 1 0,60 0,36 2 (0,40) 0,16 3 (1,40) 1,96 3 (1,40) 1,96 0 1,60 2,56 2 (0,40) 0,16 2 (0,40) 0,16 0 1,60 2,56 0 1,60 2,56 3 (1,40) 1,96 3 (1,40) 1,96 1 0,60 0,36 0 1,60 2,56 0 1,60 2,56 2 (0,40) 0,16 3 (1,40) 1,96 1 0,60 0,36 0 1,60 2,56 0 1,60 2,56

Finalmente se determina la variación promedio de los resultados por estudiante, para esto se suman los valores de la columna (σx )^2 y se dividen entre el total de estudiantes evaluados.

̅̅̅̅̅ = ( ∑ ) / 30 = 1,71

Calcular el coeficiente de Alfa de Cronbach.

120

El test consta de 5 preguntas por lo tanto K es igual a 5

α =

|

| =

^0,56

Paso 5. Interpretación del índice de α= 0,56, este indicador permite afirmar que el instrumento tiene un nivel de confianza regular, el instrumento no presenta una índice de

confiabilidad deseado, mostrando una correlación pobre. Este indicador en porcentaje es de 56%, demostrando que el instrumento tiene un nivel de confianza intermedio apropiado para este tipo de investigación según García (2006).

Procedimiento para calcular el índice de confiabilidad de un test comprensión lectora con preguntas abiertas. Este procedimiento se identifica para el test 3 en la prueba del cuento de los tres consejos. El cálculo de este indicador, se efectúa de igual manera, pero los resultados no se expresan en conversión binaria, se califican de acuerdo al juicio del evaluador.

Para aprobar una pregunta el alumno debe obtener más del 60% de su valor máximo. El valor superior se determinó para calificar los resultados dentro de una escala de 0 a 10 con 6 preguntas, por lo cual cada pregunta tiene el valor máximo de 1,66.

El juicio del evaluador se define en 3 decisiones, el cuál puede calificar una pregunta como mala, regular o buena. A esto juicios se le asignó un valor cuantitativo para determinar si un estudiante aprueba o no aprueba la pregunta, tal como lo dice la siguiente tabla.

Tabla 30

Ponderación de resultado

Malo 0 0%

Regul ar

1 60%

Bueno 1,66 100

%

121

Siguiendo el mismo procedimiento que se determinó en el test 1, se obtuvo la tabla 9, los resultados superiores a 1 se consideran admisibles, otro aspecto que diferencia este proceso del procedimiento anterior es el cálculo del puntaje en una escala de 1 a 5 para considerarlo como base y determinar la desviación estándar y la varianza de los resultados por estudiante.

Tabla 31

Cálculos para determinar el nivel de confianza en el test 3.

Estudiante P

1

P 2

P 3

P 4

P 5

P 6

Puntaje (1-10)

Puntaje (1-5)

Desviación Desv^2

E1 1,66 1 1,66 0 1 1,66 7 3,5 0,37 0,13

E2 1 1,66 1 1,66 1,66 1 8 4 (0,13) 0,02

E3 1 0 1,66 0 0 1 4 2 1,87 3,48

E4 1,66 1 1,66 1 1,66 1 8 4 (0,13) 0,02

E5 1 0 1 1 1,66 0 5 2,5 1,37 1,87

E6 1 0 0 1 0 1 3 1,5 2,37 5,60

E7 1 1,66 1 1,66 1 1,66 8 4 (0,13) 0,02

E8 1,66 1 1 1 1 1 7 3,5 0,37 0,13

E9 1 0 1,66 1,66 1,66 1,66 8 4 (0,13) 0,02

E10 1,66 1 1 1 0 1 6 3 0,87 0,75

E11 1 1 1 1 1 1 6 3 0,87 0,75

E12 1 0 1 1,66 1,66 7 5 0,37 0,13

E13 1 1 1,66 0 1,66 1,66 7 3,5 0,37 0,13

E14 1 0 1,66 0 1 1 5 2,5 1,37 1,87

E15 1 1,66 0 1,66 1,66 0 6 3 0,87 0,75

E16 1 1,66 1,66 0 1 1,66 7 3,5 0,37 0,13

E17 0 1 1 0 0 0 2 1 2,87 8,22

E18 1 0 1 0 1 1,66 5 2,5 1,37 1,87

E19 1 0 0 0 1 1 3 1,5 2,37 5,60

E20 1 1,66 1 1 1 1 7 3,5 0,37 0,13

E21 1 0 1,66 1,66 1 1,66 7 3,5 0,37 0,13

E22 1 1 1 1 1 1 6 3 0,87 0,75

E23 1 1 0 0 1 1 4 2 1,87 3,48

E24 1,66 1 1 0 1 1 6 3 0,87 0,75

E25 1,66 1 1 1 0 0 5 2,5 1,37 1,87

E26 1,66 1 0 1 1 1

6

3 0,87 0,75

E27 1 1 1 0 1 1,66 6 3 0,87 0,75

E28 1 0 1 1 1,66 1,66 7 3,5 0,37 0,13

E29 1,66 1 1,66 1 1 1,66 8 4 (0,13) 0,02

E30 1 1 0 1 0 1 4 2 1,87 3,48

122

Siguiendo el mismo procedimiento del cálculo del índice de confiabilidad del test 1 se logra determinar que este indicador equivale a 0,53, es decir que el instrumento tiene un índice de confiabilidad de 53%.

Test 1: α= 0, 56. Esto significa que los resultados tienen una consistencia interna regular, y un 56% de confiabilidad de la prueba.

Test 2: α= 0, 13. Significa que los resultados de éste test tiene una consistencia interna débil y un 13% de confiabilidad del test y que por lo tanto debe ser revisado.

Test 3: α= 0, 53. Significa que los resultados de éste test tiene una consistencia interna débil y un 53% de confiabilidad del test ser reestructurado.

4.4.2 Validez: En cuanto a la validez, hace referencia a que un instrumento realmente

In document variación de la comprensión lectora al usar textos (página 112-121)