Cómo se mide el acuerdo y el desacuerdo
Los coeficientes disponibles miden el grado de acuerdo o desacuerdo entre distintos codificadores. A partir de esta medida se puede inferir la fiabilidad, pero los coeficientes no la miden directamente. Por lo tanto: lo que se mide es el acuerdo intercodificadores y no la fiabilidad intercodificadores.
El acuerdo es lo que medimos; la fiabilidad es lo que inferimos de él.
Supongamos que se entrega un texto a dos codificadores para que lo codifiquen siguiendo las instrucciones proporcionadas. Una vez finalizado, entregan el siguiente registro de su codificación:
-
En el primer par de segmentos hay acuerdo en cuanto a longitud y ubicación (acuerdo: 10 unidades).
-
En el segundo par coinciden en la longitud pero no en la ubicación. Hay acuerdo en la intersección de los datos (acuerdo: 12 unidades, desacuerdo: 2 + 2 unidades).
-
En el tercer par, el codificador "A" considera relevante un segmento que el codificador "B" no reconoce (desacuerdo: 4 unidades).
-
El mayor desacuerdo se observa en el último par de segmentos. El codificador "A" adopta una visión más estrecha que el codificador "B" (acuerdo: 4 unidades, desacuerdo: 6 unidades).
En cuanto a la codificación en ATLAS.ti, es necesario concebir el documento como un continuo textual. Cada carácter del texto es una unidad de análisis para la ICA, comenzando en el carácter 1 y terminando, por ejemplo, en el carácter 17.500. Para documentos de audio y vídeo, la unidad de análisis es el segundo. Las imágenes no pueden utilizarse actualmente en un análisis ICA.
La cita en sí no entra en el análisis, sino los caracteres o segundos que han sido codificados. En otras palabras, si cada codificador crea citas, no supone un desacuerdo total que no hayan seleccionado exactamente el mismo segmento. La parte de las citas que se superpone entra en el análisis como acuerdo; las demás partes, como desacuerdo.
Otra opción es trabajar con citas predefinidas, de modo que los codificadores solo necesiten aplicar los códigos. Para más información, consulte Configuración del proyecto.
Es posible probar el acuerdo intercodificadores en documentos de texto, audio y vídeo. Los documentos de imagen no son compatibles. Esto también se aplica a las citas de imagen en documentos PDF de texto.
Ejemplo de aplicación
Why are many business instilling a DevOps culture into their organization? escrito por: Jessica Diaz, Daniel López-Fernández, Jorge Perez y Ángel González-Prieto.