Skip to main content

 

Control de calidad

El Proyecto de Opinión Pública de América Latina (LAPOP) ha sido durante mucho tiempo un pionero en innovaciones en la investigación por muestreo. Desde su desarrollo y uso inicial de entrevistas cognitivas, hasta su atención a los matices entre países y dentro de los países en el uso del lenguaje, LAPOP siempre se ha esforzado por maximizar la comprensión de sus preguntas, incluso entre las poblaciones más pobres y menos educadas. Nuestra capacidad para innovar ha aumentado exponencialmente debido a la amplia disponibilidad de tabletas y teléfonos inteligentes de bajo costo con conexión a internet, lo que permite descargar en tiempo real en el campo nuevas versiones de cuestionarios, la ubicación geográfica exacta de las entrevistas usando tecnología GPS y la carga en tiempo real de las entrevistas completas a servicios Web. Una vez allí, se ponen disponibles simultáneamente tanto para las oficinas locales y como para LAPOP en Vanderbilt, de esta forma pueden realizarse auditorías inmediatas de la calidad de cada entrevista. En la ronda 2016/17 del Barómetro de las Américas, llevamos a cabo importantes avances en el uso de dispositivos electrónicos para la recolección de datos en el campo. Se desplegaron dispositivos móviles Android para la recolección de datos en todos los países del Barómetro de las Américas en América Latina y el Caribe; como siempre, los estudios en EE. UU. y Canadá se realizaron a través del Internet debido a los altos costos de las entrevistas cara a cara en dichos países. Con la excepción de Haití, donde aproximadamente el 50% de las entrevistas se realizaron con cuestionarios impresos, todas las encuestas se realizaron a través de dispositivos móviles con conexión a Internet. En la ronda 2016/17, utilizamos el software SurveyToGo © (STG) (aplicación y plataforma Web) para asignar a los entrevistadores ubicaciones precisas para la realización de entrevistas basadas en el diseño de muestra de cada país, para administrar y controlar la selección del encuestado y rastrear la falta de respuesta; así como también, para realizar entrevistas utilizando controles de rango de respuesta y saltos para maximizar la integridad de la respuesta. El uso de dispositivos electrónicos para la realización de entrevistas y el ingreso de datos en el campo reduce los errores al momento de digitar los datos, permite el cambio con un solo clic entre múltiples idiomas en entornos multilingües, y permite a los equipos de control de calidad seguir el progreso del trabajo de campo a diario, mediante el monitoreo de la ubicación de las entrevistas, la lectura correcta de las preguntas y el tiempo de duración de las entrevistas. Como parte de nuestro paquete integrado de controles que llamamos algoritmo de trabajo de campo para el control de LAPOP sobre las operaciones y normas de la encuesta (FALCON ©, por sus siglas en inglés), hemos desarrollado una serie de avances tecnológicos que mejoran la calidad de los datos del Barómetro de las Américas en tiempo real. Si bien el control de calidad se ha realizado tradicionalmente de forma post-hoc, una vez que se completa el trabajo de campo, LAPOP monitorea y corrige los problemas a medida que surgen mientras la encuesta aún se encuentra en el campo. Para una evaluación detallada de las mejoras en el control de calidad que provienen de este enfoque, consulte Evaluación y mejora de la calidad de la entrevista en el Barómetro de las Américas 2016/17 . Consulte a continuación para obtener información detallada sobre varios de estos avances.

Módulo de geo-cerca

El módulo de geo-cerca de LAPOP asegura que los entrevistadores se encuentren en el área de trabajo asignada a través de la creación de una serie de círculos ubicados alrededor de los segmentos censales o municipios seleccionados (que son las áreas geográficas locales usadas como Unidades Primarias de Muestreo). Usamos tres elementos para construir las geo-cercas: “shapefiles”, centroides, y radios. 

LAPOP obtiene los “shapefiles” (archivos que guardan la ubicación, formas y atributos de las áreas geográficas en forma de polígonos) de las oficinas de censo y/o sitios web abiertos. Con estos archivos, usamos ArcGIS para calcular las coordenadas de GPS para cada centroide de los polígonos. Luego dibujamos una circunferencia alrededor de los municipios seleccionados o, idealmente, segmentos censales. El módulo de geo-cerca alerta a los entrevistadores sí estos se encuentran fuera del límite de la cerca, así como también, alerta al equipo de control de calidad. Todas las entrevistas realizadas fuera de la cerca, mediante el uso de un algoritmo desarrollado por LAPOP, se programan en el software de recopilación de datos. Tan pronto se completa cada entrevista, los resultados se almacenan automáticamente en un servidor, sin la intervención del entrevistador, a través de la señal de datos del celular o Wi-Fi. Con este proceso, los supervisores y entrevistadores son notificados rápidamente si las entrevistas ocurren en el lugar equivocado, para así tomar los pasos necesarios para corregir el problema.

Módulo de auditoría de la distancia

El módulo de auditoría de la distancia (MAD) de LAPOP nos permite establecer la distancia entre el entrevistador y el borde de la geo-cerca. Cada vez que una entrevista es almacenada, el equipo encargado del monitoreo del trabajo de campo puede determinar inmediatamente si una entrevista se realizó en el lugar correcto, y si no, si la infracción es mayor o menor. El MAD provee información sobre la distancia en kilómetros entre la ubicación del entrevistador y el punto más cercano de la circunferencia alrededor del segmento censal o municipio (específicamente, el límite de la geo-cerca). Un número negativo indica que la entrevista se realizó dentro de la frontera de la cerca. Un número positivo indica una ubicación equivocada.

Verificación de la consistencia de la ubicación

El módulo de auditoría de la distancia (MAD) de LAPOP nos permite establecer la distancia entre el entrevistador y el borde de la geo-cerca. Cada vez que una entrevista es almacenada, el equipo encargado del monitoreo del trabajo de campo puede determinar inmediatamente si una entrevista se realizó en el lugar correcto, y si no, si la infracción es mayor o menor. El MAD provee información sobre la distancia en kilómetros entre la ubicación del entrevistador y el punto más cercano de la circunferencia alrededor del segmento censal o municipio (específicamente, el límite de la geo-cerca). Un número negativo indica que la entrevista se realizó dentro de la frontera de la cerca. Un número positivo indica una ubicación equivocada.

Auditoría multi-nivel

LAPOP implementó un proceso de control de calidad multi-nivel para el trabajo de campo para los estudios de 2016/17. Además de las verificaciones mencionadas arriba, programamos SurveyToGo para que grabe, en forma silenciosa, un conjunto aleatorio de preguntas a lo largo de cada entrevista (todos los entrevistados son informados antes de que comience la entrevista sobre la grabación de secciones del trabajo del entrevistador para propósitos de control de calidad). Los equipos de campo escuchan las grabaciones del 100% de las entrevistas para asegurarse de que los entrevistadores estén cumpliendo con las mejores prácticas de entrevista. Los auditores anotan el número y naturaleza de los errores usando el Quality Assurance Chapter (QAC) de LAPOP. Las entrevistas con muchos errores, basadas en un sistema de puntuación que hemos desarrollado, son canceladas y luego reemplazadas por los equipos de trabajo de campo. Un equipo del segundo nivel de control de calidad, escucha una muestra aleatoria de estas grabaciones para garantizar la calidad de las entrevistas y la calidad de la auditoría realizada por los equipos de campo. Este sistema permite proveer retroalimentación de calidad s a los entrevistadores y los supervisores de campo a medida que la encuesta se desarrolla en tiempo real, corrigiendo errores en la implementación del estudio al inicio del trabajo de campo, cancelando y reemplazando las entrevistas de baja calidad, y dando el reconocimiento debido al trabajo de alta calidad.