Page 1

TRABAJO DE CAMPO Postítulo Opinión Pública Universidad Diego Portales Juan Pardo Noviembre 2007


¿QUÉ ES TRABAJO DE CAMPO? El trabajo de campo debe ser entendido como el proceso global mediante el cual se organizan todas las tareas involucradas para la recolección efectiva de los datos.


EL TRABAJO DE CAMPO EL PROBLEMA DE LAS NO RESPUESTAS


¿QUÉ ES NO RESPUESTA?

La no respuesta puede ser descrita como el fracaso para medir en la encuesta a una unidad de la muestra

Es un fenómeno que sólo ocurre en la fase de obtención de la muestra

Es distinta a la no respuesta de ítem, que consiste en la falla para obtener una respuesta a un ítem dado

A continuación revisaremos algunos ejemplos de como han evolucionado en otros países las cifras de No respuesta


BLS CONSUMER EXPENDITURE SURVEY NONRESPONSE AND REFUSAL RATES

•

Fuente: Tourangeau, Roger; Survey Nonresponse: A Decision-Making Approach Joint Program in Survey Methodology, University of Maryland, Survey Research Center, University of Michigan


UNTIL RECENTLY, CURRENT POPULATION SURVEYS RATES HAD BEEN STABLE

•

Fuente: Tourangeau, Roger; Survey Nonresponse: A Decision-Making pp Joint Program g in Surveyy Methodology, gy Universityy of Approach Maryland, Survey Research Center, University of Michigan


NATIONAL HEALTH INTERVIEW SURVEY NONRESPONSE TRENDS

•

Fuente: Tourangeau, Roger; Survey Nonresponse: A Decision-Making pp Joint Program g in Surveyy Methodology, gy Universityy of Approach Maryland, Survey Research Center, University of Michigan


ALSO APPARENT FOR TELEPHONE SURVEYS: SURVEY OF CONSUMER ATTITUDES

•

Fuente: Tourangeau, Roger; Survey Nonresponse: A Decision-Making pp Joint Program g in Surveyy Methodology, gy Universityy of Approach Maryland, Survey Research Center, University of Michigan


EXPECTED PROPORTION NONCONTACTED AND REFUSED UNDER DELEEUW & DEHEER MODEL BY YEAR

De Leeuw, E. D., & De Heer, W. (2002). Trends in household survey nonresponse: A longitudinal and international comparison. comparison In R R. M M. Groves, D. A. Dillman, J. L. Eltinge, & R. J. A. Little (Eds.), Survey nonresponse (pp. 41–54). New York: Wiley.


IMPACTO SOBRE LOS COSTOS POR CASO En la medida que se toman más precauciones para disminuir los sesgos de la no respuesta los costos se incrementan considerablemente: •

En casos especiales, se sugiere enviar por adelantado una carta informativa solicitando li it d cooperación. ió Para P grandes d estudios t di de d carácter á t estratégico, t té i que pueden llegar a involucrar recursos millonarios, se sugiere ocupar intensivamente los medios de comunicación masiva (Censo, CASEN, etc.)

En otros casos, se ha hecho extensivo el uso de incentivos, de preferencia económicos, ó i para fomentar f t la l cooperación ió

En el caso de las encuestas telefónicas, han aumentado sensiblemente el número de llamadas que debe realizarse para conseguir casos válidos

g países como Estados Unidos,, p p parece claro q que los costos de encuestas se En algunos están incrementando más rápido incluso que la inflación


TRES FORMAS DE NO RESPUESTA

No hay contacto

No hay cooperación

El sujeto no aplica o no está habilitado


NO HAY CONTACTO •

Barreras de entrada para las encuestas cara a cara: porteros de edificios y comunidades, condominios cerrados, servicio doméstico

En las encuestas telefónicas, las barreras de entrada pueden ser: presencia de máquinas contestadoras, identificadores de llamadas, caída en la penetración de telefonía residencial (celulares)


INHABILIDAD PARA PROVEER DATA •

Es el reflejo de limitaciones físicas y/o mentales, así como eventuales barreras de lenguaje • Aumento de la población mayor de 65 de años • Incremento concomitante de problemas auditivos y otras enfermedades

En algunas zonas (Santiago Centro, Independencia, etc.), el incremento de la población inmigrante es una dificultad adicional para lograr la muestra


FALTA DE COOPERACION •

Sin embargo, el mayor problema sigue siendo la falta de cooperación (rechazo)

Algunas teorías explican este fenómeno como una tendencia social, otras se basan en las características personales de los sujetos, y aunque los niveles de análisis son diferentes, el mecanismo causal en ambas teorías es similar

Hay tres razones ampliamente citadas en la literatura: • • •

Las personas están demasiado ocupadas Las personas están demasiado aisladas personas construyen y barreras p para contactos no deseados Las p


PERSONAS DEMASIADO OCUPADAS / AISLADAS / EVITAN CONTACTO NO DESEADO •

Aumento relativo de la fuerza laboral

Cambios especialmente dramáticos entre las mujeres, que aumentan participación en la fuerza de trabajo

El costo - oportunidad para participar como sujeto de encuesta es demasiado alto (tendencia social con impacto a nivel individual)

Algunas veces no se trata que las personas están más ocupadas, sino que simplemente no están dispuestas a dar parte de su tiempo libre disponible

De acuerdo a una hipótesis de capital social, las tasas de respuesta caen por la misma razón que declinan las votaciones y otras formas de participación cívica: las personas se sienten menos obligadas, simplemente están menos interesadas en ayudar a otros


EL TRABAJO DE CAMPO


EL TRABAJO DE CAMPO

El trabajo de campo de una encuesta debe ser entendido como el proceso global que se organiza para el logro de los siguientes objetivos: •

Prueba de instrumentos (piloto, pretest)

Selección de equipos (encuestadores, supervisores, coordinadores, digitadores)

Capacitación de los equipos

Supervisión de los equipos

Organización del flujo de trabajo

Digitación y verificación

Nóminas de pago


EL TRABAJO DE CAMPO •

Los aspectos p más relevantes para p el desarrollo de la recogida g de la información son: •

Planificación del Trabajo de Campo

Selección de los Entrevistadores

Selección de los individuos a entrevistar

Estar atento a los errores en el trabajo de campo • Errores asociados a la mala selección de los entrevistados o a su no respuesta • Errores de administración del cuestionario, cuestionario propios de las preguntas o de la forma de ejecución de la entrevista

Capacitación de los entrevistadores

Supervisión o control del trabajo de campo


EL TRABAJO DE CAMPO •

¿El instrumento está validado? (aprobado por el mandante, mandante testeado, testeado revisado, revisado etc.) etc )

¿Está listo el instrumento? (impreso, compaginado, corcheteado, foliado)

¿Todos los encuestadores conocen el contenido del cuestionario?

¿El equipo de campo tiene un cronograma propio bien delimitado?

Aprovechar los fines de semana (mayor probabilidad de encontrar a todos los entrevistados t i t d potenciales; t i l se reduce d ell sesgo d de sobre b representación t ió d de mujeres, j estudiantes y jubilados). En días de semana, limitar el trabajo de campo a horarios vespertinos

El flujo de materiales

Validación de oficina (marcas formales, datos claves)


EL ROL DE LOS ENCUESTADORES


EL ROL DE LOS ENCUESTADORES

(1/5)

La vieja pregunta: ¿cuánto pagan?

¿Cuál es el perfil ideal de los encuestadores? (cada técnica requiere habilidades específicas)

Aunque lleven 20 años, siempre hay que capacitarlos

Tipos de encuestadores según tipos de universos

Evitar a los “ocasionales”

Normas claras y universales conocidas anticipadamente


EL ROL DE LOS ENCUESTADORES

(2/5)

Los encuestadores son agentes claves en la recolección de datos. Ellos son el nexo vital entre el diseño de escritorio de los investigadores, los informantes (el grupo objetivo) y la calidad de los datos (las respuestas de los entrevistados).

Como en la mayoría de los equipos, hay fluctuaciones importantes en el éxito que logran los encuestadores en el desempeño de su trabajo. Estos niveles de éxito difi difieren básicamente bá i en lla calidad lid d d de llos datos d recolectados l d y la l tasa de d respuesta lograda.

En algunos casos específicos, es recomendable que los encuestadores conozcan solo los términos generales de un estudio. estudio El desconocimiento de los fines asegura mejor la espontaneidad al preguntar, la anotación verídica de las respuestas, así como la renuncia a investigar por cuenta propia formulando preguntas no incluidas en la cédula; esto de alguna manera resguarda la neutralidad de la encuesta.

Sin embargo, la mayoría de las veces, el encuestador necesita al menos una información general sobre los objetivos de la encuesta, ya que mediantes éstos debe elaborar una serie de argumentos objetivos para enfrentarse y explicar la finalidad de la encuesta, seguro y convencido, a las personas que debe entrevistar.


EL ROL DE LOS ENCUESTADORES

(3/5)

El E Encuestador d d debe b ser M Meticuloso i l •

El encuestador debe ser capaz de seguir minuciosamente todas las instrucciones que se le entreguen para asegurar una correcta y objetiva aplicación del instrumento, e integridad de su trabajo, así como también la uniformidad del método.

El encuestador debe ser meticuloso, es decir, debe tener una alta disposición a seguir "al pie de la letra" incluso aquellas instrucciones que parecen ser caprichosas, absurdas o complicadas (en particular, todas aquellas instrucciones para la selección de las personas en una muestra representativa).


EL ROL DE LOS ENCUESTADORES

(4/5)

El Encuestador debe mostrar Interés y “Ganarse” al Entrevistado •

Uno de los aspectos claves del trabajo de campo lo constituye la función de contacto, es decir, la relación humana que el encuestador establece con el entrevistado en cada situación, desde el momento en que se enfrenta a la persona seleccionada y la induce a participar p p en el estudio con sus respuestas. p

ƒ

La primera impresión, en el momento en que la relación convencional entre extraños debe ser superada, es decisiva. Para esto, en términos generales, algunas de las cualidades que debe mostrar un encuestador son : Aspecto sano, tranquilo, seguro, formal, sincero, alegre, interesado, limpio, cuidado y natural.

En el fondo, se trata de todas aquellas cosas que aseguren que el encuestador ha de relacionarse lo más espontáneamente posible con aquel que ha sido sorteado, sorteado ganándose su simpatía y creando una atmósfera de entrevista agradable.


EL ROL DE LOS ENCUESTADORES

(5/5)

El Encuestador debe tener Capacidad de Resistencia Moral •

En todo trabajo de campo es necesaria una alta dosis de tenacidad en la superación de obstáculos tales como los rechazos a la encuesta o la ausencia reiterada de las personas que deben ser entrevistadas. q

Por otra parte, el trabajo del encuestador tiene que llevarse a cabo principalmente durante el tiempo libre, o bien en los fines de semana, cuando la mayoría de las personas descansa o de dedica a sus entretenciones. entretenciones

Sin embargo, por Capacidad de Resistencia Moral, también debe ser entendida la "Honradez", ya que en la fase decisiva -al seleccionar y entrevistar a la persona- el encuestador trabaja solo, debiendo observar incómodas y precisas instrucciones.


LA SUPERVISIÓN Ó


LA SUPERVISIÓN (1/7) •

Organizar la desconfianza (no importa cuanto conozcas a tus encuestadores)

Evitar cercanía física cotidiana entre encuestadores y supervisores

Capacitar a los supervisores (no siempre saben lo que tienen que saber y lo que uno supone que saben)

Rotar roles en supervisión (oficina / teléfono / cara a cara)

Supervisar la supervisión (¿cómo puedo estar seguro que están supervisando?)


LA SUPERVISIÓN

(2/7)

¿Cuánto Supervisar? •

Es recomendable establecer de antemano un piso mínimo de supervisión. supervisión Como norma, la proporción mínima de encuestas a supervisar en el lugar donde se desarrolla un estudio debería ser de un 20%. Del total de encuestas recibidas y previamente aprobadas en la revisión de sala (Supervisión de Oficina) se debe seleccionar al azar la proporción requerida.

El porcentaje de encuestas supervisadas contemplará a todos los encuestadores en todas las comunas y/o zonas operativas (conglomerados de la muestra). Como una forma de asegurar una adecuada supervisión de cada uno de los encuestadores, se debe intentar una revisión del trabajo individual en una proporción equivalente.

La supervisión debe realizarse en función del orden de llegada del material, privilegiando i il i d llas comunas cuya cuota t d de encuestas t crezca con mayor rapidez. id P Para esto, se deberá resguardar que la supervisión de cada uno de los encuestadores sea distribuida a lo largo del desarrollo del trabajo de campo, para lo cual debe considerarse la productividad diaria de cada uno de los individuos.


LA SUPERVISIÓN

(3/7)

Consistencia Sustantiva •

En general, la opinión de los entrevistados presenta cierta regularidad que puede verse reflejada en algunas preguntas claves de las encuestas de opinión; en el caso de las encuestas políticas: intención de voto presidencial, votación en la última elección presidencial (consistencia del voto), posicionamiento político, etc.

Si la revisión de mesa denotará un patrón de respuestas errático o confuso en un entrevistado, su encuesta deberá ser considerada con especial atención en la fase de supervisión en terreno. Sin embargo, es necesario tener en cuenta que normalmente en la mayoría de las encuestas que indagan sobre política existe cierto margen de respuestas cruzadas (i.e. intención de voto presidencial para un candidato diferente del partido tid político líti con ell cuall simpatiza). i ti ) Por P lo l tanto, t t all d detectar t t iinconsistencias i t i es necesario profundizar en el chequeo de todas las respuestas.

De la misma forma, entrevistas con altos porcentajes de respuestas "no sabe" o "no responde", también deben ser especialmente consideradas en la fase de supervisión responde de campo. Este tipo de entrevistas puede identificar a malos encuestadores, que sin ser deshonestos, no se esfuerzan por conseguir una respuesta a las preguntas (no sondean), lo que finalmente tiene una incidencia importante en la calidad de los datos. Por esta razón, y cuando la evidencia sea suficiente, es conveniente que esta clase de encuestadores sea separado del equipo de campo.


LA SUPERVISIÓN

(4/7)

Aspectos Formales Entre los aspectos a considerar en una supervisión rigurosa, se encuentran una serie de detalles formales, de los cuales se enumeran a continuación los más relevantes: •

Presentación de las encuestas: Cada cédula de entrevista está sujeta a un manejo por parte del encuestador que la hace aparecer manoseada y algo "avejentada". Por tanto, debe concentrarse la atención sobre todas aquellas cédulas que aparezcan demasiado pulcras l y li limpias, i sin i apariencia i i de d h haber b estado d en una situación i ió d de entrevista. i

Letra del encuestador: En general, el registro de las preguntas -tanto abiertas como cerradas- mantiene cierta regularidad a través de todo el instrumento. Cuando los encuestadores "rellenan" preguntas con posterioridad a la situación de entrevista, el cambio bi en lla presión ió d dell lápiz, lá i ell orden d d de la l lletra, t e iincluso l lla circulación i l ió ((marca)) d de códigos, pueden cambiar notoriamente.

Lápiz de registro: No existe ningún motivo justificado para que un encuestador aplique la entrevista con lápices de distinto color, color o tono de un color determinado determinado, especialmente cuando sólo una parte de la cédula está registrada con algún color distinto al usado mayoritariamente en el cuestionario.


LA SUPERVISIÓN

(5/7)

Supervisión de Terreno ƒ

Una vez realizada la revisión de sala (supervisión de oficina), cada supervisor deberá trazar una ruta de supervisión lo más eficiente posible, evitando visitar lugares peligrosos sin compañía o con posterioridad a la puesta de sol. En terreno, los aspectos fundamentales en los que debe concentrarse la supervisión son los siguientes:

ƒ

Aplicación de la Encuesta en la Vivienda señalada por la Muestra: El supervisor debe verificar tanto la existencia de la vivienda consignada en la cédula de entrevista, como que ésta é corresponda a la dirección ó sorteada por la muestra. Encuestas realizadas en direcciones que no aparecen en la hoja muestral deben ser rechazadas.

ƒ

Clasificación Socioeconómica: El supervisor debe verificar que la clasificación socioeconómica establecida en el cuestionario se ajusta a los criterios entregados a los encuestadores en la fase de instrucción. La detección de éste tipo de errores de clasificación debe ser comunicada al Jefe de Campo para que adopte las medidas pertinentes.


LA SUPERVISIÓN

(6/7)

Supervisión de Terreno ƒ

Selección Probabilística de los Individuos. Una vez localizada la dirección, el supervisor debe establecer contacto con algún residente en el domicilio que pueda proporcionarle los datos necesarios para chequear el procedimiento de selección probabilística de los individuos elegibles. Idealmente el supervisor tratará de contactar al "Jefe de Hogar" o bien otra persona que pueda proporcionar datos confiables (nunca personal de servicio doméstico).

ƒ

Aquí debe verificar la composición del grupo familiar al cual pertenece el entrevistado, rehaciendo la pregunta correspondiente a un adulto responsable. Resulta indispensable rehacer esta pregunta considerando las "acomodaciones" (ubicación en el listado) de los integrantes g del grupo g p familiar se hace con la complicidad p del entrevistado,, en algunos g casos.

ƒ

Como criterio básico y permanente, controle especialmente la cantidad de personas mayores de 18 años inscritas en los registros electorales, su edad exacta al momento de la entrevista, y que se encuentren anotados en la portada de la cédula en el orden correspondiente (de mayor a menor edad).


LA SUPERVISIÓN

(7/7)

Supervisión de Terreno ƒ

Si la estructura familiar resulta ser distinta a la registrada en la cédula, determine quién debe ser entrevistado y rehaga la entrevista si la persona se encuentra presente. En caso contrario, informe de la situación al jefe de terreno y verifique posteriormente que la entrevista fue realizada de acuerdo a las normas del trabajo de campo.

ƒ

Adicionalmente, en un caso como éste, el supervisor deberá determinar si se trata de un error derivado de la información que se le entrego al encuestador en el momento de realizar la entrevista, o si actuó de manera deshonesta en conciencia.

ƒ

Control General. Luego de verificar la composición del grupo familiar, solicite hablar con la persona que figura como entrevistada y controle los siguientes ítems: • • • • •

ƒ

Duración ó de la entrevista. Temas tratados. Actividad principal del entrevistado. Edad. Verifique al azar algunas de las preguntas al interior de la cédula.

Puede ocurrir que la persona entrevistada no se encuentre en esos momentos, de ser así verifique la mayor cantidad de aspectos posibles con una persona responsable e integrante g del hogar g seleccionado.


RESUMEN: EL TRABAJO DE CAMPO ƒ El trabajo de los encuestadores es clave “si quieres pagar con maní

obtienes monos” – “Hay que sospechar de las encuestas baratas; una buena encuesta siempre será cara cara”

ƒ Más supervisión, mejores resultados “en todas las encuestas

existen múltiples fuentes de error” – “Hasta los mejores encuestadores pueden hacer un mal trabajo”

ƒ La combinación perfecta: Arte + práctica + sentido común “los detalles si importan”


NORMAS INTERNACIONALES WAPOR/ESOMAR


WAPOR / ESOMAR •

Diseño General: Históricamente, en elecciones con electores volátiles, la cercanía del trabajo de campo de la encuesta con el día de la elección es más importante que el tamaño de la muestra y la pureza del muestreo. Si muestras muy grandes son recogidas, los eventos de campaña pueden afectar a los votantes después de completar la mayor parte del trabajo de campo pero antes del análisis y publicación de los hallazgos de la encuesta. encuesta

ƒ

Período del trabajo de campo: las empresas encuestadoras deben tratar de reducir el riesgo de error minimizando el tiempo que transcurre entre el trabajo de campo y la publicación. Una encuesta puede alcanzar mejor una buena muestra representativa si durante el trabajo de campo se incluye algún período en las tardes cuando los electores que tienen empleos de tiempo completo están disponibles para ser entrevistados.

ƒ

Tamaño de la muestra: dos factores afectan el tamaño del límite de confianza de cualquier participación de partidos. El primero es el nivel absoluto de apoyo para un partido; el segundo es el tamaño de la muestra entrevistada para producir la estimación. En la mayoría de las encuestas preelectorales el tamaño de la muestra es el factor más i importante. t t Las organizaciones encuestadoras frecuentemente representan el margen de error de sus encuestas como ± 3%... las encuestas preelectorales no deberían tener muestras menores a 1.000 casos. En circunstancias que la brecha entre los partidos que lideran se espera sea peq eña el tamaño de la muestra pequeña, m estra debería a aumentar mentar a 1 1.500 500 0 2 2.000 000 casos casos.


WAPOR / ESOMAR •

Di t ib ió d Distribución de lla muestra: t Método 1: selección de puntos de muestreo proporcional al número de electores. Entonces en cada área seleccionada de muestreo se aplican un número igual de entrevistas. La regla para el muestreo que usa esta metodología debería ser maximizar el número de puntos de muestreo t y minimizar i i i ell número ú d de entrevistas t i t aplicadas li d en cualquier l i punto t d de muestreo. t Método 2: seleccionar puntos de muestreo con igual probabilidad, pero luego asignar un número diferente de entrevistas en cada área determinado por el tamaño del electorado en esa área. Aquí debe tratar de minimizarse el número de encuestas que hace cada encuestador,, siendo 20 el número máximo aconsejable. j

Encuestas telefónicas: no deberían ser usadas en encuestas preelectorales si la cobertura de teléfono es menor al 85% de la población. Si muestras telefónicas son usadas para encuestas, las organizaciones deben corregir cualquier sub representación del apoyo que tienen los partidos políticos. í Perfiles simples de ajuste demográfico á generalmente no son adecuados.

Ponderación de los datos: la aplicación de pesos demográficos simples para asegurar un balance exacto de la muestra es una buena práctica. práctica

Ajustes: En algunas circunstancias las organizaciones encuestadoras pueden sentir que los resultados de sus encuestas preelectorales no son una guía exacta; pero, no deben hacer ningún ajuste antes de ver los resultados resultados, en cualquier caso estos deben ser justificados y capaces de ser repetidos


WAPOR / ESOMAR •

Contenido de la encuesta: las encuestas preelectorales tienen un gran valor político y social si ellas no se confinan a sí mismas sólo como la medición de la intención de voto, sino también exploran las razones para la toma de partido y opiniones sobre temas importantes de campaña.

Series temporales: la validez del método usado por una organización puede ser juzgado mejor si ellos producen una serie sobre estimaciones de intención de voto durante la campaña.

Consistencia del diseño: la habilidad para juzgar una encuesta preelectoral final por comparación con otras encuestas previas de la misma organización se debilita si la organización cambia aspectos claves de su metodología para la encuesta final. Particular énfasis debe ponerse en el método de muestreo, la redacción de preguntas y la posición dentro del cuestionario de las preguntas sobre intención de voto

Variables indicadoras: es una buena práctica en las encuestas preelectorales incluir un set de información que puede ser correlacionada con la conducta de los votantes pero que no es parte d de un controll d de cuotas. VariableS i bl S como religión li ió o idi idioma h hablado bl d pueden d ser posibles variables indicadores si ellas no han sido usadas en el diseño como control de cuotas.


WAPOR / ESOMAR Cuando cualquier hallazgo de encuestas de opinión pública sea publicado en medios de comunicación impresos estos deben especificar claramente: •

El nombre de la empresa de investigación que llevó a cabo la encuesta.

El universo i efectivamente f ti t representado t d (i (i. e. quién ié ffue entrevistado). t i t d )

El tamaño de la muestra alcanzado y su cobertura geográfica.

Las fechas del trabajo de campo.

El método de muestreo usado (y en el caso de muestreo aleatorio, aleatorio la tasa de éxito alcanzado).

El método por medio del cual la información fue recopilada (entrevista telefónica o personal, etcétera).

Las preguntas importantes formuladas. Para evitar una posible ambigüedad se debe incluir la redacción original de la pregunta

Siempre deben indicarse los porcentajes de encuestados que respondieron "no sé" (y en el caso de los estudios de intención de voto de aquéllos que respondieron que no votarán), si se considera que afectan significativamente la interpretación de los hallazgos.


TRABAJO DE CAMPO

Noviembre 2007

Microsoft PowerPoint - CLASE UDP2007 TRABAJO DE  

• Es distinta a la no respuesta de ítem, que consiste en la falla para obtener una respuesta a un ítem dado • En el caso de las encuestas t...