Methodological challenges for the large N study of local participatory experiences: combining methods and databases

Abstract

In this article we analyse the effects of different data collection strategies in the study of local participatory experiences in a region of Spain (Andalusia). We examine the divergences and similarities between the data collected using different methods, as well as the implications for the reliability of the data. We have collected participatory experiences through two parallel processes: a survey of municipalities and web content mining. The survey of municipalities used two complementary strategies: an online questionnaire and a CATI follow-up for those municipalities that had not answered our first online contact attempt. Both processes (survey and data mining) were applied to the same sample of municipalities, but provided significantly different images of the characteristics of Andalusia’s participatory landscape. The goal of this work is to discuss the different types of biases introduced by each data collection procedure and their implications for substantive analyses.En este artículo analizamos los efectos de diferentes estrategias para la recolección de datos en el estudio de las experiencias participativas andaluzas. Examinamos para ello las diferencias y similitudes entre los datos recogidos mediante diferentes métodos, así como las implicaciones para la fiabilidad de los datos. Para ello, hemos utilizado dos procedimientos paralelos. En primer lugar, una encuesta a municipios y la minería de datos en Internet. La encuesta se realizó utilizando dos modos de administración diferentes, un cuestionario online y un cuestionario telefónico de seguimiento a los municipios que no respondieron al primer intento de contacto vía correo electrónico. Tanto la encuesta como la minería de datos fueron aplicados a la misma muestra de municipios, aunque arrojaron diferencias significativas en cuanto a las características del pano-rama participativo en Andalucía. El objetivo de este trabajo es discutir los diferentes tipos de sesgos introdu-cidos por cada procedimiento de recogida de datos y sus implicaciones para posteriores análisis sustantivos.