Comparing european election narratives on TikTok across EU member states

Abstract

This study analyses a dataset provided by AI Forensics, which includes TikTok videos related to the 2024 European Elections, focused on contemporary wars and abortion. AI Forensics is a non-profit organization focused on algorithm auditing through investigating opaque algorithms to uncover violations of digital rights, making it an ideal partner for the development of this thesis. The goal was to examine how TikTok videos retrieved in response to specific queries differ across countries, identifying national trends and biases related to sentiment and political discourse. The dataset covers the resulting videos of political search queries on TikTok related to the European elections held in 2024 across five European countries: Spain, France, Germany, Netherlands, and Poland, and includes search queries, order of appearance, video metadata, content creator URLs, video descriptions and the titles. To ensure comparability between the different countries the dataset only covers queries in English for all five countries. This dataset was enriched with various scripts that collected different metrics across the dataset. This enrichment consisted of including engagement data, video captions, political entity mentions and sentiment and subjectivity scores through natural language processing techniques. The analysis revealed several findings. Most of the TikTok videos analyzed contained language associated with positive emotions, particularly in France and the Netherlands. However, no significant differences were found in user subjectivity in the videos across countries. It was found that discussions around contemporary wars and abortion frequently referenced government institutions and political leaders rather than topics like religion or human rights. Political parties mentioned in the videos were predominantly from the right-wing spectrum in all countries except France. Interestingly, the most frequently mentioned political entities were not the most voted European parties, instead national political parties, specially the ones on the extreme of the spectrum, were the most mentioned. Finally, the data analyzed exhibited a correlation between the usage of negative associated language with better engagement results, including the number of likes, video position in the serach results and the amount of followers of the video uploader.Este estudio analiza una base de datos proporcionada por AI Forensics, que está compuesta por una serie de vídeos de la plataforma TikTok relacionados con las pasadas elecciones de la Unión Europea celebradas en 2024 con el objetivo de encontrar diferentes tendencias en los resultados entre países. AI Forensics es una organización sin ánimo de lucro centrada en las auditorías y la investigación de los algoritmos opacos para desenmascarar vulneraciones en los derechos digitales de los usuarios, siendo un gran apoyo para el desarrollo de esta tésis. La base de datos incluye los vídeos resultantes de búsquedas hechas en la plataforma TikTok, estas búsquedas están relacionadas con las elecciones de la Unión Europea de 2024. El estudio incluye 5 países europeos: España, Francia, Alemania, Países Bajos y Polonia, cada uno de los resultados obtenidos está acompañado de el orden de aparición del video, el título, descripción, la URL del creador y del video, y el texto de la búsqueda realizada. Todos los resultados analizados están en inglés para asegurar la igualdad de condiciones entre países. La base de datos fue enriquecida con la ayuda de diversos scripts que recogieron diferentes métricas para cada resultado. Estas métricas añadidas incluyen los datos referentes al alcance de los vídeos, los subtítulos, las menciones a entidades políticas y la inclusión de puntuaciones que reflejan el nivel de positividad y de la subjetividad presentes en el discurso del vídeo. El análisis reveló que la mayoría de vídeos analizados contenían un lenguaje asociado a sentimientos positivos, particularmente al referirnos a Francia y Países Bajos donde esta tendencia era más pronunciada. Sin embargo, al analizar el nivel de subjetividad de los vídeos no se consiguió determinar ninguna diferencia significativa entre países. A la hora de referirse a las temáticas del aborto y las guerras contemporáneas, se encontró que los términos más comunes en los discursos eran los de gobierno y líder político, por encima de otros como la religión o los derechos humanos. La mayoría de las menciones a partidos políticos encontradas fueron a los situados en el espectro político derecho en todos los países excepto Francia. De estos partidos políticos mencionados, la gran mayoría pertenecían a partidos nacionales o de ideología extremista, siendo notoria la ausencia de partidos políticos Europeos que acabaron ganando las elecciones de 2024. Finalmente, los datos analizados presentaron una correlación entre el uso de lenguaje asociado a sentimientos negativos con el aumento del alcance de los vídeos, obteniendo, mejores resultados en cuanto a número de likes, seguidores del creador del vídeo y el posicionamiento del vídeo.Aquest estudi analitza una base de dades proporcionada per AI Forensics, que està composta per una sèrie de vídeos de la plataforma TikTok, relacionats amb les passades eleccions de la Unió Europea celebrades al 2024 amb l'objectiu de trobar diferents tendències en els resultats entre països. AI Forensics és una organització sense ànim de lucre centrada en les auditories i la recerca dels algorismes opacs, per tal de desemmascarar vulneracions en els drets digitals dels usuaris, sent un gran suport per al desenvolupament d'aquesta tesi. La base de dades inclou els vídeos resultants de cerques fetes en la plataforma TikTok, aquestes cerques estan relacionades amb les eleccions a la Unió Europea de 2024. L'estudi inclou 5 països europeus: Espanya, França, Alemanya, Països Baixos i Polònia, cadascun dels resultats obtinguts està acompanyat de l'ordre d'aparició del vídeo, el títol, descripció, la URL del creador i del vídeo, i el text de la cerca realitzada. Tots els resultats analitzats estan en anglès per a assegurar la igualtat de condicions entre països. La base de dades va ser enriquida amb l'ajuda de diversos scripts que van recollir diferents mètriques per a cada resultat. Aquestes mètriques afegides inclouen les dades referents a l'abast dels vídeos, els subtítols, els esments a entitats polítiques i la inclusió de puntuacions que reflecteixen el nivell de positivitat i de la subjectivitat presents en el discurs del vídeo. L'anàlisi va revelar que la majoria de vídeos analitzats contenien un llenguatge associat a sentiments positius, particularment a les entrades de França i Països Baixos on aquesta tendència era més pronunciada. No obstant això, en analitzar el nivell de subjectivitat dels vídeos no es va aconseguir determinar cap diferència significativa entre països. A l'hora de referir-se a les temàtiques de l'avortament i les guerres contemporànies, es va trobar que els termes més comuns en els discursos eren els de govern i líder polític, per sobre d'uns altres com la religió o els drets humans. La majoria de les mencions a partits polítics trobades van ser als situats en l'espectre polític dret, tenència present en tots els països excepte França. D'aquests partits polítics esmentats, la gran majoria pertanyien a partits nacionals o d'ideologia extremista, sent notòria l'absència de partits polítics Europeus que van acabar guanyant les eleccions de 2024. Finalment, les dades analitzades van presentar una correlació entre l'ús de llenguatge associat a sentiments negatius amb l'augment de l'abast dels vídeos, obtenint, millors resultats quant a número de likes, seguidors del creador del vídeo i el posicionament del vídeo.