Rubric-based tools to support the monitoring and assessment of Bachelor’s Final Projects

Abstract

The role of Bachelor’s Final Projects (BFP) in Engineering Education/nis critical since it offers the opportunity for students to integrate and/nemploy specific and transversal competences they have developed/nalong the degree. However, given the special characteristics of this/ncurriculum component (personalized according to the student’s/ninterests, the number of teachers involved, the changing assessment/nboards, etc.), the systematization of its formative and summative/nassessment has been extensively recognized as problematic but/nhighly necessary. To face this problem, there are several recent/ninitiatives reported in the literature that propose a set of rubrics as/ntools for project advisors and board members to structure the/nassessment. In this paper, we report the experience in the Engineering/nSchool at Universitat Pompeu Fabra (Barcelona) employing a rubricbased/napproach as part of an assessment guide (with a web-based/nsupport tool) for BFP. The guide has been evaluated using quantitative/nand qualitative data gathering techniques used before, during and/nafter the rubrics use, and the results provide insights about its utility,/npertinence, user-friendliness, preciseness and actual adoption./nFindings led to the provision an additional feature in the web-based/ntool for the integrated assessment of transversal and specific/ncompetences and a view of a summarized version of the rubrics that/ncan be used using mobile devices.

El papel del Trabajo Fin de Grado (TFG) en Ingeniería es crítico dado/nque ofrece la oportunidad al estudiantado de integrar y aplicar las/ncompetencias, tanto específicas como transversales, desarrolladas/na lo largo del grado. Sin embargo, dadas sus características/nacadémicas (personalizado de acuerdo con los intereses del/nestudiante, el número de profesorado implicado, la evaluación/nmediante un tribunal, etc.), la sistematización de la evaluación/nformativa y sumativa del BFP es un elemento considerado tan/nnecesario como complejo. Para abordar la complejidad de ambos/nprocesos hay múltiples iniciativas recientemente reportadas a la/nliteratura que proponen el uso de rúbricas como herramienta para/nasesorar y monitorizar tanto el proceso como el producto. En este/nartículo analizamos la experiencia de la Escuela Superior Politécnica/nde la Universitat Pompeu Fabra (Barcelona) basada en la aplicación/nde rúbricas como parte de una guía de evaluación (con apoyo de una/nherramienta web) para los TFG. Esta guía fue evaluada cuantitativa/ny cualitativamente tanto antes, como durante y después del uso de/nlas rúbricas y los resultados obtenidos nos permitieron conocer su/nvaloración en términos de utilidad, pertenencia, usabilidad y precisión./nLos resultados nos llevaron a realizar cambios para aportar nuevas/nprestaciones a la herramienta web dirigidos a la integración de la/nevaluación de competencias transversales y específicas, así como el/ndiseño de una versión de la rúbrica resumida para su uso a través de/ndispositivos móviles.