Search

This article reports on a research project on university teaching and learning in the context of pandemics. Sixteen university professors and fifteen bachelor’s degree students were interviewed regarding “emergency e-assessment practices” during the first lockdown semester at a Spanish institution. The research aimed to understand their perception of how generic competencies were being assessed. Data were generated in semi-structured individual interviews. The main findings are: (a) generic competencies are not explicitly considered in e-assessment practices; (b) online assessment practices follow mainly a summative purpose; (c) digital technologies are not considered for the instructional design; (d) both instructors and students lack assessment literacy. Furthermore, there are difficulties in reaching a shared understanding regarding what competency-based assessment means and its implications for daily praxis. The results underline the challenge of using digital technologies for fostering and assessing generic competencies, as well as the need for assessment literacy on both sides, teachers and students.

One of the main generic competencies in Higher Education is “Learning to Learn”. The key component of this competence is the capacity for self-regulated learning (SRL). For this competence to be developed, peer feedback seems useful because it fosters evaluative judgement. Following the principles of peer feedback processes, an online peer feedback proposal was created in the context of complex tasks in several degree courses (n = 448 students) at the University of Barcelona. A specific didactic sequence supported by digital technologies through Moodle was designed and validated after a deep analysis of the theoretical underpinnings of SRL models. A peer review proposal was ratified by the students, who pointed out the benefits of both receiving and, especially, giving feedback. The integration of Moodle tools with external tools such as Personalized Learning Design was highly valued by reviewers (n = 3 expert judges) and the possibilities for students to monitor their own progress through task completion was revealed as a positive aspect. Furthermore, the creation of personalized alerts to support learning processes also received a very high rating. The final model includes the changes derived from the validation process and suggests a reliable technology-supported intervention in an LMS, which is transferable to a larger scale. Una de las principales competencias genéricas en la Educación Superior es “Aprender a Aprender”. El componente clave de esta competencia es la capacidad para el aprendizaje autorregulado (AAR). Para que se desarrolle esta competencia, parece útil el feedback entre iguales, dado que fomenta el juicio valorativo. Siguiendo los principios de los procesos de feedback entre iguales, se creó una propuesta de feedback entre iguales on-line en un contexto de tareas complejas dentro de varias asignaturas de grado (n = 448 estudiantes) en la Universidad de Barcelona. Se diseñó una secuencia didáctica específica con el apoyo de las tecnologías digitales a través de Moodle y se validó tras un análisis en profundidad de los fundamentos teóricos de los modelos de AAR. Se ratificó una propuesta de revisión entre iguales por parte de los estudiantes, quienes destacaron los beneficios que tiene tanto recibir como, especialmente, dar feedback. La integración de herramientas de Moodle con otras externas tales como el Diseño de Aprendizaje Personalizado consiguió una alta valoración entre los revisores (n = 3 jueces expertos) y las posibilidades para que los estudiantes monitorizaran su propio progreso mediante la realización de tareas se revelaron como un aspecto positivo. Además, la creación de alertas personalizadas para apoyar los procesos de aprendizaje también obtuvo una valoración muy alta. El modelo final incluye los cambios derivados del proceso de validación y sugiere una intervención fiable con la ayuda de la tecnología en un SGA (Sistema de Gestión del Aprendizaje), que se puede transferir a una escala mayor. Spanish State Research Agency, Spain (http://dx.doi.org/10.13039/501100011033), AEI/ PID2019-104285GB-I00.

Competency-based designs promote the development of knowledge, skills and attitudes that enable professionals to develop adaptive experience, preparing them through learning activities and authentic assessment, for the future acquisition of new content. This requires the development of evaluative judgement, so that the quality of one’s own work processes can be assessed autonomously and with critical judgement. This paper presents the design of an educational experience with students of Galenic Pharmacy (N = 339) during the 2021–2022 academic year, the objective of which, when giving presentations on ways of administering medicines, was not only the learning of content but also the development of competencies. A complex task with iterative deliverables is proposed in which peer assessment is the key to the development of evaluative judgement. The results show the positive effects of peer assessment, the growth of feedback provided from loop to loop and the development of critical judgement. However, engagement with the process has been erratic and the focus of feedback has not been sufficiently centred on content. Improved assessment literacy would probably be necessary both for teachers, in order to be able to establish criteria more aligned with their competencies, and for students to be able to attach greater formative value to these practices and engage with the learning process itself, and thus be able to continue this autonomous and self-regulated learning throughout life.

La crisis mundial desatada por el Covid-19 ha afectado a todos los ámbitos de la vida y, por supuesto, también a las universidades. La suspensión de la docencia presencial ha comportado pensar en el futuro, pero también replantearse los presentes desafíos educativos: para qué aprendemos y de qué forma, para qué evaluamos y de qué manera. El propósito de esta contribución consta de presentar una reflexión teórica para delimitar cómo la evaluación formativa de los aprendizajes en la educación superior se puede acomodar en una situación de confinamiento y en el marco de una formación basada en competencias. Para ello, se profundiza en la reflexión teórica y práctica a partir de la sistematización de las evidencias científicas y la revisión de la literatura especializada sobre la temática. Así, la evaluación orientada al aprendizaje se pone en valor como punto de partida, se reivindica la autorregulación mediante la autoevaluación y la evaluación entre iguales y se pone el foco sobre la importancia de adaptar la evaluación mediante exámenes online. Esto implica que el profesorado deba integrar la asunción de alternativas en la situación de confinamiento alrededor del aprendizaje significativo y el desarrollo integral de los estudiantes, como un proceso prioritario y preferente para la mejora de su formación. The global crisis unleashed by Covid-19 has affected all areas of people's lives and, of course, also universities. The suspension of face-to-face teaching has meant thinking about what will happen in the future, but it has also rethought the present and its educational challenges: why and how we learn, and why and how we assess. The purpose of this contribution is to present a theoretical reflection in order to define how the formative assessment of learning of university students can be accommodated in a lockdown situation, and in the framework of a learning-oriented assessment and for self-regulated learning. For this, theoretical and practical reflection is deepened from the systematization of scientific evidence and the review of specialized literature on the subject. Thus, learning-oriented assessment is valued as a starting point; self-regulation is claimed through self-assessment and peer-assessment; and the focus is placed on the importance of adapting the assessment process through online exams. Some alternatives, in relation to how an authentic and relevant assessment should be done, revolves around significant learning and the integral development of students in the confined situation and within the framework of the competence-based approach. This implies that teachers must integrate the assessment of the learning of university students as a priority and preferential process for the improvement of their training in higher education.

Sustainability competence is understood as the interlinked set of knowledge, skills, attitudes, and values that effectively enable embodied action in the world concerning real-world sustainability problems, challenges, and opportunities, according to the context. Higher education institutions should promote this competence in their graduates due to its importance, which has been stressed during the period of COVID-19. However, it seems to be becoming forgotten, in the syllabus as well as in the voices of teachers and students. A study carried out at the University of Barcelona (UB) with n = 265 students and n = 129 professors on the importance and frequency of assessing this competence in times of pandemic is presented. Quantitative data was supplemented with n = 31 interviews. The data show a scarce use of assessment strategies to evaluate this competence (9.7% of the students and 15.2% of the teachers indicate some type of assessment) as well as a very low consideration of the usefulness of the assessment processes of this competence. Interviews prove that this is a missing competence. However, 14% of the students associate it with productive assessment tasks, and 19.4% of the teachers think it is related to well-aligned assessment tasks. Therefore, it seems that the future challenge is in the design of learning and assessment tasks which should consider sustainability in teaching plans and ask students to apply, solve or make decisions considering environmental, social or economic sustainability.

[spa] En este artículo se presenta el proceso de creación de un instrumento de evaluación de las competencias docentes aplicable a lo largo de diversos ciclos de vida profesional. Tras diseñar y validar un marco teórico global de las competencias clave del profesorado, se explican los pasos seguidos para la construcción de las rúbricas asociadas a los diversos niveles competenciales, así como los cuestionarios de percepción competencial vinculados a cada uno de los grados de la escala establecida por la rúbrica. Se procede a una aplicación piloto con el fin de validar las herramientas creadas, además de obtener un primer avance de los resultados de un programa formativo de profesorado de China. Los resultados, recogidos en términos de percepción de la mejora en el desarrollo competencial, permiten insinuar logros en la mejora de la competencia vinculada a la acción comunitaria, inicialmente baja y en la competencia de evaluación. Respecto a la validación, los datos recogidos, a falta de ulteriores análisis, permiten atisbar que se trata de rúbricas y cuestionarios válidos para autoevaluar el nivel de desarrollo competencial y proceder, en el marco de los procesos de desarrollo profesional, a su mejora continuada., [eng] This paper presents the process of creating an instrument for assessing teaching competences applicable throughout various professional life cycles. After designing and validating a global theoretical framework of the teachers' key competences, the steps followed for the construction of the rubrics associated with the various competence levels are detailed, as well as the competence perception questionnaires linked to each of the grades of the scale established by the rubric. A pilot application is carried out in order to validate the tools created, in addition to obtaining a first preview of the results of a teacher training program in China. The results, collected in terms of perception of the improvement in competence development, allow us to suggest achievements in the improvement of competence linked to community action, initially low, and in assessment competence. Regarding validation, the data collected, in the absence of further analysis, allow us to see that these are valid rubrics and questionnaires to self-assess the level of competence development and proceed, within the framework of professional development processes, to their continuous improvement.

Introducción. A partir del Consejo Europeo de Lisboa (2000) se han realizado grandes esfuerzos en las instituciones de educación superior para implementar el enfoque basado en competencias. Por ejemplo, han sido creados marcos de competencias clave del profesorado; a pesar de que varían mucho no solo entre países, sino también entre instituciones dentro de un mismo país. De ahí la necesidad de un modelo más global de marco competencial para docentes, alineando, así, la pre-service teacher education con la in-service teacher education o formación permanente y facilitando de este modo el desarrollo profesional a lo largo de la vida (educación para toda la vida). Método. En esta contribución, se presenta el proceso seguido para diseñar y validar el marco teórico global de las competencias clave del profesorado. Resultados. Se detallan los pasos seguidos para la construcción de este marco de referencia, empezando por una revisión sistemática de marcos competenciales existentes en distintas zonas del mundo. Discusión. Se pretende asegurar así la transferibilidad de este marco a otros contextos y la armonización global; así como se especifican los diferentes procesos de validación para fomentar su uso en futuros estudios e investigaciones, promoviendo así la armonización global., Introducció. Des del Consell Europeu de Lisboa (2000) s’han fet grans esforços a les institucions d’educació superior per implementar l’enfocament basat en competències. S’han creat, per exemple, marcs de competències clau del professorat, tot i que varien molt no només entre països, sinó també entre institucions dins d’un mateix país. D’aquí sorgeix la necessitat d’un model més global de marc competencial per a docents per alinear tota la carrera docent, és a dir, la pre-service teacher education amb la in-service teacher education o formació permanent, i facilitar d’aquesta manera el desenvolupament professional al llarg de tota la vida (educació per a tota la vida). Mètode. En aquesta comunicació es presenta el procés seguit per dissenyar i validar el marc teòric global de les competències clau del professorat. Resultats. S’hi detallen els passos seguits per a la construcció d’aquest marc de referència, començant per una revisió sistemàtica de marcs competencials existents en diferents zones del món. Discussió. Es pretén assegurar, així, la transferibilitat d’aquest marc a altres contextos i l’harmonització global; s’hi especifiquen, per exemple, els diferents processos de validació per fomentar-ne l’ús en futures recerques i investigacions, i promoure aquesta harmonització., Introduction. Since the European Council meeting in Lisbon in 2000, higher education institutions have made considerable efforts to implement a competence-based approach. For example, teachers’ key competence frameworks have been created, even though they vary greatly not only between countries, but also between institutions within the same country. These differences highlight the need for a more global model of competence framework for teachers, aligning pre-service teacher education with in-service teacher education or permanent training and thus encouraging professional lifelong learning. Method. This contribution presents the process followed to design and validate the global theoretical framework of teachers’ key competences, designed in a European Project co-funded by the European Commission. Results. The steps followed for the construction of this reference framework are detailed. The paper starts with a systematic review of existing competence frameworks in different geographical areas. Discussion. The aim is to ensure the transferability of this framework to other contexts and to promote global harmonization. The different validation processes are specified in order to encourage their use in future studies and research.

Se analizan las experiencias relativas a la evaluación de aprendizaje contenidas en actas de innovación docente de los años 2011-2015, con el objetivo de conocer sobre qué aspectos de la evaluación se está innovando y a qué ámbitos de conocimiento pertenecen. Con este propósito se han establecido seis hipótesis en base a la literatura previa y, para verificarlas, se han seleccionado actas de congresos de innovación docente pertenecientes a universidades públicas del territorio español. Se ha analizado el instrumento o estrategia sobre el que versa la innovación y los agentes evaluativos, se ha identificado el tipo de asignatura, el campo de conocimiento y las estrategias de recogida de información para valorar sus resultados. Los datos obtenidos se han explorado de forma descriptiva. Los resultados del análisis muestran que el campo de Humanidades es donde se realizan menos innovaciones; la mayoría de innovaciones se desarrollan en el primer curso de grado; estas tienden a incorporar diversos agentes evaluativos; y el método más utilizado para valorar los resultados de una innovación son los cuestionarios de satisfacción y percepción de aprendizaje. No se ha podido comprobar si la mayoría de las innovaciones docentes están vinculadas a proyectos de innovación docente reconocidos institucionalmente, ni si estas se realizan con grupos reducidos de estudiantes. En conjunto, todo ello ofrece un panorama acerca del estado de las innovaciones en educación en España y proporciona una mayor comprensión de la evaluación de los aprendizajes en educación superior en la actualidad.