Evaluación de la eficacia de un programa de tutoría formativa
Supporting Agencies
- Departamento FISPPA de la Universidad de Padua
Abstract
University tutoring is a central process in the European Higher Education Area (EHEA), with its different modalities and strategies. Nowadays, in post-secondary education a new attention to customer-tailored educational actions coexists with the goal to promote a wholeperson development of students in order to improve learning and contrast drop-outs: university tutoring plays a crucial role in this new vision. The study is focused on the evaluation of a programme of formative tutoring that involved three first-cycle degree courses at the University of Padova. The hypothesis of effectiveness, in particular, was verified by ex-post selection of a control group, composed of the most similar not treated students to treated ones. The selection of the control group members was carried out by propensity score matching, a statistical technique that predicts the probability to receive the treatment accounting for a set of students observable characteristics. This counter-factual causal analysis gave significant results: the drop-out rate fell by half, and performance increased in terms of learning outcomes.
Downloads
References
Aguaded Gómez, M. C., & Monescillo Palomo, M. (2013). Evaluación de la tutoría en la universidad de Huelva desde la perspectiva del alumnado de psicopedagogía: propuestas de mejora. Tendencias pedagógicas, 23, 163-176. https://revistas.uam.es/tendenciaspedagogicas/article/view/2031/2139
Álvarez Pérez, P.R. (2002). La función tutorial en la universidad: Una apuesta por la mejora de la calidad de la enseñanza. Madrid: EOS.
Álvarez Pérez, P.R. (2012). Los planes de tutoría de carrera: una estrategia para la orientación al estudiante en el marco del EEES. Educar, 48(2), 247-266. http://www.redalyc.org/articulo.oa?id=342130839004
Álvarez, M., & Álvarez, J. (2015). La tutoría universitaria: del modelo actual a un modelo integral. Revista Electrónica Interuniversitaria de Formación del Profesorado, 18(2), 125- 142. http://dx.doi.org/10.6018/reifop.18.2.219671.
Álvarez, P., Asensio, I., Forner, A., & Sobrero, L. (2006). Los planes de acción tutorial en la universidad. En T. Escudero & A. Correa (Coord.), Investigación e innovación educativa: algunos ámbitos relevantes (147-206). Madrid: La Muralla.
Álvarez, P., Cabrera, L., González, M., & Bethencourt, J. (2006). Causas del abandono y prolongación de los estudios universitarios. Revista Paradigma, 27(1), 7-36. http://revistas.upel.edu.ve/index.php/paradigma/article/view/3895/1932
Álvarez, P., & González, M. (2008). Los planes de tutoría en la Universidad: una guía para su implantación. San Cristóbal de La Laguna: Servicio de Publicaciones de La Universidad de La Laguna.
Arbizu, F., Lobato, C., & del Castillo, L. (2005). Algunos modelos de abordaje de la tutoría universitaria. Revista de Psicodidáctica, 10(1), 7-12. http://www.redalyc.org/pdf/175/17514745002.pdf
Arias Ortiz, E. A., & Dehon, C. (2013). Roads to Success in the Belgian French Community’s Higher Education System: Predictors of Dropout and Degree Completion at the Université Libre de Bruxelles. Research in Higher Education, 54(6), 693-723. http://dx.doi.org/10.1007/s11162-013-9290-y
Arulampalam, W., Naylor, R. A., & Smith, J.P. (2004). A hazard model of the probability of medical school dropout in the UK. Journal of the Royal Statistical Society. Series A, 167, 1, 157-178. https://doi.org/10.1046/j.0964-1998.2003.00717.x
Astin, A. W. (1977). Four critical years: Effects of college on beliefs, attitudes, and knowledge. San Francisco: Jossey-Bass Publishers.
Barefoot, B. (2004). Higher education’s revolving door: confronting the problem of student drop out in US colleges and universities. Open Learning, 19(1), 9-18.https://doi.org/10.1080/0268051042000177818
Cabrera, L., Bethencourt, J., Álvarez, P., & González, M. (2006). El problema del aban- dono de los estudios universitarios. RELIEVE, 12(2), 171-203. https://www.uv.es/RELIEVE/v12n2/RELIEVEv12n2_1.htm
Castellano Luque, E.A., & Pantoja Vallejo, A. (2017). Eficacia de un programa de inter- vención basado en el uso de la TIC en la tutoría. Revista de Investigación Educativa, 35(1), 215-233. http://dx.doi.org/10.6018/rie.35.1.248831.
Chickering, A. W., & Gamson, Z. F. (1987). Seven principles for good practice in under- graduate education. AAHE bulletin, 39(7), 3-7. http://www.lonestar.edu/multimedia/sevenprinciples.pdf
Cid Sabucedo, A., & Pérez Abellás, A. (2006). La tutoría en la universidad de Vigo según la opinión de sus profesores. Revista de Investigación Educativa, 24(2), 395-421.http://revistas.um.es/rie/article/view/96911.
Clerici, R., Giraldo, A., & Meggiolaro, S. (2015). The determinants of academic outco- mes in a competing risks approach: evidence from Italy. Studies in Higher Education, 40(9), 1535-1549. http://dx.doi.org/10.1080/03075079.2013.878835.
Da Re, L. (2017). Il tutor all’Università: Strategie educative per contrastare il drop-out e favorire il rendimento degli studenti. Lecce: Pensa Multimedia.
Da Re, L., & Clerici, R. (2017). Abandono, rendimiento académico y tutoría: una investigación de la Universidad de Padua. Revista Educatio Siglo XXI, 35(2), 139-160. https://doi.org/10.6018/j/298551
Da Re, L., Clerici, R., & Álvarez Pérez, P. R. (2016). Le attività e gli strumenti del Pro- gramma di Tutorato Formativo per i nuovi iscritti all’Università: una guida operativa. Padova: Cleup.
Delaney, L., Harmon, C., & Ryan, M. (2011). Does lecture attendance matter for grades? Evidence from a longitudinal tracking of Irish students. Critical Issues in Irish Society Network. https://editorialexpress.com/cgi-in/conference/download.cgi?db_name=res_phd_2011&paper_id=167
Di Pietro, G. (2004). The determinants of university drop-out in Italy: A bivariate probability model with sample selection. Applied Economics Letters, 11(3), 187-191.http://dx.doi.org/10.1080/1350485042000203832
Dolton, P., Marcenaro, O. D., & Navarro, L. (2003). The effective use of student time: A stochastic frontier production function case study. Economics of Education Review, 22(6), 547-560. https://doi.org/10.1016/S0272-7757(03)00027-X
Echeverría B., Isus, S., Martínez Clares, P., & Sarasola, L. (2008). Orientación profesional. Barcelona: Editorial UOC.
Elias, G. (2011). Concetti, principi e strategie per la misura dell’efficacia. En L. Fabbris (Coord), Criteri e indicatori per misurare l’efficacia dell’attività universitarie (pp. 1-8). Padova: Cleup.
Fabbris, L. (Ed.). (2011). Criteri e indicatori per misurare l’efficacia delle attività universitarie. Padova: Cleup.
Fabbris, L., Boccuzzo, G., & Martini, M. C. (Ed.). (2008). Professionalità nei servizi inno- vativi per studenti universitari. Padova: Cleup.
Figuera, P., & Álvarez, M. (2014). La intervención orientadora y tutorial en la adaptación y persistencia del alumnado en la universidad. Revista de Orientación Educacional, 28(54), 31-49. http://www.roe.cl/index.php/roe/article/view/83/40
Figuera, P.. & Coiduras J. L. (2013). La transición a la universidad: un análisis desde la diversidad de las voces de los estudiantes. Revista de Educación, 362, 713-736. http://www.mecd.gob.es/dctm/revista-de-educacion/doi/362247.pdf ?documentId=0901e72b81642369
Fraccaroli, F., & Vergani, A. (2005). Valutare gli interventi formativi. Roma: Carocci. Gairín Sallán, J. (2010). La Evaluación del Impacto en Programas de Formación. REICE. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación, 8(5). http://www.redalyc.org/html/551/55119084002/
Gallego Matas, S. (2006). La tutoria en la Educaciòn superior. En S. Gallego & J. Riart (Coord.), La tutoria y la orientaciòn en el Siglo XXI; nuevas propuestas (pp. 185-196). Barcellona: Octaedro.
García Nieto, N., Asensio Muñoz, I., Carballo Santaolalla, R., García García, M., & Guardia González, S. (2005). La tutoría universitaria ante el proceso de armonización europea. Revista de Educación, 337, 189-210.http://www.revistaeducacion.mec.es/re337/re337_10.pdf
Laneve, C. (2000). Il tutorato un’istanza emergente. Scuola e Didattica, (4), 20-21.
Lassibille, G., & Navarro, M. L. N. (2010). How long does it take to earn a higher education degree in Spain?. Procedia Social and Behavioral Sciences, 2, 3519-3523. https://core.ac.uk/download/pdf/82776332.pdf
Lent, R., Brown, S., & Hackett, G. (1994). Toward a unifying social cognitive theory of career and academic interests, choice, and performance. Journal of Vocational Behavior, 45(1), 79-122. https://www.sciencedirect.com/science/article/abs/pii/S000187918471027X
Lobato C., Arbizu F., & del Castillo L. (2004). Representaciones de la tutoría universitaria en profesores y estudiantes: Estudio de un caso. Revista Educación XXI(7), 135-168. http://www.redalyc.org/articulo.oa?id=70600707
Marchesi, G., Tagle, L., & Befani, B. (2011). Approcci alla valutazione degli effetti delle politiche di sviluppo regionale. Materiali UVAL, 22. http://valutazio- neinvestimenti.formez.it/sites/all/files/muval_22_valutazione_impatto.pdf
Martínez Clares, P. (2017). Tutoría en acción. Revista Educatio Siglo XXI, 35(2), 11-20. https://digitum.um.es/xmlui/bitstream/10201/54363/3/298491-1025841-1-PB.pdf
Martínez Clares, P., Martínez Juárez, M., Pérez Cusó, J. (2014). Tutoría Universitaria: entorno emergente en la Universidad Europea. Un estudio en la Facultad de Educación de la Universidad de Murcia. Revista de Investigación Educativa, 32(1), 111-138. http://dx.doi.org/10.6018/rie.32.1.148411.
Martini A., & Trivellato U. (2011). Sono soldi ben spesi? Perché e come valutare l’efficacia delle politiche pubbliche. Venezia: Marsilio.
Pascarella, E.T., & Terenzini, P.T. (2005). How college affects students. Vol. 2: A third decade of research. San Francisco: Jossey-Bass.
Patton, M.Q. (2010). Developmental Evaluation: Applying Complexity Concepts to Hnhance Innovation and Use. New York: Guilfor Press.
Pérez, F.J., González, C., González, N., & Martínez, M. (2017). Tutoría en la Universidad: un estudio de caso en la Facultad de Educación de la Universidad de Murcia. Educatio Siglo XXI, 35(2), 91-110. https://doi.org/10.6018/j/298531
Pérez, J., & Martínez, M. (2015). Tutoría universitaria y servicios de orientación: dos realidades en un mismo contexto. Revista electrónica Interuniversitaria de Formación del Profesorado, 18(2),177-192. <=>http://dx.doi.org/10.6018/reifop.18.2.219461.
Pérez-Cuso, F.J., Martínez-Clares, P., & Martínez-Juarez, M. (2015). Satisfacción del estudiante universitario con la tutoría. Diseño y validación de un instrumento de medida. ESE. Estudios sobre Educación, 29, 81-101. http://dx.doi.org/10.15581/004.29.81-101
Ramos Azcuy, F., Meizoso Valdés, M. C., & Guerra Bretaña, R. M. (2016). Instrumento para la evaluación del impacto de la formación académica. Revista Universidad y Sociedad, 8(2), 114-124. http://rus.ucf.edu.cu/.
Rodríguez Espinar, S. (2018). La Universidad: una visión desde “fuera” orientada al futuro. Revista de Investigación Educativa, 36(1), 15-38. http://dx.doi.org/10.6018/ rie.36.1.309041.
Rosembaum, P., & Rubin, D.B. (1983). The central role of the propensity score in obser- vational studies for causal effects. Biometrika, 70(1), 41-55. http:// www.stat.cmu.edu/~ryantibs/journalclub/rosenbaum_1983.pdf
Rossi, P. H., Lipsey, M. W., & Freeman, H. E. (2004). Evaluation: A Systematic Approach. London: Sage Publications.
Rubin, D. (1974). Estimating Causal Effects of Treatments in Randomized and Non- randomized Studies, J. Educ. Psychol., 66(5), 688-701. http://www. fsb.muohio.edu/lij14/420_paper_Rubin74.pdf
Ryan, M. P., & Glenn, P. A. (2003). Increasing one-year retention rates by focusing on academic competence: An empirical odyssey. Journal of College Student Retention, 4 (3), 297-324. https://doi.org/10.2190/KUNN-A2WW-RFQT-PY3H
Sola Martinez, T., & Moreno Ortiz, A. (2005). La acción tutorial en el contexto del Espacio Europeo de la Educación Superior. Educación y Educadores, 8, 123-144. http://www.redalyc.org/articulo.oa?id=83400810
Stame, N. (2001). Tre approcci principali alla valutazione: distinguere e combinare. En M. Palumbo, Il processo di valutazione: decidere, programmare, valutare. Milano: Franco Angeli.
Stame, N. (2007). Classici della valutazione. Milano: Franco Angeli.
Thoemmes, F.J., & Kim, E. S. (2011). A Systematic Review of Propensity Score Methods in the Social Sciences. Multivariate Behavioral Research, 46(1), 90-118. https://doi.org/10.1080/00273171.2011.540475
Tinto, V. (1975). Dropout from higher education: A theoretical synthesis of recent research. Review of Educational Research, 45(1), 89-125. http://dx.doi.org/10.3102/00346543045001089
Villar, A. (2010). Del abandono de estudios a la reubicación universitaria. Revista de la Asociación de Sociología de la Educación, 3(2), 267-283. https://dialnet.unirioja.es/servlet/articulo?codigo=3655697
Winship, C., & Morgan, S. (2007). Counterfactuals and casual inference. New York: Cambridge University Press.
Zago, G. (2013). Percorsi della pedagogia contemporanea. Milano: Mondadori.
Zago, G., Girado, A., & Clerici, R. (Ed.). (2014). Successo e insuccesso negli studi universitari. Bologna: Il Mulino.
Zimmerman, B. J. (2000). Attaining self-regulation: A social cognitive perspective. En M. Boekaerts, P. R. Pintrich, & M. Zeidner (Coord.), Handbook of Self-Regulation (pp. 13-39). San Diego, Calif, USA: Academic Press.
The articles and scientific documents published in RIE abide the following conditions:
1. The Servicio de Publicaciones de la Universidad de Murcia (the publisher) has the property rights (copyright) of all the documents published and allows the reuse under the user’s license indicated in point 2.
2. All documents are published in the digital edition of RIE under a Creative Commons Reconocimiento-NoComercial-SinObraDerivada 3.0 España (legal document) license. These documents can be copied, used, distributed, communicated and explained publicly if: i) the author(s) and its original source of publishing (magazine, publisher and URL of the document) are cited; ii) it is not used for commercial purpose; iii) the existence and the specifications about this license are mentioned.
3. Auto-archive’s conditions. The authors are allowed and encouraged to digitally distribute the pre-print versions (a version before evaluation) and/or post-print (a version that it is already evaluated and accepted to its publication). This promotes circulation and distribution earlier and can increase the citations and significance within the academic community.
