La evaluación del proyecto: “FROM LITERACY TO DIGITAL AND TECHNOLOGICAL TRAINING” ha sido muy positiva, ya que se han conseguido alcanzar o superar todos los indicadores cuantitativos y cualitativos definidos en la solicitud.
Un buen ejemplo de ello es que se han ampliado y mejorado los contenidos educativos del producto intelectual del proyecto: “STRUCTURED AND PERSONALIZED COURSE FOR THE DIGITAL TRAINING OF ADULTS: FROM LITERACY TO DIGITAL AND TECHNOLOGICAL TRAINING” realizándose un mayor número de micro píldoras de las previstas inicialmente y además traduciéndolas también al francés, lo que ha permitido ampliar el impacto y la difusión del proyecto en Francia.
Además, los resultados de evaluación de la calidad son “muy altos o altos” según la mayoría de los expertos, formadores y profesionales de la educación que han realizado esta evaluación.
Por último, cabe destacar que esta evaluación ha sido realizada también por parte de decenas de expertos externos al proyecto, así como por parte de los participantes y las personas involucradas en el mismo, también ha sido evaluado positivamente y seleccionado para participar en los Congresos Internacionales de Educación EDULEARN 2021 (13th annual International Conference on Education and New Learning Technologies) y ICERI 2021 (14th annual International Conference of Education, Research and Innovation).
EVALUACIÓN INTERNA
La evaluación interna del proyecto ha tenido como principales objetivos el control del progreso, la calidad y la ejecución de las actividades, así como el cronograma y el control de tiempos. Esta evaluación y seguimiento del proyecto se ha realizado a través de un Sistema de Calidad Total, en el que la totalidad del proyecto se ha dividido en partes más simples con objetivos compartidos: los Procesos. Cada uno de estos procesos contribuye a la consecución de uno o varios objetivos del proyecto, y agrupa el conjunto de actividades necesarios para lograrlos.
Al establecer una estructura tan fragmentada y compartimentada, ha sido sencillo implementar un sistema de evaluación eficaz que ha abarcado cada uno de los niveles. Así, cada vez que una actividad, proceso o etapa han finalizado, se ha realizado una evaluación específica analizando el nivel de cumplimiento a través de los indicadores propuestos y estableciendo, en su caso, medidas correctoras.
Esta evaluación preliminar ha contado con la participación de todos los participantes, quienes han utilizado diversas herramientas de evaluación como Google Files para enviar sus propuestas de mejora y compartir sus herramientas de evaluación con el resto de los socios para mejorar el proyecto.
El proyecto ha culminado en una Etapa de Evaluación Final, que sin duda ha sido una de las partes más importantes de la misma, ya que se ha verificado la consecución de los objetivos y el cumplimiento de los indicadores del proyecto en su conjunto, que en su mayoría están orientados hacia el proceso y los resultados.
Esta evaluación se ha llevado a cabo a través de un proceso altamente participativo que ha involucrado al personal de gestión, técnicos y jefes de proyecto de las diferentes organizaciones socias, de entidades colaboradoras y estudiantes adultos. Se ha potenciado su participación a través de espacios de análisis y reflexión a lo largo de las múltiples actividades que componen esta etapa final de evaluación. Algunas de ellas han sido:
– REUNIONES DE EVALUACIÓN CON BENEFICIARIOS.
– ENCUENTROS CON AGENTES MULTIPLICADORES.
– ACTIVIDADES DE EVALUACIÓN DE LAS ETAPAS DEL PROYECTO (PREPARACIÓN,
IMPLEMENTACIÓN Y DIFUSIÓN).
– ACTIVIDADES DE CONTROL Y SEGUIMIENTO EN REUNIONES TRANSNACIONALES.
– ACTIVIDADES PARA EL ANÁLISIS DE DOCUMENTOS DE EVALUACIÓN.
– REUNIONES VIRTUALES DEL EQUIPO DE TRABAJO DE SEGUIMIENTO DE CALIDAD TOTAL.
– ELABORACIÓN DEL INFORME FINAL.
– REUNIÓN FINAL DE TRABAJO DEL EQUIPO DE COORDINACIÓN.
Todo el proceso de evaluación se ha realizado a través del SEGUIMIENTO DE LA CALIDAD TOTAL. El EQUIPO DE TRABAJO ha sido coordinado por LUIS GÓMEZ ESTRADA de IKASIA TECHNOLOGIES, en este equipo también ha participado: Víctor García (REDTREE), Eleftheria Skordalaki (NTUA), Senentxu Lanceros (UNIVERSIDADE DO MINHO), Juliana Alice Ferreira Oliveira (NANOPAINT) y Fabienne Vidal (GRETA DU VELAY).
.
PRUEBAS PILOTO
En el seno del proyecto: ”FROM LITERACY TO DIGITAL AND TECHNOLOGICAL TRAINING: INNOVATIVE AND CUSTOMIZABLE TRAINING ITINERARY TO FACILITATE EMPLOYABILITY AND INCLUSION OF ADULT PERSONS” se han realizado múltiples pruebas piloto en 7 centros educativos de personas adultas y una empresa tecnológica de España, Francia, Grecia y Portugal respectivamente.
Estas pruebas piloto se han centrado en el “CURSO ESTRUCTURADO Y PERSONALIZADO PARA LA FORMACIÓN DIGITAL DE ADULTOS: DESDE LA ALFABETIZACIÓN Y LA FORMACIÓN DIGITAL Y TECNOLÓGICA”, ya que este es el producto intelectual del proyecto, pero también se han testeado el resto de los resultados.
El principal objetivo de estas actividades ha sido mejorar la calidad de los resultados del proyecto a través de la participación de los propios estudiantes adultos, beneficiarios del proyecto en la evaluación y mejora de estos resultados, a la vez que se asegura que responden a sus necesidades de aprendizaje.
Las pruebas piloto han sido desarrolladas durante la fase final del proyecto, es decir durante los meses de Abril a Agosto de 2022. Los centros educativos y centros de trabajo implicados han sido los siguientes:
- Universidad de adultos – Universitat Poltitènica de València (España)
- Nanopaint – Design your technology (Portugal)
- Greta du Puy-en-Velay (Francia)
- Greta de Monistrol-sur-Loire (Francia)
- Greta d’Yssingeaux (Francia)
- École de la deuxième chance Haute-Loire (Francia)
- FormaLab (fablab du Greta du Velay) (Francia)
- Escuela de adultos de la National Technical University of Athens
Los resultados han sido muy positivos y satisfactorios ya que los estudiantes implicados mostraron una gran motivación por los contenidos del curso on-line, evaluaron la calidad del curso como muy buena e hicieron propuestas de mejora para los resultados del proyecto. También se pudo contar con la participación de profesores y expertos de las empresas implicadas.
Por último, cabe destacar que la realización de estas pruebas piloto también ha potenciado la difusión y el impacto de los resultados del proyecto en toda Europa, especialmente en España, Francia, Grecia y Portugal.
.
EVALUACIÓN EXTERNA
Para validar la calidad del proyecto y de los resultados generados en el mismo se ha contactado con un amplio número de evaluadores internacionales expertos en el ámbito de la educación innovativa (Varios de ellos miembros de los comités de evaluación de los más relevantes congresos internacionales en materia de innovación educativa).
A continuación, listamos el conjunto de expertos que han evaluado el proyecto:
| EXPERTO | DISCIPLINA/ENTIDAD | PAÍS |
| David Martí | Industrial Engineering | ESPAÑA |
| Luis Gómez | Electronics Engineering | ESPAÑA |
| Agustín López | Journalism | ESPAÑA |
| Ignacio Candel | Chemical Engineering | ESPAÑA |
| Antonio García | Industrial Engineering | ESPAÑA |
| Javier Martí | Computer Science Engineering | ESPAÑA |
| Mª Jesús Suesta | Tourism | ESPAÑA |
| Jose Luis Bernat | Software Engineering | ESPAÑA |
| Chelo González | Food Technology | ESPAÑA |
| Wendy Gorton | Educational Technology | USA |
| Mónica Fernández | Communication & Public Relations | ESPAÑA |
| Eladio Duque | Marketing & Public Relations | ESPAÑA |
| Juanan Herrero | Graphic Design | ESPAÑA |
| Jose F. Cabeza | Organic Chemistry | ESPAÑA |
| Joanna Lees | Veterinary Medicine | FRANCIA |
| Ana Tomás | Architecture | ESPAÑA |
| Ignacio Ballester | Energetic Engineering | ESPAÑA |
| Iván Martínez | Architecture | ESPAÑA |
| Miguel Peiró | Audiovisual Production | ESPAÑA |
| Xema Pedrós | Audiovisual Production | ESPAÑA |
| Javier Domenech | Industrial Engineering | ESPAÑA |
| Lorena López | Law and Business Administration | ESPAÑA |
| Sergio Pérez | Mechanical Engineering | ESPAÑA |
| Ismael Serrano | Business and Administration Management | ESPAÑA |
| Xavier Lefranc | Materials Engineering | FRANCIA |
| Norma Barrachina | Law | ESPAÑA |
| Amparo Girós | Genomics | ESPAÑA |
| Elena Ors | Veterinary Medicine | ESPAÑA |
| Maria Porcel | Chemical Engineering | ESPAÑA |
| Achim Dannecker | Fachhochschule Nordwestschweiz FHNW | SUIZA |
| Adriana Agnes Repellin-Moreno | Universidad Panamericana | MEXICO |
| Aileen Cotter | Cork Institute of Technology | IRLANDA |
| Akihiro Maeda | Ryukoku University | JAPÓN |
| Alan Belcher | Ashford University | ESTADOS UNIDOS |
| Alia Ammar | Drexel University | ESTADOS UNIDOS |
| Ana Henriques | Instituto de Educação da Universidade de Lisboa | PORTUGAL |
| Ana Paula Lopes | Polytechnic Institute of Oporto | PORTUGAL |
| Anna Romagnuolo | University of Tuscia | ITALIA |
| Annette Redmon | University of Cincinnati | ESTADOS UNIDOS |
| Anemona Peres | Frontex | POLONIA |
| Asako Ohno | Osaka Sangyo University | JAPÓN |
| Bob Barrett | American Public University | ESTADOS UNIDOS |
| Boza Tasic | Ryerson University | CANADA |
| Bozena Mannova | Czech Technical University in Prague | REPÚBLICA CHECA |
| Breno Deffanti | Graded – The American School of São Paulo | BRASIL |
| Brian Garibaldi | Johns Hopkins University School of Medicine | ESTADOS UNIDOS |
| Catherine O’Donnell | Ulster University | UK |
| Chang-Tik Chan | Monash University MALASIA | MALASIA |
| Chiew Hong Ng | National Institute of Education | SINGAPUR |
| Christopher Evans | Cardiff University | UK |
| Christopher Mattatall | University of Lethbridge | CANADA |
| Craig Loewen | University of Lethbridge | CANADA |
| Craig Walker | Oklahoma State Department of Education | ESTADOS UNIDOS |
| Cynthia Rosas Magallanes | Instituto Mexicano del Seguro Social (IMSS) | MEXICO |
| Dania Bilal | University of Tennessee, Knoxville | ESTADOS UNIDOS |
| Daniel Abrahams | University of Arkansas – Fayetteville | ESTADOS UNIDOS |
| Darren Falconer | The University of Western Australia | AUSTRALIA |
| David Jennings | University College Dublin | IRLANDA |
| Eulalia Tramuns | Escola Horitzó in Barcelona | ESPAÑA |
| Elmaziye Özgür | Eastern Mediterranean University | CHIPRE |
| Ewa Bogacz-Wojtanowska | Jagiellonian University | POLONIA |
| Fausto Brevi | Politecnico di Milano | ITALIA |
| Fernando Enrique Ortiz Rodriguez | Universidad Autonoma de Tamaulipas | MEXICO |
| Fiachra Ó Súilleabháin | University College Cork | IRLANDA |
| Filomena Soares | Polytechnic of Porto | PORTUGAL |
| FRANCIAsco Galati | University of Parma | ITALIA |
| Frank Brosow | University of Education Ludwigsburg | ALEMANIA |
| Hanna-Riitta Kymäläinen | University of Helsinki | FINLANDIA |
| Helen Reddy | University of Nottingham | UK |
| Helmut Wöllik | Carinthia University of Applied Sciences | AUSTRIA |
| Hiroyuki Obari | Aoyama Gakuin University | JAPÓN |
| Iolie Nicolaidou | CHIPRE University of Technology | CHIPRE |
| Jacqueline Baxter | The Open University | UK |
| James Mackay | Wellington Institute of Technology | NUEVA ZELANDA |
| Jaroslaw Kujawski | University of Gdansk | POLONIA |
| Jenny Eppard | Zayed University | EMIRATOS ÁRABES |
| Joanna Richardson | City, University of London | UK |
| João Monteiro | ISPGAYA – Instituto Superior Politécnico Gaya | PORTUGAL |
| John Craft | Appalachian State University | ESTADOS UNIDOS |
| Joseph Agbenyega | Emirates College for Advanced Education | EMIRATOS ÁRABES |
| Judith Szerdahelyi | Western Kentucky University | ESTADOS UNIDOS |
| Kari Krell | MacEwan University | CANADA |
| Kay Gallagher | Zayed University | EMIRATOS ÁRABES |
| Jana Bérešová | University of Trnava | SLOVAKIA |
| Jane Davies | University of Nottingham | MALASIA |
| Kathleen O’Sullivan | University College Cork | IRLANDA |
| Kari Krell | MacEwan University | CANADA |
| Kay Gallagher | Zayed University | EMIRATOS ÁRABES |
| Laila Nordstrand Berg | Western NORUEGA University of Applied Sciences | NORUEGA |
| Laurie Henry | Salisbury University | ESTADOS UNIDOS |
| Luis Roseiro | Instituto Superior de Engenharia de Coimbra | PORTUGAL |
| Luke Raeside | Technological University Dublin | IRLANDA |
| Laura Zizka | Ecole Hôtelière de Lausanne / HES-SO University of Applied Sciences and Arts Western SUIZA | SUIZA |
| Leonor Silva de Mattos | University of Hertfordshire | UK |
| Louise Robson | University of Sheffield | UK |
| Manuel Gericota | Polytechnic of Porto | PORTUGAL |
| Maria Rudneva | RUDN University (Peoples’ Friendship University of Russia) | RUSSIAN FEDERATION |
| Martha Leal-Gonzalez | Institute of Innovation and Technology Transfer of Nuevo Leon | MEXICO |
| Matome Mashiapata | University of South Africa | SOUTH AFRICA |
| Mayaugust Finkenberg | Stevenson University | ESTADOS UNIDOS |
| Mike Hillis | California Lutheran University | ESTADOS UNIDOS |
| Murali Venkatesh | Syracuse University | ESTADOS UNIDOS |
| Maria Luisa Spreafico | Politecnico di Torino | ITALIA |
| Maria Susy Rogers | The University of South Wales | UK |
| Marion Milton | Unviersity of Notre Dame | AUSTRALIA |
| Martina Bode | University of Illinois at Chicago | ESTADOS UNIDOS |
| Michelle Flood | Royal College of Surgeons | IRLANDA |
| Monika Jakubiak | Maria Curie-Sklodowska University | POLONIA |
| Nathalie Wessseling | Amsterdam University of Applied Sciences | PAÍSES BAJOS |
| Orlando Belo | Universidade do Minho | PORTUGAL |
| Paul Fenn | University of Sheffield | UK |
| Paul Holland | Swansea University | UK |
| Paul Hunter | IMD, International Institute for Management Development | SUIZA |
| Peter Gabor | University of Calgary | CANADA |
| Peter Haber | Salzburg University of Applied Sciences | AUSTRIA |
| Pia Palotie | Valmennuskeskus Public | FINLANDIA |
| Pirkko Pollari | JAMK University of Applied Sciences | FINLANDIA |
| Polona Gradišek | University of Ljubljana | SLOVENIA |
| Richard Spencer | Middlesbrough College | UK |
| Rosa Cendros Araujo | Western University | CANADA |
| Salman Azhar | Auburn University | ESTADOS UNIDOS |
| Rebecca Allen | University of Cincinnati | ESTADOS UNIDOS |
| Sandra Gomes | IPAM | PORTUGAL |
| Sean Lancastle | University of Bristol | UK |
| Sérgio Luis Monteiro da Silva | CNA – Cultural Norte Americano | BRASIL |
| Sinéad McCotter | University of York | UK |
| Sylvia Dempsey | Cork Institute of Technology | IRLANDA |
| Siobhan O’Sullivan | Khalifa University in Medical Education | EMIRATOS ÁRABES |
| Suzy Connor | Kyushu University | JAPÓN |
| Teemu Patala | Context Learning FINLANDIA Oy | FINLANDIA |
| Teresa Cardoso | Universidade Aberta, LE@D | PORTUGAL |
| Taija Votkin | Aalto University | FINLANDIA |
| Taketoshi Yokemura | Shibaura Institute of Technology | JAPÓN |
| Tammy Ladwig | University of Wisconsin Fox Valley | ESTADOS UNIDOS |
| Thomas Lavery | The Royal Academy of Engineering | UK |
| Thomas Rachfall | Hochschule Merseburg | ALEMANIA |
| Tunde Szecsi | Florida Gulf Coast University | ESTADOS UNIDOS |
| Victor Fester | University of Waikato | NUEVA ZELANDA |
| Victoria Brennan | Liverpool John Moores University | UK |
| Victoria Kompanets | Lappeenranta University of Technology | FINLANDIA |
| Wayne Bailey | The University of Huddersfield | UK |
| Wendy Gorton | EdTechTeam | ESTADOS UNIDOS |
.
RESULTADOS DE LA EVALUACIÓN
