ARACIS CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA 2015 Asigurarea calităţii în învăţământul superior Procesul de evaluare externă şi Rolul evaluatorilor Prof. Radu Mircea Damian

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA I. INTRODUCERE Motto: “Asigurarea calităţii este în primul rând responsabilitatea universităţii”

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Procesul de evaluare externă în România: Toate instituţiile (de stat şi particulare) Instituţional/programe de studii/domenii Obligaţie legală: autorizare/acreditare/evaluare periodică Finalizare prin calificative/avize comunicate MECTS

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Etape: conform Metodologiei şi Ghidurilor Standarde şi condiţii obligatorii pentru Spaţiul European al Învăţământului Superior (cf. ESG) (http://www.enqa.eu/files/ESG_3edition%20%282%29.pdf http://www.enqa.eu/files/ESG%20in%20Romanian.pdf) NOTA: La Conferinta ministeriala de la Erevan (14-15 Mai 2015) au fost adoptate noile ESG – vezi site-ul ENQA

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Elemente cheie (standarde şi proceduri cf. ESG): Raport de autoevaluare şi anexe: informaţii recente, validate şi asumate de instituţie Evaluare externă (“peer review”), cu accent pe dezvoltare şi îmbunătăţirea calităţii Deficienţele – dacă există – nu pot fi ignorate, cu consecinţele care decurg din reglementările în vigoare

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Cum se defineşte calitatea – domeniile de calitate prevăzute de lege Cum se apreciază nivelul de calitate ? standarde, criterii, indicatori de performanţă Cum se defineşte “excelenţa” ? Întrebări: “permanente”, “deschise”, “cu răspunsuri multiple”, “cu răspunsuri de etapă” etc.

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA II. EVALUATORII: CONDIŢII

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Evaluatorii (“peer reviwers”): Cel puţin doi, deobicei mai mulţi Acoperă toate domeniile de evaluare Unul dintre evaluatori este “coordonator” (Un evaluator poate primi sarcina de a redacta raportul de evaluare) Evaluatorii pot fi insoţiţi de un membru al personalului agenţiei

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce condiţii trebuie să îndeplinească evaluatorii: Să fie “egali – (peers)!”: împărtăşesc valorile, limbajul, “cultura” instituţiei/programului de studii pe care îl evaluează Să nu aibă nicio legatură cu instituţia/programul de studii evaluat

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA III. CUM ACŢIONEAZĂ ŞI CE SE ANGAJEAZĂ SĂ FACĂ EVALUATORII

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Cum trebuie să acţioneze evaluatorii: Să fie “ochii şi urechile agenţiei” Să nu se transforme în “consultanţi” pentru instituţie/program Să nu avanseze niciun fel de indicaţie asupra unei eventuale decizii pe care o vor lua/propune Să nu uite că sunt EVALUATORI obiectivi

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce trebuie să urmărească evaluatorii: Raportul de autoevaluare: structură, dacă este complet, rezultatele prezentate, impactul asupra instituţiei/programului Dacă standardele/criteriile/indicatorii sunt îndepliniţi Relevanţa şi viabilitatea planului de îmbunătăţire a calităţii prezentat în Raportul de autoevaluare şi capacitatea instituţiei de a-şi rezolva problemele

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (1) : Să cunoască în detaliu procedurile de evaluare externă şi standardele agenţiei Să studieze Raportul de autoevaluare şi anexele sale Să participe activ la activităţile pregătitoare ale evaluării

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (2) : Să se manifeste ca membii activi ai echipei de evaluare, sub conducerea coordonatorului Să contribuie la adoptarea unui program de evaluare/vizită fezabil Să-şi programeze timpul astfel încât să participe la tot programul vizitei

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Angajamentele asumate de evaluatori odată cu acceptarea misiunii – înainte de vizită (3) : Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute Să păstreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce trebuie să facă evaluatorii în timpul vizitei (1): Să se familiarizeze cu instituţia/programul: să înţeleagă natura instituţiei/programului, “cultura instituţională” Să păstreze permanent o atitudine respectuoasă faţă de reprezentanţii instituţiei

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce trebuie să facă evaluatorii în timpul vizitei (2): Să lucreze în echipă: să comunice cu toţi membrii echipei, inclusiv cu studenţii, care sunt membrii cu drepturi depline ai acesteia Să ia parte la toate activităţile Să facă bilanţul activităţii zilnice: în acest mod se pun bazele rapoartelor echipei de evaluare!

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Cum trebuie să acţioneze evaluatorii în timpul vizitei (3): Să nu facă recomandări specifice Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute Să pastreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce trebuie să facă evaluatorii după vizită (1): Să analizeze constatările şi să ajungă la un consens Să structureze constatările, pe bază de dovezi şi argumente care susţin decizia luată prin consens Să contribuie la prioritizarea elementelor care au condus la decizie (calificativ propus)

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Ce trebuie să facă evaluatorii după vizită (2): Să contribuie la pregătirea prezentarii finale Să-şi amintească permanent că activitatea de evaluare trebuie să reflecte obiectiv “starea calităţii” instituţiei/programului şi NU eventuale preferinţe personale sau idei preconcepute Să pastreze confidenţialitatea: constatările vizitei sunt ale evaluatorilor şi se vor reflecta numai în raportul acestora

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA IV. PREGĂTIREA EVALUĂRII/VIZITEI

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Întâlnirea pregătitoare a membrilor echipei, condusă de coordonator: Coordonatorul se asigură că toţi membrii echipei au studiat şi înţeles toate documentele, repartizează sarcinile şi definitivează agenda Fiecare membru al echipei îşi înţelege şi îşi asumă responsabilităţile individuale

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Responsabilităţile individuale ale evaluatorilor: Să înţeleagă standardele/criteriile/indicatorii de evaluare Să analizeze atent toate informaţiile din Raportul de autoevaluare şi din anexele acestuia

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA V. CUM SĂ SE COMPORTE EVALUATORII ? CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Relaţia cu “instituţia” (1) Să ţină seama că vizita se desfăşoară după o perioada intensă de pregătire la nivelul instituţiei/programului de studii Să ţină seama că instituţia doreşte să scoată în evidenţă progresele realizate în perioada de după evaluarea anterioară dar ... există însă şi situaţii mai puţin fericite ...

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Relaţia cu “instituţia” (2) Să ţină seama de relaţia “delicată” (uneori “ambiguă”?) între instituţie şi evaluatori: Instituţia “îi recunoaşte a priori ca experţi” Instituţia apreciază activitatea şi contribuţia lor la îmbunătăţirea calităţii Dar ....

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA Relaţia cu “instituţia” (3) Instituţia este conştientă de “riscul competiţiei” Instituţia “se teme” să prezinte lucruri “neplăcute” + “defavorabile “ Instituţia are aşteptări mari de la evaluare – şi-a propus şi doreşte calificative favorabile

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (1) : CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Cum pot să răspundă evaluatorii aşteptărilor instituţiei (1) : Să explice că evaluarea este efectuată de persoane care înţeleg şi împărtăşesc valorile instituţiei vizitate Să sublinieze că baza evaluarii este Raportul de autoevaluare arătând astfel că părerea instituţiei despre ea însăşi este înţeleasă şi respectată

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (2) : CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Cum pot să răspundă evaluatorii aşteptărilor instituţiei (2) : Să creeze o relaţie bazată pe încredere: să păstreze o parte din timp pentru întrebări (chiar dacă aceeaşi întrebare este pusă de mai multe ori!) Să insiste asupra necesităţii promovării calităţii

Cum pot să răspundă evaluatorii aşteptărilor instituţiei (3) : CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Cum pot să răspundă evaluatorii aşteptărilor instituţiei (3) : Să păstreze o atitudine respectuoasă Să-şi reamintească permanent că sunt reprezentanţii agenţiei Să păstreze confidenţialitatea (inclusiv despre alte evaluări la care au participat!) Un comportament adecvat al evaluatorilor stimulează interesul instituţiei pentru aplicarea măsurilor de asigurare a calităţii!!

CE NU TREBUIE SĂ FACĂ EVALUATORII (1): CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI CE NU TREBUIE SĂ FACĂ EVALUATORII (1): Să prezinte ca model propria instituţie! Să facă recomandări specifice Să aibă alte întâlniri cu reprezentanţii instituţiei, în afara agendei oficiale

CE NU TREBUIE SĂ FACĂ EVALUATORII (2): CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI CE NU TREBUIE SĂ FACĂ EVALUATORII (2): Să accepte “cadouri” – cu excepţia unor materiale cu caracter promoţional pentru instituţie Să-şi ofere serviciile pentru consultanţă ulterioară (cu caracter personal) sau să accepte invitaţii după terminarea vizitei

Ce înseamnă evaluarea pentru evaluatorul extern (1): CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Ce înseamnă evaluarea pentru evaluatorul extern (1): Proces de învăţare şi aprofundare a unor noi concepte, instrumente şi metodologii Expunerea propriei persoane la experienţe noi şi interesante Înţelegerea problemelor unor alte instituţii – colective - grupuri de “egali”

Ce înseamnă evaluarea pentru evaluatorul extern (2): CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Ce înseamnă evaluarea pentru evaluatorul extern (2): În fiecare instituţie sunt lucruri bune şi mai puţin bune: toate sunt importante! - Implicarea personală a evaluatorilor, obiectivitatea şi seriozitatea lor sunt esenţiale pentru calitatea procesului

Ce înseamnă evaluarea pentru evaluatorul extern (3): CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Ce înseamnă evaluarea pentru evaluatorul extern (3): Să înveţe să reziste presiunii unui proces extrem de complex dar totodată extrem de important şi interesant! Să înveţe să judece “cu sufletul” dar să-şi formuleze concluziile “cu mintea”! Să recunoască “excelenţa”, acolo unde există, fără a dispune însă de o “definiţie” universal valabilă a ei

Metodologia şi Ghidurile ARACIS CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Bibliografie: Metodologia şi Ghidurile ARACIS Maria Jose Lemaitre - Prezentarea “Aseguramiento de la calidad de la education superior. Taller de Pares Evaluadores”. INQAAHE GA, Taipei, Aprilie 2013 (cu permisiunea personală a autoarei)

CALITATEA ÎN ÎNVĂŢĂMÂNTUL SUPERIOR ÎN ROMÂNIA ŞI EUROPA ROLUL ŞI ACTIVITATEA EVALUATORILOR EXTERNI Scuze pentru a vă fi prezentat ceeace dvs. desigur ştiaţi! Mulţumesc pentru atenţie