Issuu on Google+

Université Paul Sabatier Toulouse 3

Évaluation des formations et des enseignements

Guide d’évaluation des formations 2007-2008 à l’usage des responsables d’évaluation

Service Universitaire de Pédagogie Université Paul Sabatier Toulouse 3 118, route de Narbonne – 31062 TOULOUSE Téléphone : 05 61 55 77 40 – Télécopie : 05 61 55 81 08 Courriel : evalsup@cict.fr – Site web : sup.ups-tlse.fr


Introduction

L’activité d’évaluation des formations et des enseignements par les étudiants est rattachée au SUP (Service Universitaire de Pédagogie). L’objectif est d’assurer une cohérence entre l’évaluation et les autres champs d’action du SUP que sont l’aide à l’innovation pédagogique (avec en particulier les TICE) et la formation continue des enseignants. Pour l’année 2007-08, en accord avec le CEVU, le SUP a choisi d’axer la campagne d’évaluation des formations par les étudiants sur les niveaux L2 et L3. Nous proposons ce guide aux responsables d’évaluation pour les informer sur l’ensemble du dispositif mis en place et les accompagner à chacune des étapes. Il est aussi disponible avec l’ensemble des informations concernant les évaluations (procédures, archives des résultats et des comptes rendus de commissions paritaires) sur le site web du SUP.

Pour une lecture facile : - les mots en vert renvoient au lexique page 8 - des spécimens de documents sont joints en annexe page 9

Pour toute information :

Contact : Michel DELPECH Service Universitaire de Pédagogie er Bâtiment U4 – 1 étage – Porte 159 Téléphone : 05 61 55 77 40 – Télécopie : 05 61 55 81 08 Courriel : evalsup@cict.fr – Site web : sup.ups-tlse.fr

service universitaire de pédagogie

2

Guide d’évaluation 2007-2008


Les différente étapes de la procédure d’évaluation

Ce tableau indique chronologiquement les étapes de la procédure d’évaluation d’une formation. Chaque étape est détaillée dans la suite du guide (n˚ de page indiquée dans la dernière colonne). Chaque responsable d’évaluation établit le calendrier d’évaluation de sa formation ; toutefois, l’envoi du compte rendu de la commission d’évaluation (étape 10) doit intervenir au plus tard fin juin 2008, de façon à être pris en compte dans le bilan final.

Étape

Acteur(s)

Page

1

Réunion d’information

SUP + responsables d’évaluation

4

2

Préparation des évaluations

Responsable d’évaluation + équipe pédagogique

4

3

Envoi du matériel d’évaluation

SUP

5

4

Préparation de la commission paritaire

Responsable d’évaluation

5

5

Remplissage des questionnaires et envoi au SUP

Responsable d’évaluation + étudiants

5

6

Traitement optique des questionnaires et retour aux formations

SUP

6

7

Première analyse des résultats d’évaluation

Responsable d’évaluation + équipe pédagogique

6

8

Réunion de la commission paritaire

Responsable d’évaluation + enseignants + étudiants

6

9

Traitement des propositions de la commission

Responsable d’évaluation + équipe pédagogique + directeur de composante

7

10

Rédaction du compte rendu et envoi au SUP

Responsable d’évaluation

7

Réunion bilan des évaluations

SUP + CEVU + directeurs composantes + responsables d’évaluation, de domaine et de mention

7

11

service universitaire de pédagogie

3

Guide d’évaluation 2007-2008


Détail de la procédure d’évaluation

1

Acteur(s) :

Réunion d’information des responsables d’évaluation

SUP + responsables d’évaluation

Objectifs : • informer les responsables d’évaluation sur la procédure • collecter les informations nécessaires à l’enregistrement des évaluations

Les responsables d’évaluation doivent avoir une vision claire et globale de l’ensemble du processus d’évaluation ainsi que de ses enjeux. Leur présence à cette réunion est donc indispensable. En effet, pour qu’une campagne d’évaluation se déroule correctement et constitue un point de départ pour des projets pédagogiques, il est essentiel que tous les acteurs des formations soient bien informés et conscients des bénéfices possibles de cette démarche. À faire par le responsable d’évaluation : • réunir pour cette occasion le code Apogée de l’étape concernée et le nombre d’étudiants inscrits • remplir la fiche « Demande d’évaluation d’une formation » [annexe 1]

2

Acteur(s) :

Préparation des évaluations

Responsable d’évaluation + équipe pédagogique

Objectif : • organiser l’opération d’évaluation de la formation avec l’équipe des enseignants.

La réflexion initiée par l’évaluation sera d’autant plus fructueuse qu’elle impliquera toute l’équipe des enseignants concernés par la formation. Cette étape permet de les informer et de les faire participer à l’organisation locale. Du côté des étudiants, il y a aussi un travail d’information nécessaire pour une participation effective à cette démarche dont ils sont des acteurs essentiels. Les étudiants qui seront membres de la commission paritaire ont un rôle de représentant à jouer ; ils doivent consulter l’ensemble de leur promotion pour présenter à la commission les opinions du groupe. Il faut qu’ils en soient clairement informés par le responsable d’évaluation. Petit détail pour la rédaction des questions au choix de l’équipe pédagogique : attention de formuler les questions de façon à être en cohérence avec les appréciations proposées par le questionnaire (tout à fait, plutôt oui, plutôt non, pas du tout, sans avis). À faire par le responsable d’évaluation : • informer les étudiants de la campagne d’évaluation • informer l’équipe pédagogique sur la campagne d’évaluation • rédiger avec elle le libellé des questions au choix de l’équipe pédagogique • choisir avec elle les enseignants, personnels techniques et administratifs et les étudiants qui composeront la commission • fixer avec elle la date de la réunion de la commission paritaire d’évaluation • communiquer cette date au SUP

service universitaire de pédagogie

4

Guide d’évaluation 2007-2008


3

Acteur(s) :

Envoi du matériel d’évaluation

SUP

Objectif : • fournir au responsable de l’évaluation, le matériel nécessaire au remplissage des questionnaires : - les questionnaires d’évaluation de la formation [annexe 2] - le code de l’évaluation - les « Recommandations pour l’organisation pratique » [annexe 3]

Les deux premiers éléments sont indispensables pour l’exploitation des questionnaires par le lecteur optique. Les recommandations permettent de réunir des conditions favorables à un bon taux de retour des questionnaires et à la collection d’informations non biaisées. Il faut veiller à ce que l’enseignant qui se chargera de cette étape de remplissage des questionnaires ait bien en main tous ces éléments qui garantissent la qualité des réponses.

4

Acteur(s) :

Préparation de la commission paritaire d’évaluation

Responsable d’évaluation

À faire par le responsable d’évaluation : • réserver une salle • envoyer les convocations aux participants à la commission

La commission paritaire est composée d’autant d’étudiants que de membres de l’équipe pédagogique au sens large (enseignants + personnels techniques et/ou administratifs). Les enseignants de langue, en particulier, ne doivent pas être oubliés. Le respect de la parité est indispensable pour permettre une discussion équilibrée entre les deux parties, cela suppose cependant deux préalables : – avoir informé les étudiants de la démarche d’évaluation et de l’intérêt qu’ils peuvent trouver à y participer ; – avoir défini avec eux la notion de « représentants étudiants », dont le rôle est de transmettre en commission paritaire l’avis de l’ensemble du groupe après consultation.

5

Acteur(s) :

Remplissage des questionnaires et envoi au SUP

Responsable d’évaluation + étudiants

Pour que les étudiants se sentent concernés et motivés, cette étape doit être réalisée dans le calme, au début d’une séance d’enseignement. Des conditions normales permettent de réaliser une évaluation en 15 minutes environ. À faire par le responsable d’évaluation : • distribuer les questionnaires aux étudiants • indiquer aux étudiants le code de l’évaluation • indiquer aux étudiants le libellé des questions aux choix (distribution d’un document ou inscription au tableau) • retourner les questionnaires (utilisés et non utilisés) au SUP en utilisant l’enveloppe retour fournie

service universitaire de pédagogie

5

Guide d’évaluation 2007-2008


6

Acteur(s) :

Traitement optique des questionnaires et retour aux formations

SUP

Objectifs : • traiter par lecture optique les questionnaires remplis par les étudiants • présenter les résultats de l’évaluation sous forme d’histogrammes et les communiquer par courrier électronique au responsable de l’évaluation • retourner les questionnaires traités au responsable de l’évaluation • fournir au responsable de l’évaluation le modèle de « Compte rendu de réunion de la commission d’évaluation » [annexe 4]

7

Première analyse des résultats d’évaluation

Acteur(s) :

Responsable d’évaluation + équipe pédagogique

Objectifs : • prendre connaissance des résultats de l’évaluation • exploiter les commentaires et réponses aux questions ouvertes (verso des questionnaires) • préparer l’animation de la réunion de la commission

Il s’agit là de préparer la commission paritaire. Cela peut se faire avec tous les enseignants volontaires, pour permettre à ceux qui ne font pas partie de la commission paritaire de participer. À faire par le responsable d’évaluation : • réunir toute l’équipe des enseignants pour l’informer des résultats et l’associer au travail d’analyse.

8

Acteur(s) :

Réunion de la commission paritaire d’évaluation

Responsable d’évaluation + enseignants + étudiants

Objectifs : • faire la synthèse des résultats de l’évaluation • formuler les propositions destinées à améliorer la formation et pouvant être traitées : - localement (équipe pédagogique et directeur de composante) - globalement (par l’établissement)

Le distinguo entre les niveaux local et global doit permettre un meilleur traitement des questions. Tout ce qui est du ressort de l’équipe pédagogique ou du directeur de composante sera traité rapidement grâce à une boucle courte. Pour les questions liées au fonctionnement d’ensemble de l’établissement, elles seront posées, en fin d’année universitaire, dans le cadre d’une réunion regroupant tous les responsables concernés (services, directeurs de composantes, vice présidente CEVU). Il faut donc que les comptes rendus d’évaluation distinguent clairement ces deux types de questions. À faire par le responsable d’évaluation : • présenter une synthèse des résultats d’évaluation • animer la discussion • organiser la prise de notes pour le compte rendu

service universitaire de pédagogie

6

Guide d’évaluation 2007-2008


9

Acteur(s) :

Traitement des propositions de la commission

Responsable d’évaluation + équipe pédagogique + directeur de composante

Objectif : • compléter le compte rendu d’évaluation en précisant les réponses faites aux propositions de la commission paritaire.

Cette étape peut nécessiter un échange avec le directeur de la composante afin que tous les points soulevés par la commission d’évaluation débouchent sur une réponse qui figurera dans le compte rendu. À faire par le responsable d’évaluation : • collecter les réponses aux propositions pouvant être traitées localement : - par l’équipe pédagogique - par le directeur de la composante

10

Acteur(s) :

Rédaction du compte rendu et envoi au SUP

Responsable d’évaluation

Lors de la rédaction de la rubrique « synthèse des résultats de l’évaluation » du compte rendu de la commission d’évaluation, il est important de rester compréhensible à toute personne extérieure à la formation ou à la commission. Tous les sujets qui ont suscité un débat pendant la commission doivent y figurer. L’évaluation doit être le point de départ d’une réflexion pédagogique au sein de chaque formation, mais l’objectif de la campagne d’évaluation est aussi de donner une lecture globale des niveaux M1 et M2 dans notre université. Pour cela, une synthèse doit être opérée par le SUP qui regroupe l’ensemble des comptes rendus. À faire par le responsable d’évaluation : • rédiger le compte rendu de la commission d’évaluation (utiliser impérativement le modèle fourni par le SUP [annexe 4] ) • le faire parvenir au SUP par courrier électronique

11

Acteur(s) :

SUP + CEVU + invités + directeurs de composante + responsables de domaine et de mention + responsables d’évaluation

Réunion bilan des évaluations

Objectif : • faire un bilan de l’évaluation • faire le point sur les questions qui relèvent du fonctionnement global de l’établissement.

Cette dernière étape du processus d’évaluation doit permettre de mettre en valeur : - les questions récurrentes posées par les étudiants - les évolutions pédagogiques esquissées en réponses à ces questions - les points forts et les points faibles de notre dispositif de formation. Elle peut être aussi l’occasion de discuter du dispositif d’évaluation lui-même ; en tant qu’acteurs de terrain, les responsables d’évaluation peuvent amener une vision précise sur l’ensemble du processus. Enfin, elle doit permettre de poser les questions liées au fonctionnement de l’établissement.

service universitaire de pédagogie

7

Guide d’évaluation 2007-2008


Lexique

• Code de l’évaluation Chaque évaluation est identifiée par un code lecture optique que les étudiants doivent reporter, en cochant les alvéoles correspondantes, au début de questionnaire. Lors de l’évaluation, il est recommandé d’inscrire lisiblement au tableau ce code de l’évaluation (fourni par le SUP avec les questionnaires vierges).

• Commission paritaire d’évaluation La commission d’évaluation est composée de représentants des étudiants et de l’équipe pédagogique au sens large (enseignants, personnels technique et administratif), en veillant à la parité entre ces deux composantes afin de favoriser un échange équilibré. Cette étape est le moment clef du processus d’évaluation. Pour qu’elle soit l’occasion d’une discussion fructueuse, enseignants et étudiants doivent l’avoir préparée.

• Questionnaire d’évaluation Le questionnaire d’évaluation [annexe 2] est destiné à recueillir : - au recto : les appréciations des étudiants. Le traitement de ces informations par lecture optique permet de fournir les résultats de l’évaluation ; - au verso : les réponses aux questions ouvertes ainsi que des commentaires. Cette face est analysée par l’équipe pédagogique.

• Questions au choix de l’équipe pédagogique Pour donner de la souplesse à l’évaluation, le questionnaire se termine par dix questions dont le libellé est laissé à l’initiative de l’équipe pédagogique. Au moment de l’évaluation, le libellé précis de chacune de ces questions doit être notifié aux étudiants soit par la distribution d’un document complémentaire soit par inscription au tableau. Attention : - rien ne doit être inscrit sur le questionnaire sous peine d’en interdire le traitement optique ; - les libellés des questions au choix ne figureront pas sur les résultats de l’évaluation. Ces derniers feront référence aux lettres A, B, C, etc.

service universitaire de pédagogie

8

Guide d’évaluation 2007-2008


Annexe 1 : fiche « Demande d’évaluation d’une formation »

service universitaire de pédagogie

9

Guide d’évaluation 2007-2008


Annexe 2 : questionnaire « Votre évaluation de la formation » Recto

service universitaire de pédagogie

10

Guide d’évaluation 2007-2008


Annexe 2 : questionnaire « Votre évaluation de la formation » Verso

service universitaire de pédagogie

11

Guide d’évaluation 2007-2008


Annexe 3 : « Recommandations pour l’organisation pratique »

service universitaire de pédagogie

12

Guide d’évaluation 2007-2008


Annexe 4 : « Compte rendu de réunion de la commission d’évaluation » Page 1

service universitaire de pédagogie

13

Guide d’évaluation 2007-2008


Annexe 4 : « Compte rendu de réunion de la commission d’évaluation » Page 2

service universitaire de pédagogie

14

Guide d’évaluation 2007-2008


Guide évaluation 07-08