• Like
  • Save
Présentation sur l'expérimentation menée autour de l'utilisation des Tests de Concordance de Script (TCS) en informatique à l'École Centrale de Nantes
Upcoming SlideShare
Loading in...5
×
 

Présentation sur l'expérimentation menée autour de l'utilisation des Tests de Concordance de Script (TCS) en informatique à l'École Centrale de Nantes

on

  • 2,251 views

L'École Centrale de Nantes est actuellement engagée dans un projet (fédérant, entre autres, les Ecoles des Mines de Nantes, d'Alès et de Douai, l'INSA de Rouen, l'Université de Bordeaux 2 et, ...

L'École Centrale de Nantes est actuellement engagée dans un projet (fédérant, entre autres, les Ecoles des Mines de Nantes, d'Alès et de Douai, l'INSA de Rouen, l'Université de Bordeaux 2 et, bien sûr, l'ECN) qui vise à assurer une meilleure évaluation du savoir-faire en informatique. Pour ce faire, la méthode envisagée est celle des tests de concordance de scripts, notés TCS.

L'objectif des TCS est d'évaluer le raisonnement des étudiants placés dans une situation professionnelle, et non pas leurs connaissances (ce qui peut déjà être fait par des méthodes "classiques", allant du QCM au devoir sur table). Les TCS constituent donc un outil d'évaluation complémentaire des procédures déjà existantes. Des études ont montré la fidélité et la validité des TCS pour différencier les étudiants en fonction de leur niveau d’expertise. Ils permettent de tester un grand nombre d’étudiants de façon standardisée, discriminante et objective.

Ils sont déjà largement utilisés dans de nombreuses universités relevant du secteur médical. Ils permettent d'évaluer le raisonnement en situation incertaine correspondant à la vie professionnelle. Ils mettent en jeu des problèmes mal définis, avec des données incertaines et pour lesquels plusieurs solutions sont possibles. Les raisonnements des étudiants sont alors confrontés à ceux d'experts.

Cette présentation a été effectué dans le cadre d'une réunion des correspondants TICE des différentes écoles Centrale.

Statistics

Views

Total Views
2,251
Views on SlideShare
2,238
Embed Views
13

Actions

Likes
0
Downloads
0
Comments
0

4 Embeds 13

http://www.slideshare.net 8
http://www.scoop.it 2
http://www.linkedin.com 2
http://www.onlydoo.com 1

Accessibility

Upload Details

Uploaded via as Adobe PDF

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

    Présentation sur l'expérimentation menée autour de l'utilisation des Tests de Concordance de Script (TCS) en informatique à l'École Centrale de Nantes Présentation sur l'expérimentation menée autour de l'utilisation des Tests de Concordance de Script (TCS) en informatique à l'École Centrale de Nantes Presentation Transcript

    • Tests de concordance de scripts Réunion EAT/TICE 30 juin 2009 Morgan Magnin MCF Centrale Nantes morgan.magnin@irccyn.ec-nantes.fr http://tinyurl.com/magnin-ecn http://twitter.com/morgan_it/
    • Contexte ● Projet UNIT : – Centrale Nantes – les Ecoles des Mines de Nantes, d'Alès et de Douai, – l'INSA de Rouen, – l'Université de Bordeaux 2 ● Objectif : assurer une meilleure évaluation du savoir-faire en informatique
    • Les TCS (1) ● Tests de concordance de script ● Instrument d'évaluation du raisonnement en contexte d'incertitude ● Complémentaires des procédures d'évaluation « traditionnelles » ● Issus du secteur médical – Université de Montréal
    • Les TCS (2) Image tirée de http://www.cme.umontreal.ca/tcs/
    • Les TCS (3) ● Score de l’étudiant proportionnel au nombre d’experts ayant choisi la même réponse ● Évalutoile : http://www.evalutoile.u-bordeaux2.fr/
    • TCS en informatique (1) ● Scénario : Jean-Pierre et Gwen réservent tous les deux une place dans le train Lyon-Nantes de 19h00 le 30 juin 2009. Lors de leur arrivée à la gare, ils se retrouvent avec la même place dans le même wagon. ● Hypothèse / Option : Vous supposez que le logiciel de réservation comporte un bug au niveau de la vérification d’attribution des places. ● Nouvelle donnée : Le problème ne se produit qu’une fois par an. ● Quel est l’effet de cette nouvelle donnée sur votre hypothèse ? □ Rend l'hypothèse beaucoup moins probable □ Rend l'hypothèse moins probable Proposition de Guillaume Moreau □ N'a aucun effet sur l'hypothèse (MCF Centrale Nantes) □ Rend l'hypothèse plus probable □ Rend l'hypothèse beaucoup plus probable
    • Cours impactés à Centrale Nantes ● EI1 : – Systèmes d'information et bases de données – Algorithmique et programmation ● EI2 : – Méthodes logicielles (Java, structures de données) ● EI3 Info : – Systèmes, réseaux et technologies de l'information – Bases de données
    • Avancées du projet à Centrale Nantes ● 25 vignettes créées ● Première expérimentation sur l'examen de « Systèmes d'information » – 26 juin 2009 – 108 étudiants – Évaluation d'après un panel de 9 experts – Justification des choix demandée aux étudiants
    • TCS en informatique (2) ● Scénario : Jean-Pierre et Gwen réservent tous les deux une place dans le train Lyon-Nantes de 19h00 le 30 juin 2009. Lors de leur arrivée à la gare, ils se retrouvent avec la même place dans le même wagon. ● Hypothèse / Option : Vous supposez que le logiciel de réservation comporte un bug au niveau de la vérification d’attribution des places. ● Nouvelle donnée : Le problème ne se produit qu’une fois par an. ● Quel est l’effet de cette nouvelle donnée sur votre hypothèse ? Experts Étudiants □ Rend l'hypothèse beaucoup moins probable 0% 19% □ Rend l'hypothèse moins probable 0% 19% □ N'a aucun effet sur l'hypothèse 55% 27% □ Rend l'hypothèse plus probable 22% 23% □ Rend l'hypothèse beaucoup plus probable 22% 11%
    • Conclusions partielles ● Évaluation du raisonnement et du savoir-faire – Pertinent – Efficace ● Particulièrement adapté pour : – Diagnostic – Conception ● Efforts sur l'écriture des vignettes : objectivité
    • Plan de mise en oeuvre de TCS 1.Établissement du référentiel de compétences 2.Conception de questions 3.Saisie des questions 4.Recueil de l’expertise 5.Expérimentations
    • Quelques références bibliographiques ● Site de référence : http://www.cme.umontreal.ca/tcs/ ● Conférence de Bernard Charlin : – Canal U : http://tinyurl.com/bcharlin-tcs – Supports : http://tinyurl.com/bcharlin-slides