44
Evaluation et validation de l’information sur Internet Journée d’étude des URFIST, 31 janvier 2007 1/44 Elisabeth Noël - Enssib, [email protected] Quelle évaluation des ressources pédagogiques ?

Quelle évaluation des ressources pédagogiques ?

Embed Size (px)

DESCRIPTION

Quelle évaluation des ressources pédagogiques ?. Un peu d’imagination. Mettons-nous un instant dans la peau d’un enseignant de biologie. Pour illustrer son cours, M. Denis-Norbert Allien souhaite trouver une simulation montrant que l’ADN est sous forme de double hélice. - PowerPoint PPT Presentation

Citation preview

Page 1: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 1/44 Elisabeth Noël - Enssib,

[email protected]

Quelle évaluation

des ressources pédagogiques ?

Page 2: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 2/44 Elisabeth Noël - Enssib,

[email protected]

Un peu d’imagination

• Pour illustrer son cours, M. Denis-Norbert Allien souhaite trouver une simulation montrant que l’ADN est sous forme de double hélice

• Mettons-nous un instant dans la peau d’un enseignant de biologie.

Page 3: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 3/44 Elisabeth Noël - Enssib,

[email protected]

Comment va-t-il faire ?

Page 4: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 4/44 Elisabeth Noël - Enssib,

[email protected]

Ou bien ?

Page 5: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 5/44 Elisabeth Noël - Enssib,

[email protected]

Page 6: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 6/44 Elisabeth Noël - Enssib,

[email protected]

Qu’est qu’une ressource pédagogique ?

Notion floue : Les articles scientifiques sont-ils des

ressources pédagogiques ?– Non, communication de l’avancée d’une

recherche– Oui, sert la réflexion et l’apprentissage→ c’est l’usage de la ressource, sa

caractérisation qui la détermine

Page 7: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 7/44 Elisabeth Noël - Enssib,

[email protected]

Quelques définitions Définition de Gérard Puimatto« La notion de ressource pédagogique (ou

éducative) est fortement liée à celle de document, et aux approches documentaires. Dans le domaine du multimédia, les "ressources multimédias pour l'éducation" constituent l'ensemble des informations, documents, logiciels, programmes, banques de données, etc. qui permettent de véhiculer, de transmettre ou d'appréhender des concepts et contenus d'enseignements »

Page 8: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 8/44 Elisabeth Noël - Enssib,

[email protected]

Robert Bibeau

« Toute entité numérique ou non susceptible d'être utilisée, réutilisée ou évoquée dans un contexte d'apprentissage à support technologique.  Le contenu numérique, les applications et les didacticiels utilisés dans un contexte d'apprentissage à support technologique. »

Page 9: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 9/44 Elisabeth Noël - Enssib,

[email protected]

La plus répandue

LOM« Toute entité (numérique ou non)

utilisée dans un processus d'enseignement, de formation ou d'apprentissage. »

Tout est alors objet pédagogique !

Page 10: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 10/44 Elisabeth Noël - Enssib,

[email protected]

D’autres introduisent la durée et la taille Wisconsin Online Resource Center « les objets pédagogiques sont des

petites unités d’apprentissage d’une durée comprise entre 2 et 5 minutes »

Page 11: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 11/44 Elisabeth Noël - Enssib,

[email protected]

Du coté des canadiens Philippe Flamand« Pour certains, un OA [objet d'apprentissage], c’est

une image, un bouton, un petit script Java, une séquence audio ou vidéo, un fichier PDF, un Flash, un Axel ou un site Web. Pour d’autres, c’est un scénario d’apprentissage, une activité pédagogique, une leçon, un module ou un cours complet. Le tout est sûrement sur support numérique? Est-ce adéquat uniquement pour la formation en entreprise? C’est vert ou c’est bleu? C’est grand ou petit, poilu ou pas? »

Page 12: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 12/44 Elisabeth Noël - Enssib,

[email protected]

Et surtout

Le même « Afin d’être significatif et promoteur

d’apprentissage, l’OA doit posséder intrinsèquement une intention, mais pas n’importe laquelle : une intention pédagogique ».

Page 13: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 13/44 Elisabeth Noël - Enssib,

[email protected]

Une notion floue

L’essentiel, intégrer les particularités de cet objet spécifique, à savoir le contexte d'usage de la ressource : pour quel niveau, quel age, dans quel type d'activité …?

L’indexation peut-elle être utile pour définir ces points ?

Page 14: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 14/44 Elisabeth Noël - Enssib,

[email protected]

Revenons à Denis-Norbert

Notre ami ne trouve rien de pertinent sur Google !

Il s’oriente alors vers des sites institutionnels

Page 15: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 15/44 Elisabeth Noël - Enssib,

[email protected]

Educnet

Label RIP (Reconnu d'Intérêt Pédagogique )

Dans la liste des produits labellisés, il trouve celui-ci

Collection d'animations scientifiques

distributeur : CARRE MULTIMEDIA

Page 16: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 16/44 Elisabeth Noël - Enssib,

[email protected]

Oui mais… Il n’accède qu’au résumé, pas à la

ressource

Et rien n’indique le niveau des étudiants auxquels les animations sont destinées

Page 17: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 17/44 Elisabeth Noël - Enssib,

[email protected]

Notre ami se souvient d’un site dont on lui a parlé lors d’un colloque aux USA

MERLOThttp://www.merlot.orgEt là, miracle, il peut faire une

recherche par type de ressources pédagogiques

Page 18: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 18/44 Elisabeth Noël - Enssib,

[email protected]

Page 19: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 19/44 Elisabeth Noël - Enssib,

[email protected]

Ce qu’il ne sait pas

1. MERLOT utilise le LOM pour l’indexation des ressources pédagogiques

Page 20: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 20/44 Elisabeth Noël - Enssib,

[email protected]

Le LOMLearning Object Metadat

LOM IEEE, standard LOMFR, norme française, profil

d’application du LOM Objectifs :

– Retrouver les ressources pédagogiques

Page 21: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 21/44 Elisabeth Noël - Enssib,

[email protected]

Le LOM, structure Classe 1. Général – description et

identification de la ressource. Classe 2. Cycle de vie –histoire de la

ressource et sur ses contributeurs. Classe 3. Meta-métadonnées – trace du

schéma de métadonnées utilisé. Classe 4. Technique – Caractéristiques

techniques pour l’exécution de la ressource sur un système informatique.

Page 22: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 22/44 Elisabeth Noël - Enssib,

[email protected]

Le LOM, structure Classe 5. Pédagogique – « Cette catégorie accomplit une fonction de

description pédagogique de la ressource. S‘y retrouvent, pour ne citer que certains des éléments, le contexte d’utilisation (scolaire, secondaire, supérieur, formation continue, etc.), le type de public cible (enseignant, auteur, apprenant, gestionnaire), la difficulté, l’âge des apprenants auxquels la ressource est destinée, le temps d’apprentissage type, la langue des apprenants, le niveau et le type d’interactivité. »

Page 23: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 23/44 Elisabeth Noël - Enssib,

[email protected]

Le LOM, structure Classe 6. Droits – Conditions légales d’utilisation

de la ressource : coût, licences, droits d’auteur. Classe 7. Relation – Relations entre deux

ressources physiques (est partie de, est version de, est format de, est référencée par, etc.)

Classe 8. Commentaire – Remarques à propos de la ressource. « Cette catégorie apporte des informations complémentaires utiles à l’évaluation de la ressource ».

Classe 9. Classification – Catégorie qui permet d’assigner des classifications et des vocabulaires contrôlés à une ressource.

Page 24: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 24/44 Elisabeth Noël - Enssib,

[email protected]

Limites du LOM

Approche behavioriste Problème des vocabulaires :

comment garantir l’interoperabilité en gardant la spécificité des domaines et des disciplines

Page 25: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 25/44 Elisabeth Noël - Enssib,

[email protected]

Normalisation de la pédagogie en cours

SCORM (Sharable Content Object Reference Model), pour créer des ressources pédagogiques structurées et garantir l'interoperabilité d'une plate-forme à l'autre

IMS Learning design, pour modéliser les scénarios d'apprentissage

CDM (course description metadata), pour décrire les formations

Page 26: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 26/44 Elisabeth Noël - Enssib,

[email protected]

C’est grâce à l’indexation LOM que la ressource est retrouvée

Mais est-ce la meilleure ressource, la plus adaptée à ses besoins ? Peut-il trouver des éléments qualitatifs d’évaluation ?

Page 27: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 27/44 Elisabeth Noël - Enssib,

[email protected]

Ce qu’il ne sait pas

1. MERLOT évalue les ressources pédagogiques proposées

peer review process Comments Assignments

Page 28: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 28/44 Elisabeth Noël - Enssib,

[email protected]

Page 29: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 29/44 Elisabeth Noël - Enssib,

[email protected]

Circuits d’évaluation de ressources pédagogiques

Une analyse fine [Mahé, 2006] des circuits met à jour plusieurs types d’évaluation :

une évaluation a priori, implicite : une évaluation par validation de la

conformité (technique ou descriptive) une évaluation par comité scientifique

(peer-review) une évaluation par les utilisateurs une évaluation croisée, par peer-review et

par les utilisateurs

Page 30: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 30/44 Elisabeth Noël - Enssib,

[email protected]

Quels critères d’évaluation ?

Évaluation technique  Évaluation du contenu  Évaluation du design Évaluation de la description 

Page 31: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 31/44 Elisabeth Noël - Enssib,

[email protected]

Des exemples

FORMIST (http://formist.enssib.fr ) utilise 6 critères dans son peer-review

crédibilité, contenu, description pertinence, contenu, design contenu, contenu pédagogie, contenu structuration, design présentation design, technique

Page 32: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 32/44 Elisabeth Noël - Enssib,

[email protected]

Commentaires d’évaluation

Page 33: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 33/44 Elisabeth Noël - Enssib,

[email protected]

MERLOT Quality of Content

Contenu Potential Effectiveness as a

Teaching-Learning Toolcontenu, technique

easy of use design

Page 34: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 34/44 Elisabeth Noël - Enssib,

[email protected]

Les moments de l’évaluation Dès la création

– Guide de qualité Avant publication

– Processus de peer-review, avec les mêmes critiques

Après publication– Commentaires ouverts – Intégration des pratiques réelles et du

contexte d’usage

Page 35: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 35/44 Elisabeth Noël - Enssib,

[email protected]

Ainsi, notre ami peut trouver des exemples d’utilisation réelle de la ressource, et des commentaires

Page 36: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 36/44 Elisabeth Noël - Enssib,

[email protected]

Comments

Page 37: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 37/44 Elisabeth Noël - Enssib,

[email protected]

Et enfin, après quelques détours, il trouve son animation

Page 38: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 38/44 Elisabeth Noël - Enssib,

[email protected]

Une question jamais posée

Qui sont réellement les pairs ? Les créateurs de ressources

pédagogiques Les experts Les utilisateurs (enseignants,

étudiants)

Page 39: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 39/44 Elisabeth Noël - Enssib,

[email protected]

Les limites

A part par les commentaires, pas de réel retour d’usage, ni de contextualisation de la ressource

Des recherches en cours pour introduire l’intentionnalité pédagogique (T. Kreczanic ), en modifiant le sens des vocabulaires (7, 5.1) du LOM

Page 40: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 40/44 Elisabeth Noël - Enssib,

[email protected]

Et bientôt

Indexation sociale ?– Restituerait le sens donné par l’usager

Evaluation web 2.0 ?– Commentaires, notations

Page 41: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 41/44 Elisabeth Noël - Enssib,

[email protected]

tutmarks

Page 42: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 42/44 Elisabeth Noël - Enssib,

[email protected]

L’évaluation des ressources pédagogiques

est dans la lignée de celle de l'ensemble des ressources web

Particularité : l’intentionnalité pédagogique et le contexte d’usage

Page 43: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 43/44 Elisabeth Noël - Enssib,

[email protected]

L’évaluation des ressources pédagogiques

L’évolution des systèmes d’évaluation permet-tra aux utilisateurs de jouer leur rôle de « pair » (peer-commenting »

Pas possible de faire l'économie de l'appropriation de la ressource par l'enseignant et par l'étudiant

Page 44: Quelle évaluation  des ressources pédagogiques ?

Evaluation et validation de l’information sur Internet

Journée d’étude des URFIST, 31 janvier 2007 44/44 Elisabeth Noël - Enssib,

[email protected]

Et maintenant

Questions ?