Transcription

• Speaker #0

  Vous écoutez Learning Coach by Trendy, le podcast qui part à la rencontre de ceux qui ont maîtrisé l'art d'apprendre et de former. Dans cette saison, nous vous invitons à une réflexion sur l'intégration responsable et stratégique de l'intelligence artificielle dans vos pratiques pédagogiques. Au travers des témoignages de nos invités, nous explorerons les opportunités, mais aussi les défis que l'IA soulève.

• Speaker #1

  Bienvenue dans ce nouvel épisode de la saison 2 du podcast Learning Coach, pour lequel j'ai le plaisir de recevoir Madame Ekaterina Lavoca et Samy Lavabi. Ensemble, nous allons aborder un sujet encore un peu méconnu, mais promis à un avenir majeur dès lors que l'on évoque les intelligences artificielles. Nous allons parler d'agents pédagogiques et de leur déploiement. Ekaterina, Samy, je vais dans un premier temps vous inviter à tour de rôle, à nous en dire plus à votre sujet, vous présenter et présenter vos activités.

• Speaker #2

  Bonjour, je m'appelle Etterina Lavoca, je suis responsable projet à l'ANFA. L'ANFA c'est une association nationale pour la formation automobile. Qu'est-ce que c'est l'ANFA ? C'est une association qui est chargée par la commission paritaire nationale de notre branche, la branche des services de l'automobile, pour mettre en œuvre la politique de la formation professionnelle.

• Speaker #3

  Bonjour. Je m'appelle Samy, je suis diplômé de l'école Polytechnique et Técom Paris. J'ai commencé ma carrière dans les télécoms, sur l'innovation produit, essentiellement sur des solutions de recommandation de contenu. Puis sur ces mêmes technologies côté éducation, ce qui m'a amené à m'intéresser à l'IA et comment l'IA pouvait comprendre l'impact d'une ressource éducative à partir de 2015. tournant de l'IA à partir de 2018 m'a amené à créer Stelia pour dédier mon énergie sur ce sujet. Donc Stelia c'est une start-up qui est dédiée à la conception de solutions pour l'éducation et la formation en spécialisant des technologies d'IA, donc d'IA générative, de graphes de connaissances. On travaille avec des labos de recherche publics comme le CNRS ou l'INRIA. Aujourd'hui on est une vingtaine de salariés dont une petite dizaine en IA, incubés à l'école polytechnique. et à peu près un tiers sur le développement logiciel.

• Speaker #1

  Et quelles sont les solutions proposées par Stelia, puisque je crois que cela va être le sujet principal de nos échanges ?

• Speaker #3

  Ce qu'on propose, c'est des solutions qui vont accompagner les organismes de formation, qui vont accompagner les apprenants, donc des chatbots qui se concentrent uniquement sur les contenus de formation, pour éviter toute hallucination, mais aussi un accompagnement des ingénieurs pédagogiques. dans la conception de contenu et dans la conception de contenu autour des compétences. C'est un axe fort sur lequel on investit beaucoup aujourd'hui, qui est de mettre en lien la formation avec des référentiels de compétences ou des objectifs pédagogiques.

• Speaker #1

  Samy et Katerina, j'ai une question rituelle à vous poser. Dans cinq ans, comment voyez-vous l'évolution des pratiques et des dispositifs pédagogiques, sous l'influence de l'IA bien entendu ?

• Speaker #3

  L'idée, c'est d'accompagner l'apprenant, de personnaliser les apprentissages en tandem avec un formateur ou un enseignant qui permettra d'avoir un regard complémentaire sur l'apprenant. Et donc, l'IA va jouer un rôle de coach sur le suivi des compétences, la compréhension des difficultés ou des facilités de chacun. quels sont les les types de contenus qui permettront à chacun de progresser. C'est le rêve de l'apprentissage adaptatif qu'on nous promet depuis 2015 et qu'on a du mal à mettre en œuvre depuis. Et l'IA aujourd'hui a des moyens à démultiplier pour avoir une vue plus complète de l'apprenant.

• Speaker #2

  Moi j'imagine que dans 5 ans l'IA sera un assistant d'apprentissage pour le... pour les apprenants mais aussi l'assistant de l'enseignement pour les formateurs donc ça sera un intermédiaire pour pour les deux donc comme je suis tout à fait d'accord avec sami comme un coach personnalisé un tuteur pour que qui s'adapte à chaque apprenant en fonction de ses besoins ce lac une avec vraiment un haut degré de personnalisation mais ce qui est le plus important aussi c'est qu'il Il communique très fréquemment avec le formateur de ses apprenants, lui permettant de de poursuivre l'apprentissage avec les apprenants parce que le rôle de formateur va être bien sûr modifié. L'application pratique est très importante et donc le rôle de formateur pour les travaux pratiques va rester toujours aussi important. Les apprenants vont passer plus de temps. à peut-être essayer de réparer l'automobile ou faire des travaux manuels, faire des travaux pratiques, parce qu'ils auront peut-être plus de temps, vu que l'intelligence artificielle personnalisera leur apprentissage théorique, qui reste quand même important pour commencer la pratique. Donc le temps de l'apprentissage théorique va être réduit. parce que suivant les lacunes et les connaissances de chacun, on va proposer l'apprentissage plus ou moins court de certaines thématiques et donc le formateur aura plus de temps à l'atelier avec les apprenants.

• Speaker #1

  Du fait de vos expériences respectives, observez-vous des risques ou des biais associés au recours à l'IA et dans ce cas, comment y remédiez-vous ? Comment vous organisez-vous préventivement ?

• Speaker #2

  Je peux voir les biais et les risques. Après, comment on les rémédie ? Ça peut être côté établissement, mais aussi côté entreprise qui fournit l'intelligence artificielle. Là, Sany pourrait répondre beaucoup plus. Les biais que l'on peut voir déjà maintenant, c'est l'utilisation de l'intelligence artificielle générative, par exemple, sans un regard critique. par les formateurs ou par les apprenants. Donc c'est ne pas savoir que par exemple l'intelligence artificielle peut avoir des hallucinations ou peut éviter des réponses. Donc il est très important d'avoir un regard créatif surtout concernant les contenus qui vont être proposés aux apprenants. vraiment passer en peigne fin les contenus, les détails techniques par les formateurs pour être sûr que l'intelligence artificielle propose des contenus corrects. Et autre chose, ne pas se restreindre à ce que l'IA de Générative propose et aller au-delà de ces suggestions pour ajouter de la valeur humaine. Prendre ça comme comme un outil qui aide à éviter la peur de la page blanche, qui aide à la conception, mais ne pas se restreindre. Autre chose, c'est notamment pour les établissements, probablement ne pas charger dans la version gratuite de l'intelligence générative des informations sensibles. et savoir comment interagir avec l'intelligence artificielle de ce type et qu'est-ce que se passe avec les données. Par exemple, ne pas charger des données financières confidentielles ou des données avec les données personnelles des apprenants dans le chat GPT.

• Speaker #3

  Tout à fait, je vais compléter sur la partie protection de la donnée. Donc la première chose effectivement c'est de respecter les règles en vigueur, notamment le RGPD, qui nous donne notre approche, c'est dans la mesure du possible d'éviter la collecte de données personnelles. On peut aussi rajouter une couche d'anonymisation, c'est-à-dire un modèle qui vient tenter d'extraire et de doter les données personnelles. Après, pour des moteurs qui nécessitent ces données personnelles, on va être dans l'explicitation du traitement, l'explicitation des données collectées et de la finalité recherchée. Donc c'est une transparence vis-à-vis de l'utilisateur qui est nécessaire. Nous, on a conçu un pipeline de modèles qui vise à se limiter au corpus de nos clients. pour éviter des hallucinations, pour éviter ces difficultés de faire travailler des modèles qui ont été entraînés sur des données très vastes, de les faire travailler uniquement sur la donnée qui est fournie. Donc ça, c'est ce qu'on appelle l'architecture Retrieval Augmented Generative AI, donc RAG, et qu'on vient contrôler avec des graphs de connaissances. pour éviter des extrapolations qui ne seraient pas fondées par les contenus de référence de nos clients. Donc il y a ce sujet d'hallucination qu'on prend très au sérieux, bien sûr, et qu'on veut limiter au maximum. Dans les hallucinations, on peut aussi distinguer un autre sujet, qui est celui de la confusion entre des sujets proches. Dès lors qu'il y a un terme qui est utilisé dans différents sens, ou qui... qui est une caractéristique par exemple d'un produit qui est aussi la caractéristique d'un autre produit. L'IA a vite fait de rapprocher ces deux produits et de mélanger leurs caractéristiques. Donc on va travailler à bien distinguer ces sujets et vérifier que notre pipeline permet de retrouver les sources, confronter nos synthèses génératives avec les sources. qui ont permis de construire ces réponses.

• Speaker #1

  Terminons cette première partie en vous demandant quel outil ou quelle pratique pédagogique impliquant l'IA est désormais ancrée dans vos usages ?

• Speaker #2

  Je ne vais pas parler de routing pour l'instant. C'est quand même l'utilisation ponctuelle, donc je ne le fais pas tous les matins. Mais je peux utiliser ChatGPT, Cloud, Perplexity, il y a plein d'IA génératives que j'aime bien comparer. pour avoir des idées sur certains sujets. Donc, les premières idées que l'IA peut me suggérer. Et aussi, ça c'est vraiment pour l'inspiration, mais aussi pour un côté très technique de travail. Je dis technique, c'est le côté que j'aimerais ne pas réaliser moi-même. C'est la vérification de l'orthographe. de contenu de formation que je dois recéder.

• Speaker #3

  De notre côté, on utilise aussi pas mal ces outils, donc effectivement côté orthographe ou traduction, notamment DeepL qui est très performant entre le français et l'anglais. Sur la recherche, effectivement, Perplexity. De notre côté, les développeurs utilisent beaucoup des outils d'accompagnement de génération de code. on travaille aussi beaucoup avec des outils de prise de notes de réunion c'est important de capitaliser ce qui est dit il ya trop d'informations qui veulent qui qui sont véhiculés par les échanges euros qui sont pas assez noté et puis un outil que j'aime bien qui s'appelle roadmap qui permet en fait de donner de créer des cartes mentales sur un sujet donné c'est un outil qu'on aime bien parce que il est assez proche de de notre approche par graphe de connaissance. Et ça donne une vision, une vue très visuelle d'idées, de sujets.

• Speaker #1

  Abordons la seconde partie de l'épisode en nous intéressant à cette notion d'agent pédagogique. Et Samy, si vous le voulez bien, je vous invite à nous éclairer quant au sens de cette expression.

• Speaker #3

  Le principe de l'agent pédagogique, c'est d'être un tuteur, un accompagnateur automatisé. de l'apprenant pour être dans l'instantanéité, dans l'individualisation et en complément du formateur. Donc bien sûr le besoin premier c'est d'abord de répondre à ces questions. Un enseignant serait submergé s'il devait répondre à l'ensemble des questions qui passent par la tête de chacun de ses apprenants. Donc c'est une fonction de décharger. Après, c'est aussi d'accompagner sur le rythme d'apprentissage pour optimiser le temps de l'apprenant sur ses difficultés, sur là où il a besoin de progresser.

• Speaker #1

  Comment peut-on étendre cette description si on se place de votre point de vue, Ekaterina ?

• Speaker #2

  Tout à fait. Cet agent pédagogique a été déployé par Stelia sur la plateforme AIOto. Cette plateforme a été créée par le consortium AI-Auto dans le cadre d'un projet financé par l'État français et cofinancé par les membres de consortium. Donc AI-Auto, c'est le projet qui s'appelle Apprentissage Adaptatif Intelligent pour les CFA de la branche de services de l'automobile. et l'idée de ce projet. projet était de créer un outil d'apprentissage adaptatif intelligent pour optimiser l'apprentissage dans les établissements de notre branche. Pourquoi on voulait faire ça ? Parce que ces dernières années, il y a beaucoup de changements dans le monde de l'automobile et avec l'immoridation, la connectivité, l'électrification, etc. Il y a de plus en plus de contenu qui est nécessaire à prendre pour les apprentis. ou les apprenants des lycées et des CFA. Mais comme le temps reste le même, donc il faut apprendre plus de contenu en moins de temps. Et c'est pour ça qu'il est important d'optimiser l'apprentissage, de le personnaliser, de motiver l'apprenant, d'avoir plusieurs techniques pour que l'apprentissage soit plus efficace. Et c'est pour ça qu'on a eu une idée d'avoir cette plateforme. avec l'apprentissage personnalisé et un coach IA, un assistant IA, parce qu'on sait tous que les apprenants sont plus motivés quand ils sont guidés et quand ils ne sont pas seuls devant leur écran. Donc c'était ça l'idée, d'avoir des parcours d'apprentissage personnalisés qui se basent sur les connaissances de l'apprenant. Et on a plusieurs parcours comme ça sur la plateforme. qui inclut plusieurs tours de quiz pour chaque chapitre de chaque thématique pour vérifier les connaissances avant de proposer ou ne pas proposer la révision de contenu. Et nous avons aussi un agent pédagogique qui permet de répondre aux questions de l'apprenant avant qu'il sollicite le formateur. Donc vraiment, les premières questions, même les suivantes, par rapport au contenu. C'est une plateforme avec des contenus essentiellement sur la technologie de l'automobile Merci. destiné aux apprenants. En tout cas pour ce projet, le public cible était des apprenants Bac Pro de la filière maintenance de véhicules.

• Speaker #1

  Avez-vous suffisamment de recul pour mesurer les bénéfices du recours à ce dispositif ?

• Speaker #2

  Les données quantifiables, on était assez difficile à voir, notamment suite aux spécificités de l'apprentissage au CFA. même si nous avons mené l'expérimentation pendant quelques mois, donc c'était depuis le mois d'octobre jusqu'au mois de juin. Mais étant donné que dans la plupart de CFA, les apprenants ont un rythme d'apprentissage, ils alternent entre l'entreprise et le CFA, donc en fait, ils n'ont que deux semaines au CFA. parmi lesquels il y avait peut-être une heure d'expérimentation. Donc il s'avère que même les céphales les plus actifs ont eu peut-être 15 heures d'expérimentation maximum pendant toute l'année scolaire. Donc nous avons trouvé que ce serait très difficile de faire des conclusions quantitatives par rapport à l'efficacité de l'apprentissage, même si c'était un de nos objectifs au début du projet. d'essayer de comparer, de voir l'efficacité de classes qui ont utilisé l'outil ou n'ont pas utilisé l'outil. Donc nous avons plutôt tourné vers une analyse qualitative et nous avons fait beaucoup d'entretiens avec les formateurs et des observations de classe qui ont permis de... de voir des tendances, de voir des retours de formateurs, de l'apprenant, et notamment pour améliorer l'outil que nous déployons maintenant sous un autre nom, Apprentis Auto, dans la branche. Par exemple, les retours de formateurs, c'était que c'était un bon outil complémentaire qui ne remplace pas un outil où les apprenants seront en autonomie. Mais pour un formateur, ce serait un bon outil complémentaire d'apprentissage dans ce élément pour faire réviser les apprenants la technologie de l'automobile.

• Speaker #3

  C'est vrai que le premier impact, c'est déjà la prise en main de l'IA, la découverte de l'IA à des fins pédagogiques, de constater ces... ses bénéfices, ses limites, mais aussi de mettre du concret sur un mot qu'on entend partout.

• Speaker #1

  Ce bot dont nous parlons intervient à la demande, il répond aux questions. Peut-on imaginer que dans les développements futurs, il puisse se voir attribuer des pratiques de soutien à l'apprentissage par exemple, ou encore d'animation de la communauté des apprenants ?

• Speaker #3

  Oui, effectivement l'une des grosses difficultés de la formation en ligne, mais aussi de la formation en général, c'est l'engagement et la motivation des apprenants. Pour diverses raisons, ça peut être des difficultés de... d'apprentissage qui me démotive, ça peut être des contraintes temporelles, un intérêt pour la matière, etc. C'est aujourd'hui, on attend de l'enseignant ou du formateur qui vienne aussi animer, redonner goût, motiver les plusieurs difficultés. C'est une tâche qui est complexe, qui est très humaine. qui est très chronophage aussi quand elle est bien faite. Après, effectivement, il y a quand même une réelle difficulté côté IA à prendre cette tâche qui est assez délicate et être efficace 100% du temps. On a peur des 4 à 10% du temps où l'IA va dérailler ou va trop pousser l'apprenant. au-delà de son point de rupture de motivation. Donc c'est une réelle difficulté, c'est un réel challenge qui est l'humanisation de l'IA.

• Speaker #2

  Ça reste un outil parce que nous avons choisi d'utiliser la plateforme comme un outil de présentiel enrichi. Donc les apprenants, c'était voulu, donc les apprenants utilisent l'outil. avec le formateur en classe, pas à la maison. Et donc, ils sont toujours accompagnés par leur formateur ou l'ingénieur pédagogique de l'établissement ou leur camarade de la classe. Et nous avons vu que l'utilisation de l'outil provoque plus de conversations, plus d'échanges dans la classe et avec le formateur. en fait, c'est... Ils ne sont pas enfermés avec leur écran, ça les motive à avoir des échanges. L'outil ne les renferme pas, mais vu son utilisation dans la classe, motive à avoir des échanges avec le formateur et l'apprenant.

• Speaker #1

  Et Katerina, ce projet est un projet de recherche ? A-t-il un avenir, si oui lequel ?

• Speaker #2

  Tout à fait, le projet est déjà fini, il est fini fin décembre 2024 et nous avons continué la collaboration bilatérale parce que notre envie est de faire vivre la plateforme sur laquelle nous avons travaillé pendant deux ans et demi avec l'ANFA, STELIA et il y a eu aussi quatre CFA de notre réseau. qui ont beaucoup contribué à la création de contenu. La plateforme s'appelle maintenant Apprentis Auto. Nous, la NFA a financé plus de 2 500 comptes au CFA et au lycée de notre réseau. pour que ces établissements retestent encore une fois la plateforme, commencent à l'utiliser, commencent à l'intégrer dans des pratiques de formateur et que nous, on puisse continuer à avoir des retours de formateurs et améliorer la plateforme. Donc, c'est l'idée, c'est de faire vivre ce que nous avons créé, améliorer suivant les retours, mettre plus de contenu, avoir plus de fonctionnalités. Parce que j'imagine qu'avec le développement de l'IA, il y aura de plus en plus d'exigence par rapport au contenu et aux fonctionnalités de la plateforme, pour que ce soit un outil pour les formateurs des établissements de notre branche.

• Speaker #3

  Les agents pédagogiques, effectivement, ils vont se spécialiser sur différentes fonctions, à la fois côté créateur de contenu, enseignant et apprenant. on a aujourd'hui tout ce recours à ChiaGPT qui est un outil polyvalent, mais on va travailler sur des outils qui sont plus spécialisés et qui vont travailler sur la transformation de nos contenus. Donc de partir d'une documentation, de partir de contenus de référence pour en créer des capsules de micro-learning orientées sur une compétence précise, architecturer un cours préparer mon TP avec des élèves et puis accompagner l'apprenant. Donc effectivement, on va aller sur des agents multiples qui auront chacun une tonalité, une vocation, une audience précise.

• Speaker #1

  La tradition de Learning Coach va être une nouvelle fois respectée. Et Catherine, si vous le voulez bien, vous avez le mot de la fin.

• Speaker #2

  Il ne faut pas avoir peur de l'inconnu, mais si cet inconnu est déjà présent, c'est toujours bien d'être prêt. et de l'utiliser en connaissance de cause. Voilà, donc c'est toujours mieux d'être... L'IA, dans tous les cas, l'IA est là. Et c'est peut-être bien de se renseigner. On peut l'utiliser ou ne pas l'utiliser, mais c'est toujours mieux, vu que c'est là, de savoir que ça existe, qu'est-ce que cela peut faire, quel impact ça peut avoir sur notre vie, même si on ne l'utilise pas, et quel... qu'est-ce que l'IA peut nous apporter si jamais on a envie de l'utiliser.

• Speaker #1

  Un grand merci, Ekaterina Laboca, un grand merci, Samy Lababi, pour votre précieuse participation au podcast Learning Coach. Merci à vous aussi, chers auditeurs. Vous retrouverez cet épisode, comme tous ceux qui l'ont précédé, ceux de l'actuelle saison comme de la précédente, sur le site internet trendy.io et sur l'ensemble des plateformes d'écoute. Encore merci et à très vite.

• Speaker #0

  Vous souhaitez intégrer l'intelligence artificielle dans vos pratiques pédagogiques ? Visitez le site de Trendy, www.trendy.io, pour découvrir la fresque des IA pédagogiques et nos solutions d'accompagnement.