.
.
.
.
.

SESSION INTERACTIVE EN LIGNE : NLP GURU

2h30 pour être à l’état de l’art sur le traitement automatique du langage.

 

☎  Discutons en par téléphone : 04 91 79 58 10

.
.
.
.
.

Pourquoi cette formation ?

Ces 2 dernières années ont été particulièrement fastes en ce qui concerne les progrès en traitement du langage naturel. Pour la première fois certains modèles dépassent même les performances humaines sur des problèmes réputés difficiles comme la capacité à répondre à des questions suite à la lecture d’un texte et peut-être bientôt la capacité à résumer un texte.

Ces progrès reposent d’une part sur de nouvelles architectures de réseaux de neurones et d’autre part sur deux grandes classes d’idées : l’idée de modèle de langage et l’idée de transfert d’apprentissage bien connue en vision artificielle, sans parler du concept de « self supervision ».

L’objectif de cette session réservée à des praticiens de l’IA, est de vous permettre de découvrir l’état de l’art en matière de NLP, les dernières tendances et perspectives afin de vous faire gagner un temps précieux, de vous aider à orienter vos projets innovants en matière de langage ou vos projets d’investissement.

Pas encore de date fixée.

Nous contacter pour un programme intra customisé pour votre entreprise : pour 10 à 15 personnes.

  • Datascientists ou assimilés
  • Responsables innovation/digital
  • Responsables métiers

Prérequis : Avoir une bonne base en IA/data

  • 100% en ligne et interactif
  • Retour d’expériences et discussions avec des experts du NLP
  • Possibilité de faire par la suite une session orientée projet
  • 2h30 de présentation interactive en ligne
  • 10 participants voire 15 maximum

Objectifs

Comprendre la révolution en cours en matière de NLP.

Découvrir l’état de l’art, les dernières avancées, les tendances.

Prendre conscience des limites actuelles et des perspectives.

Confronter vos idées et convictions, voire vos projets.

Le programme de la session

1. Une brève histoire du NLP


  • Bag of Word to word to glove
  • Des Réseaux de Neurones au LSTM et au méchanisme d’attention = > the ‘transformers’ area

2. “The image net moment of NLP”


  • De transformer à BERT
  • Introduction de GLUE benchmark
  • Image net moment : le Transfer Learning
  • Mais aussi : la self-supervision!

3. Derniers résultats et tendances actuelles


  • Roberta : bigger, longer
  • Text2text
  • Question Answering / Open domain Question Answering / Information
  • Retrievial
  • Base de connaissance générale
  • Génération de texte

4. Limites et perspectives en matière de recherches


  • Mémoire GPU / from bigger models to smaller models
  • Plus d’explicabilité à travers les mécanismes d’attention et par rapport au machine learning classique ?
  • Bouleversement pour le multilangue:
    • Arrivée de multi-GLUE et XTREME + projet PIAF et ml-sum
    • Et à plus long terme: « from correlations to common sense reasoning » (Y. Bengio avec Babi AI, environnements virtuels VS IA hybride de G.Marcus)

Notre intervenant expert

Thomas Scialom

Thomas Scialom

Expert en NLP (Natural Language Processing). Chercheur en IA et associé de la startup reciTAL. Professeur à l’ESILV et Polytech Sorbonne. Publications scientifiques dans les conférences top tier (ACL 2019, EMNLP 2019, LREC 2020) sur les modèles de langue multilingues, le Question Answering, la génération de texte et de résumé.

Extraits: https://recital.ai/publications/

Formation à la demande

Cette formation peut être organisée au sein de votre entreprise (intra) ou en inter-entreprise !

Découvrir nos autres formations

IA FINANCE, banque et assurance

IA pour la Finance online
Une formation de 5h00 pour saisir les principales applications de l’IA dans le secteur de la banque et de l’assurance : efficacité opérationnelle, relation client, lutte contre la fraude, octroi de crédit…

IA POUR LES RH

IA pour les Ressources Humaines online
Une formation de 5h00 pour sortir des idées reçues sur l’IA, comprendre ses principales applications RH et son impact pour les organisations.

IA pour la Santé online
Une formation en ligne pour comprendre comment améliorer le parcours patients et praticiens grâce aux données et à l’IA : matériels de mesure médicale équipés de logiciels d’IA, aide à la prise de notes médicales…

IA MARKETING

IA pour le Marketing et les ventes
1 journée pour découvrir les principales applications de l’IA en marketing / ventes et apprendre à mener un projet.

L'Excellence Catalix

Logo Catalix by Devoteam

Catalix, un écosystème d’apprentissage unique autour des enjeux de l’IA afin de vous accompagner dans votre transformation : découvrez notre équipe.

Pour toute question, rencontrer nos équipes et aller plus loin, contactez-nous | 04 91 79 58 10