Aller au contenu
Traitement automatique des langues · L3

Leçon 2 sur 5

Sac de mots, TF-IDF et classification de textes

Je sais transformer des textes en vecteurs (sac de mots, TF-IDF), entraîner un classifieur bayésien naïf ou une régression logistique et évaluer correctement ses résultats.

  • 1 h 25
  • 6 exercices corrigés
  • QCM de 7 questions

À la fin de la leçon, vous saurez :

  • Construire la représentation en sac de mots d'un corpus et la matrice documents-termes
  • Calculer des poids TF-IDF et expliquer leur intérêt
  • Classer un message avec un classifieur bayésien naïf multinomial et le lissage de Laplace
  • Entraîner une régression logistique sur des vecteurs TF-IDF avec scikit-learn
  • Évaluer un classifieur avec la matrice de confusion, la précision, le rappel et le score F1

Avant de commencer : Leçon 1 (tokenisation, normalisation et corpus) ; apprentissage automatique (régression logistique, validation).

1Je découvre

Le corpus de Tinkisso Finance est maintenant propre : 12 000 messages normalisés, pseudonymisés et tokenisés. Les agents de Kaloum en ont étiqueté 3 000 à la main en deux catégories : réclamation (argent non reçu, retrait bloqué, erreur de prélèvement) et information (demande de solde, taux d'intérêt, remerciements).

La direction veut un outil qui place automatiquement chaque nouveau message dans la bonne file, pour que les réclamations soient traitées en priorité, le jour même. Fanta sait entraîner un classifieur sur des tableaux de nombres. Mais un message n'est pas un tableau de nombres : c'est une suite de mots de longueur variable.

Comment transformer des textes en vecteurs de nombres, puis entraîner et évaluer un classifieur de messages ?

La suite se lit avec votre compte Kharandi Université

La première leçon de chaque cours est libre. Kharandi Université est une inscription à part de l’école : avec votre compte étudiant, vous lisez toutes les leçons en entier, avec les exercices corrigés et les QCM, et les 7 premiers jours sont offerts.

Voir toutes les leçons de Traitement automatique des langues

Signaler une erreur dans cette leçon

Toutes les leçons de Traitement automatique des langues

Pose ta question à Karamö