Le sens par la compagnie que garde un mot
Pourquoi c'est important « On connaît un mot à la compagnie qu'il garde. » Compte quels mots apparaissent près de quels mots, et les comptes seuls placent king près de queen et te permettent de faire de l'arithmétique comme king moins man plus woman.
Pour tester ça honnêtement, il faut connaître les bonnes réponses, donc cette leçon utilise un petit monde inventé avec une structure plantée : chaque personne est royale ou roturière, il ou elle, adulte ou jeune, et chacun de ces traits apparaît sous forme d'autres mots dans la même phrase (« the queen rules in the palace and she reads »). Le vrai texte est bien plus désordonné, mais le mécanisme est le même.
Des comptes aux vecteurs
Compte, pour chaque paire de mots, combien de fois ils apparaissent dans une fenêtre de w mots l'un de l'autre. La ligne de comptes de chaque mot est son vecteur. Une fonction utilitaire transforme les comptes bruts en « combien plus souvent que le hasard » (PPMI), pour que « the » ne domine pas tout.
Une analogie a : b = c : ? reçoit pour réponse le mot le plus proche de b moins a plus c. Il y a 72 telles questions dans ce monde.
Prédis : avec une fenêtre de 2 mots, et avec une fenêtre couvrant toute la phrase de 9 mots, quelle part sera juste ?
Mots et symboles de cette leçon
- fenêtre
- combien de mots de chaque côté comptent comme la compagnie d'un mot
- PPMI
- combien plus souvent deux mots se rencontrent que le hasard ne le donnerait, avec les négatifs mis à 0
Affecte à my_guess tes deux prédictions. Écris cooccurrence(sents, win) : un tableau V par V de comptes, en ajoutant 1 à [mot, autre] pour chaque autre mot à moins de win positions dans la même phrase. Puis remplis acc pour les fenêtres 2 et 8 avec score(ppmi(...)).
Tu as repéré un problème dans cette leçon ? Signale-le · Pose une question sur cette leçon
Cet exercice s'ouvre bientôt
Termine la leçon précédente pour débloquer celle-ci. Tout le cours est gratuit, aucun compte n'est requis, et tu peux lire cette leçon dès maintenant.
Ce navigateur bloque les cookies pour learn.floati.life, donc les leçons que tu as terminées ici ne peuvent pas s'ouvrir dans l'ordre. Autorise les cookies pour ce site et recharge la page.