Betekenis die een woord van het bedrijf behoudt
Waarom dit ertoe doet "Je herkent een woord aan het gezelschap dat het houdt." Tel welke woorden bij welke woorden verschijnen, en de aantallen alleen plaatsen king bij queen en laten je rekenen zoals king minus man plus woman.
Om dit eerlijk te testen moeten we de juiste antwoorden weten, dus deze les gebruikt een verzonnen klein wereldje met een vaste structuur: elke persoon is koninklijk of gewoon, hij of zij, volwassen of jong, en elk daarvan verschijnt als andere woorden in dezelfde zin ("de koningin regeert in het paleis en zij leest"). Echte tekst is veel rommeliger, maar het mechanisme is hetzelfde.
Van counts naar vectoren
Count, voor elk paar woorden, hoe vaak ze voorkomen binnen een window van w woorden van elkaar. De rij van counts van elk woord is zijn vector. Een helper zet ruwe counts om naar "hoeveel vaker dan toeval" (PPMI), zodat "the" niet alles domineert.
Een analogy a : b = c : ? wordt beantwoord door het woord dat het dichtst bij b min a plus c ligt. Er zijn 72 van zulke vragen in deze wereld.
Predict: met een venster van 2 woorden, en met een venster dat de hele zin van 9 woorden dekt, welk deel zal juist zijn?
Woorden en symbolen in deze les
- window
- hoeveel woorden aan beide kanten tellen als de gezelschap van een woord
- PPMI
- hoeveel vaker twee woorden elkaar tegenkomen dan kans zou geven, met negatieven ingesteld op 0
Zet my_guess op je twee voorspellingen. Schrijf cooccurrence(sents, win): een V bij V array van counts, waarbij je 1 toevoegt aan [word, other] voor elk ander woord binnen win posities in dezelfde zin. Vul daarna acc voor vensters 2 en 8 met score(ppmi(...)).
Een probleem ontdekt in deze les? Meld het · Vraag naar deze les
Deze oefening opent binnenkort
Maak de les ervoor af voordat deze wordt ontgrendeld. De hele cursus is gratis, geen account nodig, en je kunt deze les nu lezen.
Deze browser blokkeert cookies voor learn.floati.life, dus lessen die je hier hebt afgerond kunnen niet in de juiste volgorde worden geopend. Sta cookies toe voor deze site en laad de pagina opnieuw.