Dictionaries en tellen
Waarom dit ertoe doet Voordat een taalmodel tekst ziet, telt iemand de woorden of stukjes ervan. Een dictionary is het gereedschap om te tellen.
Een dictionary koppelt een sleutel aan een waarde, zoals een woord aan hoe vaak het voorkomt: {'the': 3, 'cat': 1}. Om te tellen zoek je de huidige telling op (0 als het nieuw is) en tel je er 1 bij op.
counts = {}
for w in words:
counts[w] = counts.get(w, 0) + 1
counts.get(w, 0) betekent: de telling voor w als we die hebben, en anders 0.
Kleine getallen
"The cat. The hat!" heeft de woorden the, cat, the, hat zodra je het in kleine letters zet en de leestekens weghaalt, dus de tellingen zijn the: 2, cat: 1, hat: 1. Zonder opschonen zouden "The" en "the" en "cat." als verschillende woorden tellen.
Samenvatting Opschonen, splitsen, tellen met get(key, 0) + 1.
Woorden en symbolen in deze les
- gemiddelde, spreiding
- het gemiddelde, en ongeveer hoe ver de waarden ervan af liggen (standaardafwijking)
Schrijf word_counts(text) dat een dictionary van woordtellingen teruggeeft. Zet de tekst om naar kleine letters en verwijder deze tekens, en splits dan op elke witruimte (spaties, tabbladen, nieuwe regels: text.split() zonder argument doet dat): . , ! ? ; : " '. Lege tekst geeft een lege dictionary.
Een probleem ontdekt in deze les? Meld het · Vraag naar deze les
Deze oefening opent binnenkort
Maak de les ervoor af voordat deze wordt ontgrendeld. De hele cursus is gratis, geen account nodig, en je kunt deze les nu lezen.
Deze browser blokkeert cookies voor learn.floati.life, dus lessen die je hier hebt afgerond kunnen niet in de juiste volgorde worden geopend. Sta cookies toe voor deze site en laad de pagina opnieuw.