Conteúdo do curso Lição 140 de 246 · Módulo 12: Palavras como números (embeddings)
Módulo 12: Palavras como números (embeddings)

Gate: vetores de palavras para um novo mundo (IA desligada)

Por que isso importa Construir vetores de palavras a partir de frases brutas, verificar o que elas aprenderam e remover um viés que elas copiaram, sozinhas, é esta módulo em uma tarefa.

IA desligada. A verificação dá às suas funções um mundo que você não viu: novas frases de outra seed, com nurse e engineer inclinados para she e he. Nada sobre isso está no seu namespace.

Palavras e símbolos nesta lição
window
quantas palavras de cada lado contam como a companhia de uma palavra
PPMI
com que frequência duas palavras se encontram a mais do que o acaso daria, com negativos definidos como 0
skew
a padrão desequilibrado nos dados que os vetores copiam
Sua vez

Escreva word_vectors(sents, vocab): conte co-ocorrências dentro de cada frase com sua escolha de window WINDOW, e retorne ppmi(counts), uma linha por palavra de vocab. Escreva debias(X, vocab): retorne uma cópia de X na qual as quatro profissões (nurse, engineer, doctor, teacher) tiveram a direção de gênero removida (unit vectors, quatro pares, como na última lição), cada outra linha inalterada. O check pontua as 72 analogias em seu próprio mundo (pelo menos 95% corretas) e então mede a posição de cada profissão na direção de gênero após seu debias (tudo dentro de 0.05 de zero).

IA desligada: sem tutor, dicas ou solução resolvida nesta. Apenas seu próprio pensamento.

Viu um problema nesta lição? Reporte-o · Pergunte sobre esta lição

Este exercício abre em breve

Termine a lição anterior para que esta seja desbloqueada. O curso inteiro é gratuito, não precisa de conta, e você pode ler esta lição agora mesmo.