سرفصل‌ها درس 137 از 246 · ماژول 12: واژه‌ها به‌صورت اعداد (تعبیه‌ها)
ماژول 12: واژه‌ها به‌صورت اعداد (تعبیه‌ها)

معنا از همنشینان یک واژه

چرا مهم است «یک واژه را از همنشینانش می‌شناسید.» بشمارید کدام واژه‌ها نزدیک کدام می‌آیند، و همین شمارش‌ها king را نزدیک queen می‌گذارند و اجازه می‌دهند حسابی مثل king منهای man به‌علاوهٔ woman انجام دهید.

برای آزمودن صادقانهٔ این باید پاسخ‌های درست را بدانیم، پس این درس از یک دنیای کوچک ساختگی با ساختاری کاشته‌شده استفاده می‌کند: هر شخص سلطنتی یا عادی، مرد یا زن، بزرگسال یا جوان است و هر کدام از این‌ها به‌صورت واژه‌های دیگری در همان جمله آشکار می‌شود («the queen rules in the palace and she reads»). متن واقعی بسیار درهم‌تر است، اما سازوکار یکسان است.

از شمارش‌ها به بردارها

برای هر جفت واژه بشمارید چند بار در یک پنجرهی w واژه‌ای از هم می‌آیند. ردیف شمارش‌های هر واژه بردار آن است. یک کمکی شمارش‌های خام را به «چقدر بیشتر از شانس» (PPMI) تبدیل می‌کند، تا «the» بر همه چیز چیره نشود.

یک قیاس a : b = c : ? با واژه‌ای پاسخ داده می‌شود که به b منهای a به‌علاوهٔ c نزدیک‌ترین است. در این دنیا 72 چنین پرسشی هست.

پیش‌بینی کنید: با یک پنجرهٔ 2 واژه‌ای، و با پنجره‌ای که کل جملهٔ 9 واژه‌ای را می‌پوشاند، چه سهمی درست خواهد بود؟

واژه‌ها و نمادهای این درس
پنجره
چند واژه در هر طرف به‌عنوان همنشینان یک واژه حساب می‌شوند
PPMI
اینکه دو واژه چقدر بیشتر از آنچه شانس می‌دهد به هم می‌رسند، با منفی‌ها برابر 0
نوبت شما

my_guess را برابر دو پیش‌بینی خودتان قرار دهید. cooccurrence(sents, win) را بنویسید: یک آرایهٔ V در V از شمارش‌ها، با افزودن 1 به [word, other] برای هر واژهٔ دیگری در فاصلهٔ win جایگاه در همان جمله. سپس acc را برای پنجره‌های 2 و 8 با score(ppmi(...)) پر کنید.

مشکلی در این درس دیدید؟ گزارشش کنید · دربارهٔ این درس بپرسید

این تمرین به‌زودی باز می‌شود

درس پیش از آن را تمام کنید تا این یکی باز شود. کل دوره رایگان است، حساب کاربری لازم نیست، و می‌توانید همین الان این درس را بخوانید.