سرفصل‌ها درس 135 از 246 · ماژول 12: واژه‌ها به‌صورت اعداد (تعبیه‌ها)
ماژول 12: واژه‌ها به‌صورت اعداد (تعبیه‌ها)

آنچه یک مدل دربارهٔ حروف یاد گرفت

چرا مهم است هیچ‌کس به یک مدل زبانی نمی‌گوید a و e هر دو مصوت‌اند. اگر تعبیه‌هایش با این حال آن‌ها را نزدیک هم بگذارند، مدل آن را فقط از متن کشف کرده است. این نخستین نگاه به «معنا»ی یادگرفته‌شده از داده است.

برای مقایسهٔ دو تعبیه از شباهت کسینوسی استفاده کنید: ضرب داخلی تقسیم بر هر دو طول. وقتی دو بردار هم‌جهت‌اند 1، وقتی نامرتبط‌اند (عمود بر هم) 0 و وقتی در جهت‌های مخالف‌اند منفی 1 است. طول را نادیده می‌گیرد، که بیشتر نشان‌دهندهٔ این است که یک نماد چند بار می‌آید.

به درون GPT ریز ثبت‌شدهٔ دوره نگاه می‌کنید (ماژول 13 آن را می‌سازد). فقط متن درس‌های همین دوره را، نویسه به نویسه، خواند و هر نویسه یک ردیف 64 عددی بود.

اول پیش‌بینی کنید: کدام گروه از جفت‌های نویسه به‌طور میانگین شبیه‌ترین خواهند بود: دو مصوت، یک مصوت و یک صامت، یا دو رقم؟

واژه‌ها و نمادهای این درس
تعبیه
ردیف اعداد یادگرفته‌شده‌ای که نمایندهٔ یک نماد است
شباهت کسینوسی
ضرب داخلی تقسیم بر هر دو طول: 1 هم‌جهت، 0 نامرتبط، -1 مخالف
نوبت شما

my_prediction را برابر "vowels"، "mixed" یا "digits" قرار دهید. cosine(a, b) و nearest(ch, k) (k نویسهٔ دیگر با بالاترین کسینوس با ch، بهترین اول) را بنویسید. سپس group را با میانگین کسینوس روی همهٔ جفت‌های نویسه‌های متفاوت درون هر گروه پر کنید.

مشکلی در این درس دیدید؟ گزارشش کنید · دربارهٔ این درس بپرسید

این تمرین به‌زودی باز می‌شود

درس پیش از آن را تمام کنید تا این یکی باز شود. کل دوره رایگان است، حساب کاربری لازم نیست، و می‌توانید همین الان این درس را بخوانید.