Müfredat 250 dersinden 108. · Neural-Net Sezgisi, LLM'ler ve Yapay Zeka Bitirme Projesi
Neural-Net Sezgisi, LLM'ler ve Yapay Zeka Bitirme Projesi

İzle: Attention Weights

Scaled dot-product attention mekanizmasını az önce uyguladın. Bu matrislerin aslında ne yaptığını şuraya bırakıyorum. Attention her kelimenin cümledeki her kelimeye (kendisi dahil) bakmasını, her birinin ne kadar önemli olduğunu puanlamasını ve kendini bunların bir ağırlıklı karışımı olarak yeniden oluşturmasını sağlar.

Oynat düğmesine bas. sat kelimesinin the cat sat boyunca nasıl dikkat çektiğini izle: ham skorlar toplamı 1 olan softmax ağırlıklarına dönüşür, en kalın çizgi en önemli kelimeyi gösterir ve sat bağlamını, çoğunlukla cat üzerinden emer.

Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor

Bu alıştırma yakında açılacak

Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.