Öz-Tutarlılık: Örnekle, Ayrıştır, Oyla
Model örneği şans eseri yanlış olabilir. Self-consistency aynı soru için birkaç örnek alır, her birinden bir cevap ayıklar ve bunları vote yapar. Çoğunluk cevabı genellikle tek bir çalışmadan daha güvenilirdir. Örnekleme modelin işidir; ayıklama ve oylama senin işindir ve tamamen deterministiktir.
İki fonksiyonu oluştur:
extract_answer(text)metinde geçen SON tam sayıyı (akıl yürütme sonrası modelin son sayısı) veya hiç tam sayı yoksaNonedöndürür. String üzerinde bir regex ile tam sayıları bul.self_consistency(samples)örnek metinlerden oluşan bir liste alır, her birinden bir cevap çıkarır,Noneolarak ayrıştırılanları atar ve çoğunluk değerini birCounteraracılığıyla döndürür. Sonucun deterministik olması için eşitlik durumunda smallest değerine doğru yuvarla.
Örneğin, [4, 4, 5] olarak ayrıştırılan örnekler verildiğinde, vote fonksiyonu 4 döndürür. [3, 5] (1-1 beraberlik) verildiğinde, daha küçük olan 3 döndürür. Ayrıştırılamayan örnekler sadece görmezden gelinir:
self_consistency(["... so 4", "answer 4", "I think 5"]) # 4
self_consistency(["hmm no number", "= 9", "= 9", "= 2"]) # 9Belirlenimci eşitlik çözümü önemlidir: eşit oylarda her çalışmada farklı bir kazanan döndüren bir eval test edilemez ve yayınlanamaz. Not vermek için Run tuşuna bas.
Metindeki son tam sayıyı döndüren extract_answer(text) yaz (başta bulunan eksi işaretini işle), hiçbiri yoksa None döndür. Her örnekten bir cevap çıkaran, None sonuçlarını atan ve Counter ile çoğunluk değerini döndüren self_consistency(samples) yaz, eşitlik durumunda en küçük değere yönel. Ayrıştırılabilir cevap yoksa None döndür.
Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor
Bu alıştırma yakında açılacak
Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.
Bu tarayıcı learn.floati.life için çerezleri engelliyor, bu yüzden burada bitirdiğin dersler sırasıyla açılamıyor. Bu site için çerezlere izin ver ve sayfayı yenile.