Müfredat 246 dersinden 188. · Modül 17: Gürültü girer, resim çıkar (difüzyon)
Modül 17: Gürültü girer, resim çıkar (difüzyon)

Küçük bir U-Net

Neden önemli Resimler için gerçek difüzyon modellerindeki gürültü tahmincisi bir U-Net'tir: büyük şekilleri görmek için resmi küçültür, sonra ince ayrıntıyı karşıya taşıyan kısayollarla onu tam boyuta geri büyütür. Her parçayı zaten biliyorsun.

Tek kanallı 8 x 8 resimler için bir U-Net:

  1. Aşağı: 16 kanala 3 x 3 evrişim, ReLU. Bunu skip olarak tut (8 x 8 x 16). Sonra 4 x 4'e 2 x 2 ortalama havuzlama.
  2. Orta: 32 kanala 3 x 3 evrişim, ReLU (4 x 4 x 32): her birim artık geniş bir alan görür.
  3. Yukarı: 8 x 8'e yukarı örnekle, sonra onu kanallar boyunca skip ile birleştir (E.concat): 8 x 8 x 48.
  4. 16 kanala 3 x 3 evrişim, ReLU, sonra 1 kanala 3 x 3 evrişim: girdiyle aynı boyutta tahmin edilen gürültü.

Atlama bağlantısı U-Net'in anahtar fikridir: aşağı yol şekli görmek için ayrıntıyı atar, ve atlama o ayrıntıyı doğrudan yukarı yola verir. Onsuz çıktı bulanıktır.

Burada eğitim yok: onu kurarsın ve Modül 4'te katmanları kontrol ettiğin gibi, şekillerle ve bir gradyan kontrolüyle doğru bağlandığını kanıtlarsın.

Bu dersteki kelimeler ve semboller
difüzyon modeli
gürültüyü azar azar kaldırmak için eğitilmiş bir ağ; saf gürültüden geriye çalıştırıldığında üretir
U-Net
şekilleri görmek için bir resmi küçülten, geri büyüten ve ayrıntıyı atlama bağlantılarıyla karşıya geçiren bir ağ
Senin sıran

x (n, 8, 8, 1) şeklinde bir E.T ve ağırlıklar başlangıç kodunun yaptığı gibi P'de olmak üzere unet(x, P) yaz. Sonra bir gradyanı iterek kontrol et: max_gap'i P['up2'][0]'ın ilk 5 sayısı üzerinde geri yayılım ile itme arasındaki en büyük farka ayarla. Motor float32'de çalışır, bu yüzden h = 1e-3 ya da daha fazla it: 1e-4 ile kayıptaki değişim yuvarlamada kaybolur ve doğru bir gradyan yanlış görünür.

Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor

Bu alıştırma yakında açılacak

Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.