المنهج الدراسي الدرس 120 من 246 · الوحدة 10: الشبكات التي ترى (CNNs)
الوحدة 10: الشبكات التي ترى (CNNs)

شبكات أعمق، وعمليات التشغيل المسجلة

لماذا هذا مهم إضافة المزيد من الطبقات يجب أن يساعد، حتى يتوقف ذلك فجأة. قام المساق بتدريب هذه التجربة على جهازه الخاص حتى تتمكن من رؤية جميع الثماني عشرة عملية تشغيل في ثوانٍ.

التجربة المسجلة cnn-depth-shortcuts دربت CNNs مع 2 و 8 و 20 conv layers (بواقع 16 channels لكل منها) على مجموعة بيانات shapes، كل منها مع وبدون shortcuts (إضافة مدخلات block إلى مخرجاته، من Module 6)، وكل منها مع ثلاث seeds. كل شيء آخر كان متطابقا: 2,000 training images، و 4 epochs، و Adam. إعادة التشغيل فورية لأن لا شيء يتم تدريبه؛ أنت تقرأ ما حدث فعليا.

ثلاث بذور، لأن Module 9 صحيح: تشغيل واحد قد يكون مضللا. انظر إلى انتشار كل إعداد، وليس فقط متوسطه.

استدعِ المنحنى أولا: أي إعداد ينتهي بأعلى متوسط دقة اختبار، وهل تتعلم الشبكة البسيطة المكونة من 20 طبقة على كل seed؟

تشغيل مسجل: تشغيل تدريبي حقيقي قام به المساق مرة واحدة وشحنه، لكي تتمكن الدروس من دراسة تشغيلات كبيرة جدا أو كثيرة جدا للتدريب المباشر على كل جهاز كمبيوتر محمول. كل مخرجات الطباعة تقول RECORDED.

الكلمات والرموز في هذا الدرس
تم التسجيل
قم بتشغيل الدورة التدريبية مرة واحدة وشحنها لك لتدرسها
دورك

اضبط my_best على الزوج (العمق، الاختصارات) الذي تظن أنه ينتهي بأعلى متوسط، وmy_plain20_reliable على True إذا كنت تظن أن الشبكة العادية ذات العشرين طبقة تتعلّم على البذور الثلاث كلها. ثم استخدم nnsim.recorded لملء final_acc: (العمق، الاختصارات) إلى قائمة دقة الاختبار النهائية للبذور الثلاث (البذرة 0 أولاً)، واضبط mean_acc على متوسط كل قائمة، وbest على الزوج ذي أعلى متوسط. يعطي exp.seeds(depth=..., shortcuts=...) التشغيلات الثلاثة لإعداد واحد. الصدفة 0.25 (أربعة أشكال).

أخيرا، استخدم قاعدة الضوضاء في Module 9 لتحديد الإعدادات التي تختلف حقا. مع وجود ثلاث بذور لكل منهما، يختلف متوسطان حقا فقط إذا كانت الفجوة أكبر من حوالي 2 × s × sqrt(2/3)، حيث s هي القيمة الأكبر من تشتت بذور الإعدادين (np.std من القيم الثلاث). أي شيء أقرب من ذلك يعتبر تعادلا.

اجعل ties_with_best قائمة بكل زوج يرتبط مع best بتلك القاعدة، بما في ذلك best نفسه.

هل لاحظت مشكلة في هذا الدرس؟ أبلغ عنها · اسأل عن هذا الدرس

سيفتح هذا التمرين قريبا

أنهِ الدرس السابق ليفتح هذا الدرس. الدورة كاملة مجانية، ولا تحتاج إلى حساب، ويمكنك قراءة هذا الدرس الآن.