Điền vào chỗ trống (dự đoán có che)
Vì sao điều này quan trọng Cách đơn giản nhất để tạo một nhiệm vụ từ dữ liệu không nhãn: giấu một phần của nó và yêu cầu mạng điền vào. Các mô hình ngôn ngữ được huấn luyện đúng theo cách này (giấu từ tiếp theo); các mô hình ảnh giấu các mảng. Để điền tốt một lỗ, một mạng phải hiểu những gì xung quanh nó.
Giấu một mảng 4 x 4 ở giữa mỗi ảnh. Mạng thấy cửa sổ 8 x 8 quanh nó (48 điểm ảnh còn lại, x 3 màu) và dự đoán 16 điểm ảnh bị giấu (x 3). Giá trị mất mát là sai số bình phương trung bình. Không có nhãn ở đâu cả: bức ảnh là bảng đáp án của chính nó.
Hai cách điền đơn giản cần đánh bại: màu trung bình của ảnh (sai số khoảng 0.035) và trung bình của các điểm ảnh ngay quanh lỗ (khoảng 0.019). Một mạng đánh bại được cách thứ hai đã học được điều gì đó về cách các hình dạng và ánh sáng tiếp diễn.
Từ và ký hiệu trong bài học này
- dự đoán có che
- giấu một phần đầu vào và huấn luyện mạng điền nó vào
Viết thân vòng lặp huấn luyện (400 bước, mỗi bước 64 ảnh). Đạt khi sai số trên tập kiểm định dưới 0.017.
Bạn thấy vấn đề gì trong bài học này? Hãy báo cáo nó · Hỏi về bài học này
Bài tập này sẽ sớm mở.
Hoàn thành bài học trước đó để mở khóa bài này. Toàn bộ khóa học là miễn phí, không cần tài khoản, và bạn có thể đọc bài học này ngay bây giờ.
Trình duyệt này đang chặn cookie cho learn.floati.life, nên các bài học bạn đã hoàn thành tại đây không thể mở theo thứ tự. Hãy cho phép cookie cho trang web này và tải lại trang.