Chương trình học Bài 93 trên tổng số 246 · Mô-đun 7: Làm việc trên dữ liệu mới
Mô-đun 7: Làm việc trên dữ liệu mới

Bài kiểm tra vượt cấp: thu hẹp khoảng cách mà không chưa khớp (tắt AI)

Vì sao điều này quan trọng Thu hẹp khoảng cách huấn luyện/kiểm định thì dễ nếu bạn được phép làm mô hình vô dụng. Làm điều đó mà vẫn giữ mô hình tốt mới là kỹ năng thật. Đã biết mô-đun này? Bạn có thể làm bài kiểm tra vượt cấp này trước, trước các bài học khác: qua nó là đánh dấu mô-đun này đã xong và mở mô-đun tiếp theo.

Người hướng dẫn AI tắt. Một đa thức bậc 14 trên 25 điểm quá khớp nặng. Bạn phải giữ bậc 14 và dùng suy giảm trọng số (ridge, từ bài học về độ chệch và phương sai), chọn cường độ của nó bằng tập kiểm định.

Vì bạn chọn alpha bằng cách nhìn vào tập kiểm định, sai số kiểm định giờ hơi tâng bốc. Vậy bài kiểm tra vượt cấp chấm điểm bạn trên một tập kiểm thử riêng gồm 2.000 điểm mới mà mã của bạn không bao giờ thấy. Đó là cách trung thực để báo cáo một mô hình bạn đã tinh chỉnh.

Từ và ký hiệu trong bài học này
quá khớp, chưa khớp
khớp theo nhiễu trong dữ liệu huấn luyện; hoặc quá đơn giản để khớp với khuôn mẫu
tập kiểm định
dữ liệu được giữ lại dùng để chọn các thiết lập
độ chệch, phương sai
sai theo cùng một cách mọi lần; hoặc thay đổi nhiều theo dữ liệu huấn luyện
ridge (alpha)
bình phương tối thiểu với suy giảm trọng số cường độ alpha
Đến lượt bạn

Viết fit(x, y) trả về các hệ số (lũy thừa thấp nhất trước) cho một đa thức bậc 14. Nó phải là một lời giải ridge, solve(A.T A + alpha I, A.T y) với một alpha nào đó trên 0 (bài kiểm tra kiểm tra điều này, nên một đa thức nhỏ hơn được đệm bằng số không không được tính). Qua nếu sai số trên tập kiểm thử được giấu dưới 0.045 và khoảng cách (kiểm thử trừ huấn luyện) dưới 0.05. Để so sánh: bình phương tối thiểu thuần có sai số kiểm thử khoảng 0.73, alpha tốt nhất có thể có sai số kiểm thử khoảng 0.034, và một alpha được chọn trung thực trên tập kiểm định, trên bất kỳ lưới hợp lý nào như các lũy thừa của 10, có sai số kiểm thử khoảng 0.034 tới 0.039. Một phép khớp phẳng, bị co quá mức sẽ trượt giới hạn 0.045.

Tắt AI: không có gia sư, gợi ý hoặc lời giải mẫu cho bài này. Chỉ dùng tư duy của riêng bạn.

Bạn thấy vấn đề gì trong bài học này? Hãy báo cáo nó · Hỏi về bài học này

Mã nguồn · chạy trên trình duyệt của bạn
Kết quả đầu ra

        

Tiến độ của bạn được tính ẩn danh. Thay đổi cái này