Chương trình học Bài 241 trên tổng số 246 · Mô-đun 23: Xưởng capstone: một thẻ mô hình bạn có thể chạy
Mô-đun 23: Xưởng capstone: một thẻ mô hình bạn có thể chạy

Đánh giá trên dữ liệu giữ lại, có thanh sai số

Vì sao điều này quan trọng Mọi lựa chọn bạn đưa ra đều đã nhìn vào điểm kiểm định, nên giờ nó hơi lạc quan. Một lần đánh giá trên dữ liệu bạn chưa bao giờ nhìn, có thanh sai số, là con số bạn có thể báo cáo.

Chọn các thiết lập FINAL từ những gì các ablation của bạn cho thấy, nhiều nhất 4 chi phí đường cơ sở. Huấn luyện nó với seed 0. Rồi chấm nó một lần trên tập kiểm tra ẩn: track.score(model, hidden=True, per_item=True) cho một con số cho mỗi mục kiểm tra, và studio.interval(items) cho trung bình và một khoảng bootstrap 95%.

Tập ẩn đi kèm bên trong trang này, nên nó được giấu, không bị niêm phong: bạn có thể nhìn vào nó. Chứng chỉ của khóa học không dựa vào sự bí mật của nó; thẻ của bạn thì có, nên hãy nhìn một lần, ở cuối.

Ngưỡng đạt (kế hoạch mặc định vượt cả hai): language, trung bình ít nhất -2.72; images, ít nhất 0.42.

Từ và ký hiệu trong bài học này
đường cơ sở
lần chạy thông thường mà mọi thay đổi được đo so với nó, trên cùng các seed
cắt bỏ (ablation)
một thay đổi cho đường cơ sở, chạy trên vài seed, để xem nó làm gì
tập kiểm tra ẩn
dữ liệu được chấm một lần, ở cuối, sau khi mọi lựa chọn đã được đưa ra
Đến lượt bạn

Gán FINAL, huấn luyện final, và điền validation (điểm kiểm định của nó), hidden (trung bình, thấp, cao) và gap (kiểm định trừ trung bình ẩn).

Bạn thấy vấn đề gì trong bài học này? Hãy báo cáo nó · Hỏi về bài học này

Bài tập này sẽ sớm mở.

Hoàn thành bài học trước đó để mở khóa bài này. Toàn bộ khóa học là miễn phí, không cần tài khoản, và bạn có thể đọc bài học này ngay bây giờ.