Chương 8·Bài 8.2Pro

Phân tích dữ liệu trước huấn luyện

Validation gần như hoàn hảo chỉ sau vài phút huấn luyện thường là dấu hiệu có lỗi, không phải model giỏi. Ví dụ tập validation chứa bản gần giống của các tài liệu trong train, nên model chỉ cần nhớ là đúng. Phân tích dữ liệu trước khi huấn luyện (EDA, exploratory data analysis) giúp phát hiện những lỗi như vậy sớm. Mỗi điều tìm thấy phải dẫn tới một việc cụ thể: sửa cách đọc file, chia train/validation theo nhóm, bỏ một cột không có lúc dự đoán, hoặc kiểm thêm một phần dữ liệu.

Bài này dành cho tài khoản Pro

Mở khóa bằng tài khoản Pro
Mục lục