Canuc80k AI

Random Forest và Gradient Boosting

Random Forest gộp dự đoán từ nhiều cây được làm khác nhau bằng lấy mẫu và chọn đặc trưng ngẫu nhiên. Gradient Boosting thêm từng cây để cải thiện hàm mất mát của cả tổ hợp.

Điểm chính

Random Forest thường dễ dùng làm mốc so sánh. Boosting có thể đạt kết quả tốt trên dữ liệu bảng, nhưng số vòng, độ sâu cây và learning rate cần được chọn trên validation.

Chỗ dễ nhầm

Boosting không luôn tốt hơn Random Forest. So trên cùng phép chia và cùng metric; với dữ liệu theo thời gian, đừng chọn mô hình bằng phép chia ngẫu nhiên.