Mô hình học máy

So sánh 7 mô hình của bài báo 2 dưới kiểm định chéo theo khối không gian 5 km, thẻ mô hình và phần mềm mô hình (Model Lab, Nội dung 4).

Đọc chỉ số đúng cách

Bảng chỉ hiện chỉ số kiểm định chéo (5 fold, 80.000 mẫu cân bằng 1:1); không hiện AUC trên chính tập huấn luyện vì đó không phải chỉ số kiểm định. Nhãn huấn luyện lấy từ ảnh Sentinel-1 có mặt nạ độ dốc 5°, loại 55,9% diện tích tỉnh khỏi khả năng mang nhãn ngập; tập huấn luyện cân bằng 1:1 làm xác suất cao hơn thực tế. Xem bản hiệu chỉnh tiên nghiệm để so sánh.

So sánh 7 mô hình x 2 cách chia mẫu

Nguồn: danh mục mô hình trong CSDL (bài báo 2, script 41).

Khối không gian 5 km(cách đánh giá dùng để công bố)

So sánh mô hình, Khối không gian 5 km
Mô hình	AUC	ACC	F1	Kappa	RMSE
XGBoost	0,9660	0,9171	0,9190	0,8343	0,2502
Rừng ngẫu nhiên	0,9659	0,9181	0,9204	0,8363	0,2497
LightGBM	0,9654	0,9164	0,9181	0,8328	0,2526
DNN-PSOchính thức	0,9610	0,9138	0,9166	0,8276	0,2560
Hồi quy logistic	0,9562	0,9094	0,9132	0,8187	0,2633
DNN mặc định (không PSO)	0,9546	0,9107	0,9146	0,8213	0,2608
SVM nhân RBF	0,9437	0,9077	0,9119	0,8155	0,2747

Ngẫu nhiên

So sánh mô hình, Ngẫu nhiên
Mô hình	AUC	ACC	F1	Kappa	RMSE
LightGBM	0,9738	0,9299	0,9322	0,8597	0,2320
XGBoost	0,9729	0,9284	0,9308	0,8569	0,2343
Rừng ngẫu nhiên	0,9717	0,9262	0,9287	0,8523	0,2377
DNN-PSOchính thức	0,9679	0,9227	0,9254	0,8453	0,2434
Hồi quy logistic	0,9577	0,9100	0,9138	0,8200	0,2625
DNN mặc định (không PSO)	0,9576	0,9135	0,9173	0,8270	0,2578
SVM nhân RBF	0,9470	0,9101	0,9142	0,8203	0,2722

Chia mẫu ngẫu nhiên thổi phồng AUC bao nhiêu

Chia ngẫu nhiên để các ô kiểm tra nằm sát ô huấn luyện nên điểm số cao hơn thực tế; mức thổi phồng khác nhau tuỳ họ mô hình, vì vậy hệ thống xếp hạng theo kiểm định không gian.

DNN-PSO so với XGBoost

Hai bản đồ nguy cơ có tệp mô hình để suy luận toàn tỉnh.

Chênh lệch diện tích nguy cơ cao + rất cao (DNN-PSO trừ XGBoost, toàn tỉnh): 32,21 km².

Hệ số Kappa giữa hai bản đồ 5 cấp: 0,7762.

Ma trận chuyển cấp (km²): hàng là cấp DNN-PSO, cột là cấp XGBoost
	Rất thấp	Thấp	Trung bình	Cao	Rất cao
Rất thấp	4.454,7	62,1	15,4	3,6	0,3
Thấp	62,8	69,4	34,6	10,7	1,2
Trung bình	17,9	53,4	65,1	40,6	5,8
Cao	4,9	20,4	51,3	98,6	52,1
Rất cao	1,4	3,9	12,5	78,3	747,6

Lớp chính thức của hệ thống đặt trong cấu hình (mặc định DNN-PSO, sản phẩm Nội dung 4); XGBoost là lớp so sánh có AUC kiểm định không gian cao nhất ở bài 2. Mô hình đang được duyệt chính thức: DNN-PSO. Hai bản đồ có thể so sánh trực tiếp trên bản đồ.