Đánh giá mô hình phân loại AI: confusion matrix, ngưỡng và thiên lệch dữ liệu

🤖 Accuracy cao có thể che lỗi quan trọng

Ma trận nhầm lẫn chia dự đoán thành true positive (TP), false positive (FP), false negative (FN) và true negative (TN). Accuracy=(TP+TN)/tổng, nhưng với lớp hiếm, mô hình luôn đoán “không” vẫn có accuracy cao mà không phát hiện ca dương nào.

Ma trận nhầm lẫn hai nhân hai gồm TP FP FN TN, kèm precision bằng TP trên TP cộng FP và recall bằng TP trên TP cộng FN — Precision hỏi trong các dự đoán dương có bao nhiêu đúng; recall hỏi trong các ca dương thật mô hình tìm được bao nhiêu.

Ngưỡng tạo đánh đổi

Hạ ngưỡng dự đoán dương thường tăng recall nhưng có thể tăng FP và giảm precision. Chọn ngưỡng phải dựa chi phí lỗi: bỏ sót bệnh và báo động giả không có hậu quả như nhau.

Kiểm định ngoài mẫu

Tách train, validation và test trước khi điều chỉnh mô hình.
Tránh rò rỉ khi thông tin tương lai hoặc nhãn lọt vào đặc trưng.
Đánh giá theo nhóm liên quan, điều kiện vận hành và dữ liệu dịch chuyển.

⚠️ Công bằng không phải một con số duy nhất

Chênh lệch lỗi giữa nhóm có thể đến từ dữ liệu thiếu đại diện, nhãn thiên lệch hoặc bối cảnh. Chọn tiêu chí công bằng là quyết định kỹ thuật–xã hội cần công khai mục tiêu và đánh đổi.

📚 Căn cứ biên soạn

Chương trình GDPT 2018.
Mạch kiến thức Kết nối tri thức với cuộc sống lớp 12 và Quyết định 3588/QĐ-BGDĐT.
Nội dung biên soạn độc lập, nêu rõ giả định, phạm vi và giới hạn suy luận.

📚 Lý thuyết trọng tâm

Mục tiêu: Đọc precision, recall, false positive–false negative theo mục tiêu; kiểm tra dữ liệu ngoài mẫu và các nhóm thay vì dùng accuracy duy nhất.. Khi học Đánh giá mô hình phân loại AI: confusion matrix, ngưỡng và thiên lệch dữ liệu, hãy xác định khái niệm, điều kiện áp dụng và mối liên hệ giữa các dữ kiện; không chỉ ghi nhớ kết luận.

🧭 Ví dụ có hướng dẫn

Chọn một tình huống điển hình của bài. Bước 1: ghi dữ kiện và câu hỏi cần giải quyết. Bước 2: chọn khái niệm hoặc quy tắc phù hợp. Bước 3: giải thích từng bước và kiểm tra kết quả với điều kiện ban đầu. Nếu đổi một dữ kiện, hãy dự đoán kết quả thay đổi thế nào.

✍️ Luyện tập

Tóm tắt bài bằng ba ý: khái niệm, điều kiện và kết luận.
Tự tạo một ví dụ đúng và một phản ví dụ; chỉ ra điểm quyết định.
Giải lại ví dụ khi thay đổi một dữ kiện, sau đó nêu cách kiểm chứng.

Checklist tự đánh giá

Tôi giải thích được “vì sao”, không chỉ nêu đáp án.
Tôi nhận ra trường hợp không áp dụng được quy tắc.
Tôi kiểm tra được đơn vị, bằng chứng hoặc tính hợp lí của kết luận.