Illusion of validity
Strategy: Khi một hồ sơ hay bộ dữ liệu "kể một câu chuyện quá mạch lạc" khiến bạn tự tin dự đoán, chủ động tra lại base rate (tỷ lệ nền) và hiệu suất dự đoán lịch sử của chính phương pháp đó, thay vì tin vào cảm giác mạch lạc.
Illusion of validity (ảo tưởng về độ tin cậy) là xu hướng con người tự tin thái quá vào khả năng diễn giải và dự đoán chính xác một kết quả từ một tập dữ liệu, đặc biệt khi dữ liệu đó tạo thành một mẫu hình nhất quán, mạch lạc, dễ “kể thành câu chuyện” — bất kể độ tin cậy thực tế của phương pháp dự đoán đó thấp đến đâu.
Khái niệm được Daniel Kahneman và Amos Tversky giới thiệu trong nghiên cứu về phán đoán và ra quyết định. Hai ông chỉ ra: con người thường dự đoán bằng cách chọn kết quả đại diện nhất (representative) cho dữ liệu đầu vào, và mức độ tự tin vào dự đoán phụ thuộc chủ yếu vào độ “khớp mẫu hình” (representativeness) chứ không phụ thuộc vào độ tin cậy thống kê thực sự. Kahneman kể lại trải nghiệm cá nhân khi làm việc chọn lọc lãnh đạo cho quân đội Israel: ông và đồng nghiệp rất tự tin vào khả năng dự đoán ai sẽ là lãnh đạo giỏi dựa trên một bài tập vượt chướng ngại vật nhóm — nhưng khi theo dõi thực tế, hiệu suất của bài tập này gần như không dự đoán được ai sẽ thực sự trở thành lãnh đạo tốt.
Một ví dụ khác Kahneman phân tích: hiệu suất của các nhà tư vấn đầu tư qua nhiều năm không ai vượt trội hơn ai một cách nhất quán — gợi ý rằng thành công của họ gần với trò chơi may rủi hơn là kỹ năng thực sự, dù bản thân các nhà tư vấn (và khách hàng) đều tin chắc vào “con mắt nhìn thị trường” của mình.
Illusion of validity đặc biệt nguy hiểm trong các quyết định dựa trên hồ sơ cá nhân: một bộ hồ sơ vay vốn “kể một câu chuyện mạch lạc” (công việc ổn định, lịch sử tín dụng đẹp, mục đích vay rõ ràng) dễ khiến người thẩm định tự tin cao vào khả năng trả nợ của khách hàng, cao hơn hẳn mức độ chính xác thống kê thực tế của việc đánh giá thủ công so với mô hình chấm điểm định lượng. Trong tuyển dụng, một buổi phỏng vấn “suôn sẻ, mạch lạc” thường khiến nhà tuyển dụng tự tin thái quá vào đánh giá của mình, dù nhiều nghiên cứu cho thấy phỏng vấn không cấu trúc là một trong những công cụ dự đoán hiệu suất công việc kém tin cậy nhất.
Illusion of validity có quan hệ gần với overconfidence-effect (biểu hiện chung của việc tự tin vượt mức chính xác thực tế) và base-rate-fallacy (bỏ qua tỷ lệ nền để ưu tiên câu chuyện cụ thể) — và thường được confirmation-bias củng cố, vì một khi đã tin vào “câu chuyện mạch lạc”, ta có xu hướng chỉ tìm kiếm thông tin xác nhận nó.