Congruence bias
Strategy: Khi kiểm định một giả thuyết, chủ động thiết kế phép thử có khả năng chứng minh giả thuyết SAI, không chỉ những phép thử có xu hướng xác nhận nó đúng.
Congruence bias là xu hướng chỉ kiểm tra giả thuyết ban đầu của mình bằng những phép thử “khớp” (congruent) với giả thuyết đó, mà bỏ qua việc thử các giả thuyết thay thế hoặc các phép thử có khả năng bác bỏ nó. Khác với confirmation bias — thiên kiến rộng hơn về việc ưu tiên thông tin xác nhận niềm tin sẵn có — congruence bias tập trung cụ thể vào quá trình kiểm định giả thuyết: người ta không chỉ tìm thông tin ủng hộ, mà còn thiết kế sai chính phép thử để nó gần như chắc chắn cho kết quả ủng hộ.
Thí nghiệm kinh điển của nhà tâm lý học Peter Wason (1960) minh hoạ rõ điều này: người tham gia được cho dãy số “2, 4, 6” và yêu cầu tìm ra quy luật đứng sau nó, bằng cách tự đề xuất các dãy số khác để kiểm tra. Hầu hết giả định ngay quy luật là “tăng dần 2 đơn vị”, rồi chỉ đề xuất các dãy như “8, 10, 12” hay “3, 5, 7” — luôn nhận được xác nhận “đúng” từ người thực nghiệm, khiến họ ngày càng tự tin vào giả thuyết sai. Quy luật thực sự đơn giản hơn nhiều: “các số tăng dần theo bất kỳ cách nào”. Vì không ai thử một dãy số phá vỡ giả định “+2” của mình (như “1, 2, 3”), rất ít người tìm ra quy luật đúng — không phải vì thiếu thông minh, mà vì bản năng chỉ tìm phép thử khẳng định thay vì phép thử có khả năng bác bỏ.
Nhà tâm lý học Jonathan Baron gọi cơ chế này là “congruence heuristic” — chỉ đánh giá một giả thuyết bằng cách tưởng tượng kết quả nếu nó đúng, mà quên hẳn việc cân nhắc điều gì sẽ xảy ra nếu nó sai. Trong môi trường phân tích dữ liệu sản phẩm, congruence bias xuất hiện khi một đội ngũ tin rằng “độ trễ thấp giúp giảm churn”, rồi chỉ chạy các phân tích trên nhóm người dùng nhạy cảm với tốc độ — nơi kết quả gần như chắc chắn ủng hộ giả thuyết ban đầu — mà bỏ qua nhóm người dùng không nhạy cảm với độ trễ, nơi giả thuyết có thể hoàn toàn không đúng. Thiết kế thử nghiệm A/B với chủ đích “cố chứng minh giả thuyết sai” — thay vì chỉ tìm cách xác nhận nó — là cách hiệu quả để phá vỡ congruence bias trong thực hành phân tích.
Congruence bias là một trường hợp đặc biệt của confirmation-bias, thu hẹp vào bối cảnh kiểm định giả thuyết một cách chủ động thay vì chỉ tiếp nhận thông tin thụ động. Nó cũng liên hệ ngược với testing-effect — trong khi testing-effect cho thấy việc chủ động kiểm tra kiến thức giúp ghi nhớ tốt hơn, congruence bias là lời nhắc rằng bản thân cách thiết kế phép kiểm tra quan trọng không kém việc có kiểm tra hay không: một phép thử được thiết kế sai vẫn có thể củng cố một niềm tin sai lầm với sự tự tin ngày càng cao.