nhiều ý tưởng cũng giống như ta chọn nhiều bộ lọc cho một bức ảnh trên
Instagram đến nỗi mà đôi khi thật khó xác định là Tetlock thực sự tin vào
điều gì.
Năm 2005, ông công bố kết quả của cuộc nghiên cứu lâu năm về đánh
giá của chuyên gia, và những kết quả này đã thu hút sự chú ý của Hoạt
động Dự án Nghiên cứu Tiên tiến về Tình báo (IARPA), một tổ chức của
chính phủ chuyên hỗ trợ những nghiên cứu về những vấn đề phức tạp nhất
của cộng đồng tình báo Hoa Kỳ. Năm 2011, IARPA phát động cuộc thi dự
đoán kéo dài bốn năm, trong đó năm nhóm do các nhà nghiên cứu dẫn đầu
sẽ thi đua với nhau. Mỗi nhóm có thể tuyển dụng, đào tạo và thí nghiệm
theo bất kỳ cách nào mà họ thấy phù hợp. Mỗi ngày trong bốn năm, họ bắt
buộc phải đưa ra dự đoán vào lúc 9 giờ sáng theo giờ của bờ Đông. Các câu
hỏi rất khó. Xác suất một thành viên sẽ rút khỏi Liên minh châu Âu vào
một thời hạn nhất định là bao nhiêu? Có phải thị trường chứng khoán Nhật
Bản (Nikkei) sẽ đóng cửa với trên 9.500 điểm? Nguy cơ xảy ra một cuộc
đụng độ của hải quân trên biển Hoa Đông làm thiệt mạng hơn 10 người là
bao nhiêu? Các nhà dự đoán có thể cập nhật dự báo của mình bất cứ khi
nào họ muốn, nhưng hệ thống tính điểm sẽ cho điểm mức độ chính xác của
dự báo theo thời gian, vì vậy một dự đoán xuất sắc vào thời điểm sát giờ
hết hạn của câu hỏi vẫn có điểm số thấp.
Đội thi do Tetlock và Mellerx đứng đầu được gọi là nhóm “Dự án
phán đoán tốt”. Thay vì tuyển dụng các chuyên gia nổi tiếng, trong năm
đầu tiên của cuộc thi, họ công khai mời các tình nguyện viên tham gia. Sau
một bước sàng lọc đơn giản, họ mời 3.200 người bắt đầu tham gia dự đoán.
Từ những người đó, họ xác định được một nhóm nhỏ những người dự đoán
có đặc tính giống chuyên gia cáo nhất – những người thông minh với nhiều
sở thích và gu đọc sách đa dạng nhưng không nhất thiết phải có nền tảng
chuyên môn phù hợp – và Tetlock và Mellerx đưa ra các dự đoán của đội
thi theo quan điểm của nhóm này. Họ đã chiến thắng cuộc thi một cách
oanh liệt.
Vào năm thứ hai, nhóm “Dự án phán đoán tốt” bố trí ngẫu nhiên các
nhà “siêu dự đoán” hàng đầu thành các nhóm làm việc trực tuyến trong đó