Память услужливо переписывает прошлое: «я так и знал». Единственная защита — журнал прогнозов: записать уверенность до исхода и сверить после. У этой практики есть честный счёт — оценка Брайера, — и он устроен так, что выгоднее всего называть правду.
Мнение, не записанное до исхода, после исхода ничего не стоит.
Принцип журнала прогнозовБез записи невозможно узнать, хороши ли ваши суждения: память подгоняет прошлое под исход.
Формат проще дневника: одна строка на прогноз.
Формулировка — проверяемая: «сдам пробник на 80+ к 1 марта», а не «подготовлюсь получше».
Уверенность — числом: $70\%$, а не «скорее всего» (Модуль $3.1$, шкала Кента).
Срок проверки — дата, когда исход станет известен. Без срока прогноз нефальсифицируем.
Исход и счёт — в день проверки: сбылось или нет, и штраф Брайера (Раздел $4$).
Десять минут в неделю — и через пару месяцев у вас есть то, чего нет почти ни у кого: измеренное качество собственных суждений. Именно так тренировались суперпрогнозисты Тетлока.
Четыре вопроса на механику журнала и счёта.
Помните формулу штрафа: $(p - \text{исход})^2$, где исход равен $1$ или $0$.
1Что обязательно в строке журнала прогнозов?
2Прогноз с уверенностью $0{,}9$ сбылся. Штраф Брайера за него?
3У Ани средний Брайер $0{,}18$, у Бориса $0{,}25$. Кто прогнозирует лучше и о чём говорит $0{,}25$?
4Вы верите в успех на $70\%$. Что выгоднее записать в журнал при счёте Брайера?
Метеоролог Гленн Брайер придумал счёт для прогнозов погоды в 1950 году — он работает для любых прогнозов.
$p_i$ — заявленная уверенность, $o_i$ — исход ($1$ сбылось, $0$ нет). Чем ниже, тем лучше: идеал $0$, вечное «фифти-фифти» даёт $0{,}25$.
Пример. Три прогноза: $0{,}9$ — сбылся, $0{,}7$ — нет, $0{,}6$ — сбылся. Штрафы: $(0{,}9-1)^2 = 0{,}01$; $(0{,}7-0)^2 = 0{,}49$; $(0{,}6-1)^2 = 0{,}16$. Средний счёт: $(0{,}01 + 0{,}49 + 0{,}16)/3 = 0{,}22$ — чуть лучше уровня «всегда 50%». Самым дорогим оказался уверенный промах — так и должно быть.
Счёт Брайера — «честное» правило: минимальный ожидаемый штраф достигается, когда называешь то, во что веришь.
Бегунок на иллюстрации показывает этот механизм вживую: квадратичный штраф делает правду самой дешёвой стратегией. Поэтому журналу со счётом Брайера можно доверять: он не поощряет ни осторожничать, ни геройствовать.
Журнал замыкает петлю: предсказал → проверил → скорректировал.
Главное. Запишите прогноз до исхода: формулировка, уверенность числом, срок. Сверьте после и посчитайте Брайера: $(p - o)^2$, ниже — лучше, $0{,}25$ — уровень монетки с «всегда 50%». Правило честное: и завышение, и занижение уверенности обходятся дороже правды.
Пять вопросов по ключевым идеям модуля. Выберите ответ — сразу увидите верный вариант и пояснение. Прогресс сохраняется.
Образовательный материал. Все числа (пример $0{,}22$, база $0{,}25$, штрафы $0{,}04/0{,}64$ и $0{,}25/0{,}25$, выгода честности $0{,}21 < 0{,}25$) проверены расчётом. Ссылки ведут на поиск источника.