Как собрать базовую долю

Четырнадцать задач в этом курсе заканчиваются тем, что отправляют тебя что-то считать, и ни одна не говорит как. Здесь — как, и это четыре решения, все из которых должны быть приняты до того, как ты посмотришь. Этот момент и есть всё приложение: каждое из четырёх можно принять и потом, способом, который в ту минуту кажется разумным и вручает тебе ответ, на который ты надеялся. Ниже: замечай, что уровень удержался, чуть чаще, чем что он сломался, — и настоящие 30% превратятся в 66%, причём нигде и никто не солгал.

Требования: Урок 19, то есть чего стоит доля из малой выборки, когда она у тебя уже есть, и то, что в уроке 23: дисциплина записывать вещи тогда же, когда они происходят.

Что отбор делает с долей

Положим, правда на твоём инструменте такова: за сорок подряд идущих касаний уровня двенадцать удержались, а двадцать восемь сломались. Доля — 30%, и ничто ниже её не меняет. Меняется то, какая её часть доходит до твоей тетради. Уровень, который защищают размером, — событие; уровень, который тихо поддаётся, — нет. Положим тогда, что удержание ты замечаешь и записываешь чуть чаще, чем слом.

Замечаешь удержание	Замечаешь слом	Записанных касаний	Из них удержаний	Твой ответ
в 100% случаев	в 100% случаев	40,0	12,0	30,0 %
80 %	60 %	26,4	9,6	36,4 %
80 %	40 %	20,8	9,6	46,2 %
80 %	30 %	18,0	9,6	53,3 %
90 %	20 %	16,4	10,8	65,9 %

Читай первую строку первой, потому что она единственная не допущение. Записывай всё — и получишь долю. Каждая строка после неё — те же сорок касаний, те же двенадцать удержаний и тетрадь, которая одни из них видела, а другие нет.

Последняя строка та, над которой стоит посидеть. Уровень, который держится три раза из десяти, читается так, будто держится два раза из трёх, и лжи в этом нигде нет. Никто не выдумал случай. Никто не стёр убыток. Кто-то замечал яркие случаи девять раз из десяти, а тихие — два раза из десяти, и это не изъян характера, это то, что делает внимание.

И ущерб устроен ровно так же, как то, что урок 26 перевёл в числа. Записанное как отношение, а не в процентах, настоящее отношение здесь 12 к 28, и твоя тетрадь умножает его на частное двух частот, с которыми ты замечаешь: 0,9 делить на 0,2 будет 4,5, а 12 к 28, умноженное на 4,5, будет 1,93 к 1, то есть 65,9%. Отбор — это множитель для этого отношения. Отличие от урока 26 в том, что этот применяется без того, чтобы ты его выбирал, и нигде не проступает в той записи, которую он порождает.

Считать в четыре клетки

Как только выборка честна, всё, о чём просят уроки, выходит из одной таблицы. Возьми те же сорок касаний и добавь второй столбец: что ты сказал до того, как каждое разрешилось.

Как ты это назвал	Удержался	Сломался	Итог строки
Ты сказал: удержится	8	8	16
Ты сказал: сломается	4	20	24
Итог столбца	12	28	40

Каждое число, о котором курс тебя просил, там есть. Базовая доля — это итоги столбцов: 12 из 40, то есть 30%. Твоё прочтение — это два столбца, прочитанные сверху вниз: из двенадцати удержавшихся ты назвал восемь, то есть 67%, а из двадцати восьми сломавшихся ты назвал двадцать, то есть 71%. В записи урока 26 ты — прочтение 67/71.

А ответ на вопрос, которому урок 26 посвятил целую таблицу — ты назвал вот это удержанием, каков шанс, что так и есть, — это первая строка, прочитанная поперёк: 8 из 16 названных тобою так, то есть 50%. Ни формулы, ни множителя, ни арифметики сверх одного деления. Таблица два на два даёт тебе ответ подсчётом, и именно поэтому собирать надо в этой форме.

Из неё выпадает одна вещь, которую стоит сохранить. Когда оно говорит «удержится», прочтение 67/71 умножает это отношение на 2,33 — ровно на столько же, на сколько 70/70, потому что множитель есть частное, а не пара, так что прочтение, которое хуже с одной стороны и лучше с другой, может быть тем же самым прочтением. Когда оно говорит «сломается», эти двое расходятся, 0,47 против 0,43, и это точка урока 31 об асимметричных прочтениях в миниатюре. Так или иначе, рычаг не во втором знаке после запятой твоей собственной меткости. Он в той выборке, на которой её измерили.

Что это не решает

Что тридцати или сорока наблюдений хватит. Не хватит, ни для чего тонкого. Тридцати хватает, чтобы увидеть крупный эффект, и близко не хватает, чтобы увидеть мелкий, и урок 19 — это место, где это переводится в числа. Это приложение о том, как собрать выборку, которая значит то, что говорит, а это другой вопрос, нежели насколько большой она должна быть; второй не встаёт, пока не решён первый.

Что подряд взятая выборка есть выборка несмещённая. Она убирает тот отбор, который делал ты. Она не убирает тот отбор, который сделал рынок: твоё окно покрывало определённые часы, определённый режим волатильности и определённый инструмент, и ответ принадлежит им. Две подряд взятые выборки за два месяца могут честно разойтись, и полезная реакция — прогнать ещё раз, а не усреднять их.

Что закрепление критерия заранее делает его верным критерием. Оно делает подсчёт честным, а не верным. Плохо выбранный порог, закреплённый заранее и применённый последовательно, даёт тебе чистое измерение не того — и узнаешь ты это как раз из подсчёта, ради чего критерий и записывается там, где ты сможешь перечитать его потом.

Что подсчёт и есть трудная часть. Подсчёт занимает час. Трудная часть в том, что убеждение у тебя уже есть, что исход виден раньше, чем ты пишешь строку, и что каждое из четырёх решений можно тихо пересмотреть в сторону этого убеждения. Поэтому они ложатся на бумагу до первого наблюдения, и поэтому первая задача — о том, чтобы отдать своё определение кому-то другому.

Что число, полученное так, есть преимущество. Это описание того, что случилось, в форме, с которой можно спорить. Чтобы превратить его в повод торговать, нужен урок 17, а доля, которая выходит равной базовой, тоже результат — обычно самый ценный, потому что это тот результат, который тебя останавливает.

Считать легко, а честность дорога. Всё, что выше, — способ потратить её прежде, чем увидишь, что она покупает.

1. Пусть твоё определение переживёт второго читателя. Запиши правило для одного наблюдения в трёх предложениях, затем примени его к двадцати случаям. Отдай эти три предложения и те же двадцать случаев кому-то другому — или себе через неделю, что почти так же хорошо и куда легче устроить, — и сосчитай расхождения. Больше двух-трёх — и в правиле ещё сидит суждение, которое ты не записал. Найди его и запиши. Это стоит вечера и это разница между измерением и мнением с приделанным к нему числом.
2. Оцени свой собственный отбор. Возьми правило по уровням и месяц, который ты уже торговал. Посчитай его дважды: один раз по памяти, перечисляя случаи, которые вспоминаются, и один раз подряд по графику, беря каждый случай по порядку. Сравни две доли. Разрыв и есть твой собственный множитель из первой таблицы, измеренный, а не предположенный, и это то число, которое говорит, какая часть всего, во что ты веришь от смотрения, происходит из смотрения.
3. Построй одну таблицу два на два и считай ответ прямо с неё. На тридцати подряд идущих случаях записывай своё суждение до того, как каждый разрешится, и исход после. Заполни четыре клетки. Затем считай три числа прямо оттуда: базовую долю из итогов столбцов, две свои доли вниз по столбцам и ответ поперёк той строки, по которой ты на самом деле действуешь. Сделай это один раз — и всякая задача в этом курсе, просящая долю, станет теми же двадцатью минутами работы.

Источники. Joseph Berkson, «Limitations of the Application of Fourfold Table Analysis to Hospital Data» (Biometrics Bulletin, 1946), где впервые изложен отказ второй таблицы: четырёхклеточная таблица, построенная из случаев, отобранных по чему-то, связанному с обоими столбцами, даёт связь, которой в той совокупности, откуда она взята, нет. Amos Tversky и Daniel Kahneman, «Availability: A Heuristic for Judging Frequency and Probability» (Cognitive Psychology, 1973), за механизм, стоящий за первой таблицей: то, насколько легко случай приходит на ум, занимает место того, насколько часто он происходил, а яркие случаи приходят на ум легче. Joseph Simmons, Leif Nelson и Uri Simonsohn, «False-Positive Psychology» (Psychological Science, 2011), за третье решение: работа показывает, насколько результат можно сдвинуть выбором критериев и правил остановки, сделанным уже при данных перед глазами, исследователями, которые не пытаются жульничать.

Ничего из этого не ново и ничего не трудно. Это здесь потому, что трудное — сделать это до того, как ответ станет виден, и именно об этом просит каждый урок, который заканчивается просьбой о доле. Вернись к той задаче, которая тебя сюда отправила: что бы она ни считала, метод вот этот.

Только в образовательных целях. Торговля сопряжена со значительным риском убытков. Это не финансовая консультация. Прошлые результаты не гарантируют будущих.