Ретроградный Меркурий

Обратная связь по ошибкам

Как рассматриваемая система (утверждение, метод или область) реагирует на данные, прямо противоречащие её предсказаниям или исходным предпосылкам?

• 0 · 0.00Она корректирует свои параметры, сужает область применения или отвергает опровергнутую гипотезу при регулярном появлении аномалий.2,32%
• 1 · 0.85Она выдвигает непроверяемые объяснения ad hoc, единственная цель которых — защитить базовое утверждение от опровержения.35,06%
• 2 · 1.00Она трактует любое противоречащее свидетельство как доказательство намеренного заговора, манипуляции данными или сокрытия фактов внешними институтами.1,91%
• 3 · 0.95Она списывает отсутствие результата на неверный настрой, недостаток веры или слабую вовлечённость адресата.3,28%
• 4 · 0.80Она избегает столкновения с ошибками, формулируя предсказания настолько размыто, что любой исход можно задним числом объявить успехом.57,44%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Причинный механизм

Какой механизм постулирует утверждение или метод для передачи воздействия от причины к следствию?

• 0 · 0.00Измеримый физический, химический или информационный носитель, согласующийся с известными законами сохранения и масштабами взаимодействий.0,60%
• 1 · 0.10Исключительно изменения во внутренних установках человека, уровне стресса, внимании или поведении (ожидание, плацебо, ноцебо, самоисполняющееся пророчество), без участия внешних сил.2,91%
• 2 · 1.00Неизмеримые поля, энергии или память вещества, не дающие никакого эффекта при контролируемых инструментальных измерениях.4,32%
• 3 · 1.00Прямое воздействие со стороны объектов или явлений совершенно иного масштаба при отсутствии физического вектора передачи достаточной силы.65,31%
• 4 · 1.00Магический изоморфизм: сходство формы, имени, символа или даты воспринимается как реальная физическая причинно-следственная связь.26,86%

Применимо: 96% (Не применимо: 4%)

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Тест на ослепление

Что происходит с заявленным эффектом или истинностью утверждения, когда испытуемый полностью ослеплён относительно факта и характера воздействия (контроль ожиданий)?

• 0 · 0.00Эффект сохраняет статистически значимую силу независимо от знаний, убеждений и ожиданий испытуемого и исследователя.1,92%
• 1 · 1.00Эффект снижается до уровня случайного шума, если испытуемый не знает о применении метода или получает имитацию (пустышку).77,84%
• 2 · 0.35Эффект частично сохраняется только на уровне поведенческих, эргономических или эмоциональных переменных, но исчезает для заявленных физических изменений.1,06%
• 3 · 1.00Система заранее отвергает контролируемое ослепление как неприемлемое или разрушительное для самого явления и отказывается от отделения эффекта от шума.16,04%
• 4 · 0.05Утверждение описывает феномен, где вера испытуемого выступает единственным причинным фактором, поэтому без неё феномен перестаёт существовать по определению.3,15%

Применимо: 93% (Не применимо: 7%)

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Фальсифицируемость

Какие возможные состояния реальности система категорически исключает (какие наблюдения заставили бы её признать свою ложность)?

• 0 · 0.00Она точно определяет измеримые результаты и пороговые значения, наблюдение которых окончательно опровергает утверждение.2,91%
• 1 · 1.00Она не исключает ни одного состояния: как исход А, так и не-А трактуются как подтверждение модели.87,85%
• 2 · 0.90Она допускает опровержение лишь теоретически, выдвигая заведомо технически или логически невыполнимые требования к измерениям.8,63%
• 3 · 0.25Она состоит исключительно из оценочных, метафорических или экзистенциальных суждений, в которых по определению нет места фальсификации.0,60%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Семантическая точность

Как абстрактные концепции системы связаны с нижними ступенями лестницы абстракции (конкретными измерениями и действиями)?

• 0 · 0.00Каждое теоретическое понятие имеет однозначное операциональное определение, единицу измерения и протокол, позволяющий независимое воспроизведение.1,51%
• 1 · 0.80Понятия намеренно размыты (эффект Барнума), что позволяет аудитории привязать общее описание к собственному личному опыту.52,69%
• 2 · 1.00Она заимствует строгие научные термины (квантовый, частота, энергия, детокс, гравитация), оторванные от их математических определений, и использует их как метафоры.6,63%
• 3 · 0.90Она подменяет смыслы (приём motte-and-bailey): обещает буквальный физический эффект в рекламе, но при критике отступает к символической или психологической трактовке.39,18%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Бритва Оккама

Что остаётся от прогностической или практической ценности системы после применения бритвы Оккама (полного отсечения её специфического непроверяемого понятийного аппарата)?

• 0 · 0.00Устранение понятийного аппарата уничтожает способность предсказывать и воспроизводить явления, так как каждый элемент соотносится с реальными переменными системы.0,32%
• 1 · 0.40После удаления эзотерической или идеологической надстройки остаётся набор простых правил эргономики, гигиены, психологии или здравого смысла, работающих точно так же и без неё.2,84%
• 2 · 0.95После устранения специфических концепций и ритуалов система теряет всякое содержание и сводится к чистому плацебо или случайному угадыванию.94,61%
• 3 · 1.00Система сводится лишь к отрицанию существующего знания и не предлагает собственной модели, способной генерировать проверяемые практические прогнозы.2,22%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Сеть измерений

Как утверждение согласуется с независимыми, взаимно проверяемыми системами измерений из смежных областей?

• 0 · 0.00Оно полностью согласуется с данными из независимых областей (сходимость доказательств); любые расхождения объясняются известными пределами точности приборов.1,77%
• 1 · 0.95Его принятие потребовало бы признать недействительными фундаментальные, многократно подтверждённые законы сразу во множестве независимых научных дисциплин.83,01%
• 2 · 1.00Его принятие потребовало бы предположить, что тысячи независимых институтов, спутников, лабораторий и исследователей из соперничающих стран десятилетиями фабрикуют единую ложь.3,70%
• 3 · 0.15Оно касается субъективной веры и её влияния на поведение индивида, поэтому не противоречит психологии до тех пор, пока не претендует на физическую истинность этой веры.11,52%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Независимость от оператора

Зависит ли результат применения метода или измерения от личности, уровня посвящения или личных убеждений того, кто его выполняет?

• 0 · 0.00Результат инвариантен к оператору: любой исследователь (включая скептика), соблюдающий тот же протокол в тех же условиях, получает сходящееся распределение результатов.5,85%
• 1 · 0.85Получение результата требует особого дара, субъективной интуиции или изменённого состояния сознания оператора, которые невозможно свести к воспроизводимому алгоритму.44,29%
• 2 · 1.00Присутствие скептически настроенного наблюдателя или регистрирующей аппаратуры объявляется фактором, блокирующим действие метода.5,57%
• 3 · 0.90Разные операторы одной и той же системы, анализируя один и тот же случай в одно и то же время, дают взаимоисключающие диагнозы или прогнозы.44,29%

Применимо: 60% (Не применимо: 40%)

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Эволюция модели

Какова динамика развития области или утверждения во времени с точки зрения накопления знаний и устранения ошибок?

• 0 · 0.00Наблюдается познавательный прогресс: предсказываются новые, ранее неизвестные явления, исправляются старые ошибки и уточняются рабочие инструменты.1,16%
• 1 · 0.80Она застыла во времени: апеллирует к неизменной древней мудрости или авторитету основателя и преподносит отсутствие изменений как доказательство совершенства.42,58%
• 2 · 0.90Она развивается исключительно регрессивно: каждое изменение лишь заделывает логические бреши и оправдывает неудачи, не ведя к новым проверяемым открытиям.42,58%
• 3 · 1.00Она развивается за счёт постоянной замены опровергнутых утверждений новыми сюжетами, сохраняя при этом один и тот же эмоциональный шаблон (страх или обещание лёгкого успеха).13,68%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.

Асимметрия рисков

Каково соотношение между доказанностью заявляемых эффектов и ценой (финансовой, медицинской, мировоззренческой), которую требуют заплатить от аудитории?

• 0 · 0.00Рекомендуемые действия соразмерны силе доказательств; профиль рисков, побочные эффекты и границы применимости открыто измерены и описаны.5,61%
• 1 · 1.00Она использует страх или неуверенность, подталкивая людей к отказу от проверенных защитных или медицинских мер в пользу недоказанных альтернатив.38,45%
• 2 · 0.60Она обещает несоразмерно большую выгоду за минимальные усилия, ставя успех в зависимость от покупки новых продуктов, сеансов или ступеней посвящения.25,90%
• 3 · 0.85Она выстраивает закрытую групповую идентичность, где психологическая цена выхода из заблуждения крайне высока, поскольку сомнение ведёт к исключению из сообщества избранных.30,04%

Полоса показывает вероятность каждого ответа по модели. Вес отражает, насколько ответ приближен к bullshit.