Как устроен BullshitRank

Как рассматриваемая система (утверждение, метод или область) реагирует на данные, прямо противоречащие её предсказаниям или исходным предпосылкам?

0. 0.00Она корректирует свои параметры, сужает область применения или отвергает опровергнутую гипотезу при регулярном появлении аномалий.
1. 0.85Она выдвигает непроверяемые объяснения ad hoc, единственная цель которых — защитить базовое утверждение от опровержения.
2. 1.00Она трактует любое противоречащее свидетельство как доказательство намеренного заговора, манипуляции данными или сокрытия фактов внешними институтами.
3. 0.95Она списывает отсутствие результата на неверный настрой, недостаток веры или слабую вовлечённость адресата.
4. 0.80Она избегает столкновения с ошибками, формулируя предсказания настолько размыто, что любой исход можно задним числом объявить успехом.

Какой механизм постулирует утверждение или метод для передачи воздействия от причины к следствию?

0. 0.00Измеримый физический, химический или информационный носитель, согласующийся с известными законами сохранения и масштабами взаимодействий.
1. 0.10Исключительно изменения во внутренних установках человека, уровне стресса, внимании или поведении (ожидание, плацебо, ноцебо, самоисполняющееся пророчество), без участия внешних сил.
2. 1.00Неизмеримые поля, энергии или память вещества, не дающие никакого эффекта при контролируемых инструментальных измерениях.
3. 1.00Прямое воздействие со стороны объектов или явлений совершенно иного масштаба при отсутствии физического вектора передачи достаточной силы.
4. 1.00Магический изоморфизм: сходство формы, имени, символа или даты воспринимается как реальная физическая причинно-следственная связь.
5. n/aНе применимо: утверждение не постулирует причинного механизма или метода; оно лишь констатирует факты, исторические события или скрытую истину.

Что происходит с заявленным эффектом или истинностью утверждения, когда испытуемый полностью ослеплён относительно факта и характера воздействия (контроль ожиданий)?

0. 0.00Эффект сохраняет статистически значимую силу независимо от знаний, убеждений и ожиданий испытуемого и исследователя.
1. 1.00Эффект снижается до уровня случайного шума, если испытуемый не знает о применении метода или получает имитацию (пустышку).
2. 0.35Эффект частично сохраняется только на уровне поведенческих, эргономических или эмоциональных переменных, но исчезает для заявленных физических изменений.
3. 1.00Система заранее отвергает контролируемое ослепление как неприемлемое или разрушительное для самого явления и отказывается от отделения эффекта от шума.
4. 0.05Утверждение описывает феномен, где вера испытуемого выступает единственным причинным фактором, поэтому без неё феномен перестаёт существовать по определению.
5. n/aНе применимо: утверждение не касается эффекта метода или вмешательства, которое можно было бы ослепить (оно постулирует факты, историю или скрытую истину).

Какие возможные состояния реальности система категорически исключает (какие наблюдения заставили бы её признать свою ложность)?

0. 0.00Она точно определяет измеримые результаты и пороговые значения, наблюдение которых окончательно опровергает утверждение.
1. 1.00Она не исключает ни одного состояния: как исход А, так и не-А трактуются как подтверждение модели.
2. 0.90Она допускает опровержение лишь теоретически, выдвигая заведомо технически или логически невыполнимые требования к измерениям.
3. 0.25Она состоит исключительно из оценочных, метафорических или экзистенциальных суждений, в которых по определению нет места фальсификации.

Как абстрактные концепции системы связаны с нижними ступенями лестницы абстракции (конкретными измерениями и действиями)?

0. 0.00Каждое теоретическое понятие имеет однозначное операциональное определение, единицу измерения и протокол, позволяющий независимое воспроизведение.
1. 0.80Понятия намеренно размыты (эффект Барнума), что позволяет аудитории привязать общее описание к собственному личному опыту.
2. 1.00Она заимствует строгие научные термины (квантовый, частота, энергия, детокс, гравитация), оторванные от их математических определений, и использует их как метафоры.
3. 0.90Она подменяет смыслы (приём motte-and-bailey): обещает буквальный физический эффект в рекламе, но при критике отступает к символической или психологической трактовке.

Что остаётся от прогностической или практической ценности системы после применения бритвы Оккама (полного отсечения её специфического непроверяемого понятийного аппарата)?

0. 0.00Устранение понятийного аппарата уничтожает способность предсказывать и воспроизводить явления, так как каждый элемент соотносится с реальными переменными системы.
1. 0.40После удаления эзотерической или идеологической надстройки остаётся набор простых правил эргономики, гигиены, психологии или здравого смысла, работающих точно так же и без неё.
2. 0.95После устранения специфических концепций и ритуалов система теряет всякое содержание и сводится к чистому плацебо или случайному угадыванию.
3. 1.00Система сводится лишь к отрицанию существующего знания и не предлагает собственной модели, способной генерировать проверяемые практические прогнозы.

Как утверждение согласуется с независимыми, взаимно проверяемыми системами измерений из смежных областей?

0. 0.00Оно полностью согласуется с данными из независимых областей (сходимость доказательств); любые расхождения объясняются известными пределами точности приборов.
1. 0.95Его принятие потребовало бы признать недействительными фундаментальные, многократно подтверждённые законы сразу во множестве независимых научных дисциплин.
2. 1.00Его принятие потребовало бы предположить, что тысячи независимых институтов, спутников, лабораторий и исследователей из соперничающих стран десятилетиями фабрикуют единую ложь.
3. 0.15Оно касается субъективной веры и её влияния на поведение индивида, поэтому не противоречит психологии до тех пор, пока не претендует на физическую истинность этой веры.

Зависит ли результат применения метода или измерения от личности, уровня посвящения или личных убеждений того, кто его выполняет?

0. 0.00Результат инвариантен к оператору: любой исследователь (включая скептика), соблюдающий тот же протокол в тех же условиях, получает сходящееся распределение результатов.
1. 0.85Получение результата требует особого дара, субъективной интуиции или изменённого состояния сознания оператора, которые невозможно свести к воспроизводимому алгоритму.
2. 1.00Присутствие скептически настроенного наблюдателя или регистрирующей аппаратуры объявляется фактором, блокирующим действие метода.
3. 0.90Разные операторы одной и той же системы, анализируя один и тот же случай в одно и то же время, дают взаимоисключающие диагнозы или прогнозы.
4. n/aНе применимо: утверждение не описывает процедуру или метод, выполняемый оператором (оно утверждает факты, историю или скрытую истину).

Какова динамика развития области или утверждения во времени с точки зрения накопления знаний и устранения ошибок?

0. 0.00Наблюдается познавательный прогресс: предсказываются новые, ранее неизвестные явления, исправляются старые ошибки и уточняются рабочие инструменты.
1. 0.80Она застыла во времени: апеллирует к неизменной древней мудрости или авторитету основателя и преподносит отсутствие изменений как доказательство совершенства.
2. 0.90Она развивается исключительно регрессивно: каждое изменение лишь заделывает логические бреши и оправдывает неудачи, не ведя к новым проверяемым открытиям.
3. 1.00Она развивается за счёт постоянной замены опровергнутых утверждений новыми сюжетами, сохраняя при этом один и тот же эмоциональный шаблон (страх или обещание лёгкого успеха).

Каково соотношение между доказанностью заявляемых эффектов и ценой (финансовой, медицинской, мировоззренческой), которую требуют заплатить от аудитории?

0. 0.00Рекомендуемые действия соразмерны силе доказательств; профиль рисков, побочные эффекты и границы применимости открыто измерены и описаны.
1. 1.00Она использует страх или неуверенность, подталкивая людей к отказу от проверенных защитных или медицинских мер в пользу недоказанных альтернатив.
2. 0.60Она обещает несоразмерно большую выгоду за минимальные усилия, ставя успех в зависимость от покупки новых продуктов, сеансов или ступеней посвящения.
3. 0.85Она выстраивает закрытую групповую идентичность, где психологическая цена выхода из заблуждения крайне высока, поскольку сомнение ведёт к исключению из сообщества избранных.