В начале каждой статьи на saneman.ru стоит шкала от 1 до 10. Она показывает, насколько наука подтверждает то, о чём спрашивает статья. Здесь мы объясняем, как ставим этот балл.
Что именно мы оцениваем
Балл относится к самому явлению, которое изучали учёные, а не к заголовку статьи. Заголовок у нас часто задаёт вопрос так, как его задают люди, и звучит ярко. Балл всегда строгий. Он говорит только о том, что реально показали исследования.
Поэтому в плашке после слова «Проверяем» явление записано одной точной фразой. Например, статья называется «Передаются ли травмы предков», а проверяем мы утверждение «Голод матери в беременность оставляет след в ДНК ребёнка». Его изучали много лет на тысячах людей, и балл высокий. А то, что такой след передаётся дальше, внукам, у людей пока не доказано. Об этом сказано в пояснении под баллом.
Одна тема может дать разные баллы. «Медитация меняет работу мозга» и «медитация открывает чакры» — разные утверждения, и доказательства у них разные. Бывает и так, что явление реально, а его объяснение нет. Люди правда видят туннель и свет при клинической смерти, это описано тысячи раз. Но что за этим стоит, учёные спорят. Поэтому мы всегда уточняем, что проверяем, само явление или его толкование.
Шкала
Много независимых исследований, есть систематические обзоры и метаанализы, результаты сходятся. Учёные в целом согласны.
Несколько сильных исследований с контрольными группами, и результат повторили разные команды. Но спорные места остаются.
Исследования с контрольными группами есть, но их мало, участников немного или результаты расходятся.
Единичные работы, пилотные опыты, наблюдения на маленьких группах, опыты на животных. Результат ещё никто не повторил.
Есть только рассказы и отдельные случаи, или строгие проверки эффекта не нашли.
Почему два одинаковых балла могут значить разное
Низкий балл бывает по разным причинам, и мы их различаем. Поэтому рядом с баллом стоит короткая метка.
Что повышает и понижает балл
- результат повторили независимые учёные
- участников много
- была контрольная группа
- ни участники, ни исследователи не знали, кто в какой группе
- работа одна
- опыт на животных или в пробирке
- у авторов есть интерес в результате
- это препринт, пресс-релиз или интервью без опубликованных данных
Сила убеждения, древность традиции и число сторонников на балл не влияют. Как и наше собственное мнение.
Кто ставит балл и когда его меняют
Балл ставит автор статьи по этим правилам, одинаковым для всех материалов. Рядом стоит дата оценки. Наука меняется. Когда выходят новые исследования, мы пересматриваем балл и отмечаем это в статье.
Низкий балл не значит, что явления не существует. Он значит, что надёжных доказательств пока нет. А высокий балл не значит, что вопрос закрыт навсегда.