Самообман ученых

start

и поможет ли открытая наука это исправить

Как ученые обманывают сами себя

Проверить себя?

Непроверяемая повествовательность

Асимметрия внимания

Ошибка меткого стрелка

Ослепленность гипотезой

и посмотрим, как ее исправить

Давайте выберем проблему

Исследователи настолько сосредоточены на сборе доказательств в поддержку одной основной гипотезы, что не рассматривают доказательства, опровергающие ее, и не рассматривают альтернативные объяснения.

Ослепленность гипотезой

Приверженность ученого к определенной гипотезе проявляется многообразно: случайные ошибки в вычислениях всегда такого рода, что подтверждают гипотезу; повторяются и перепроверяются лишь те опыты, которые не отвечают ожиданиям ученого; исследователь склонен бессознательно отвергать и дискредитировать те факты, которые его «не устраивают».

+ info

Связанное явление:

Научная предвзятость

Активный обмен данными исследований

Сотрудничество с исследователями, имеющими противоположное мнение об изучаемых явлениях

Становление различных частей исследования объектами внешнего контроля научного сообщества

+ info

Публичный обмен методами, данными, компьютерным кодом и результатами исследований позволяет другим воспроизвести и повторно проанализировать полученные выводы. Зачем? Чтобы проверить, воспроизводимы ли они. Также полезно связываться, в том числе, через научные социальные сети, с исследователями, занимающимися аналогичными явлениями,но использующими иные подходыи придерживающимися противоположныхточек зрения.

Как открытая наукаможет помочь справиться с научной предвзятостью и ослепленностью гипотезой?

Это когнитивное искажение заставляет исследователей сосредотичиваться на наиболее интересных или приятных результатах, вместо того, чтобы смотреть на общую картину.

Ошибка меткого стрелка

Связанное явление:

p-hacking

+ info

Ошибка - или, в худшем случае, намеренная фальсификация, - происходит на разных этапах исследований и связана с «подгонкой» гипотезы под результаты либо всего плана исследования под полученные данные и так далее. При правдоподобном объяснении того, почему была предложена «гипотеза», результаты, полученные путем такой обработки данных, неотличимы от правильно проведенных исследований.

Открытое рецензирование пререгистрируемых данных об исследовании

Открытый доступ к пререцензируемым данным об исследованиях

Пререгистрация методов и гипотезы исследования

+ info

Здесь также поможет публичный обмен данными. Кроме того, еще один интересный путь - подвергать планы исследований тщательному анализу со стороны коллег еще до проведения эксперимента (провести пререгистрацию гипотезы и методов исследования в виде рецензируемой статьи) - это может уменьшить неосознанное искушение изменить методику и результаты анализа в ходе исследования.

Как открытая наукаможет помочь справиться с ошибкой меткого стрелка?

Иногда ее называют предвзятостью неподтверждения: исследователи уделяют мало внимания ожидаемым результатам, в то время как неинтуитивные результаты подвергаются тщательной проверке.

Асимметрия внимания

Связанные явления

+info

При доказывании гипотезы вспоминаютсяи используются факты и точки зрения, согласующиеся с ней.

запоминание информации

+info

При анализе внимание уделяется только данным, согласующимсяс гипотезой, прочие игнориуются.

интерпретация данных

+info

Поиск только информации, подтверждающей гипотезу, при игнорировании прочих данных.

поиск информации

Предвзятость может проявляться:

Пререгистрация методов и гипотезы исследования

Сотрудничество с исследователями, имеющими противоположное мнение

Становление различных частей исследования объектами внешнего контроля научного сообщества

+ info

Исследователям может помочь пререгистрация методов сбора информации на этапе до сбора данных и участие в открытом рецензировании аналогичных материалов, в том числе, работа с конкурирующими группами.

Как открытая наукаможет помочь справиться с асимметрией внимания (предвзятостью)?

Рационализация результатов и посик взаимосвязей там, где их, вероятно, нет, представленные в виде интуитивно-логичных рассуждений, часто не подкрепленных исследовательскими данными. Итоговые выводы в виде неподтвержденных и не опровергнутых гипотез.

Непроверяемая повествовательность

Пришли со страницы про p-haking? Можете вернуться здесь.

Связанное явление:

JARKing

+ info

Тактика иносказания, призванная замаскировать незначительный результат под нечто более интересное; неподтвержденное объяснение (рассуждение), почему результаты должны были получиться определенным образом, но не получились; в том числе, подстраивание исследования или его выводов под уже известные результаты.

Использование открытых образовательных ресурсов

Сотрудничество с исследователями, имеющими противоположное мнение

Становление различных частей исследования объектами внешнего контроля научного сообщества

+ info

Публичный обмен данными, анализ плана исследования коллегами еще до проведения эксперимента, а также повышение собственной квалификации как исследователя при помощи открытых образовательных ресурсов!

Как открытая наукаможет помочь справиться с повествовательностью?

Использование открытых образовательных ресурсов

Открытое рецензирование пререгистрируемых данных об исследовании

Открытый доступ к пререцензируемым данным об исследованиях

Пререгистрация методов и гипотезы исследования

Так как же открытая наука может помочь?

Сотрудничество с исследователями, имеющими противоположное мнение

Становление различных частей исследования объектами внешнего контроля научного сообщества

+ info

+ info

+ info

Вам нужно согласиться или не согласиться с утвержденями на следующих слайдах.True - согласиться False - не согласиться Send - подтвердить свой вариант ответа и увидеть результат

Давайте проверим себя!

rykhtorova@gpntbsib.ru

Надеемся, вы провели время с пользой, и будете внимательны в своих исследованиях. А если у вас остались вопросы, пишите нам:

Спасибо!