неверно что существует психологическое исследование
Плохая наука: почему самые громкие психологические исследования оказались неверными
Существуют «сильные позы», которые делают увереннее в себе и снижают уровень гормонов стресса. Когда люди держат в руках чашку с теплым напитком, они становятся доброжелательнее к окружающим. Сила воли — это ресурс, который мы тратим, когда удерживаемся от соблазнов. Способность откладывать вознаграждение определяет успех ребенка в будущем.
Эти утверждения во многом похожи друг на друга: за ними стоят широко известные психологические исследования, научно-популярные бестселлеры, колонки в популярных журналах и выступления на TED-конференциях.
У них есть и еще одно общее качество: все они оказались неверными.
Кризис воспроизводимости поставил под сомнение целые области науки. Многие результаты, которые широко цитировались в СМИ, теперь считаются преувеличенными или ложными. Когда ученые попытались воспроизвести классические и недавние психологические эксперименты, результаты оказались на удивление постоянными: примерно в половине случаев — успех, в другой половине — неудача.
Кризис окончательно стал очевидным в 2015 году, когда ученые под руководством Брайана Нозека проверили 100 психологических исследований. Исходных результатов они смогли добиться лишь в 36 случаях. Главный редактор журнала The Lancet Ричард Хортон вскоре констатировал:
«Обвинения в адрес науки вполне прямолинейны: по крайней мере половина научной литературы просто неверна. Страдая от исследований с малым размером выборки, мизерным эффектом и неверными анализами, а также от одержимости модными трендами сомнительной важности, наука совершила поворот в сторону невежества».
Воспроизводимость — одно из ключевых требований к научному знанию. Чем лучше результат воспроизводится, тем он надежнее — только так можно отделить реальные закономерности от простых совпадений.
Но оказалось, что это требование выполняется далеко не всегда.
Кризис начался с медицины, но больше всего затронул психологию. Летом 2018 года ученые попытались воспроизвести подборку психологических исследований, опубликованных в Science и Nature — самых престижных общемировых научных журналах. Из 21 эксперимента подтвердились только 13 — и даже в этих случаях оригинальные результаты оказались преувеличенными примерно на 50 %.
Часто проверку на воспроизводимость проваливают те исследования, которые широко тиражировались в СМИ и успели повлиять на общественное сознание. Например, работы о том, что поисковые системы ухудшают память, а чтение художественных произведений развивает способность к сопереживанию. Если повторные эксперименты терпят неудачу, это еще не означает, что исходные гипотезы ничего не стоят. Но чтобы их доказать, теперь нужны более качественные исследования.
Как предвидеть будущее с помощью статистики
В 2011 году известный американский психолог Дэрил Бем опубликовал статью, которая доказывала возможность ясновидения. Этот вывод не был порождением его бурной фантазии, а базировался на десятилетних исследованиях, в которых участвовали сотни человек. Многие заподозрили, что Бем решил устроить что-то вроде аферы Сокала и разоблачить психологию поддельной статьей с заведомо абсурдными выводами. Но по всем методологическим стандартам статья была очень убедительной.
В одном из экспериментов Бема перед участниками ставили две ширмы — им нужно было угадать, за какой спрятано изображение. Картинка генерировалась случайным образом сразу после осуществления выбора. Если бы участники хорошо справились с заданием, это указывало бы, что они каким-то образом могут предчувствовать будущее. В эксперименте использовались изображения двух видов: нейтральные и порнографические.
Бем предположил: если шестое чувство существует, наверняка оно имеет древнее эволюционное происхождение. А если так, то более вероятно, что оно настроено на наши самые древние потребности и побуждения.
Участники угадывали порнографические изображения в 53 % случаев — несколько чаще, чем следовало бы, если бы их выбор объяснялся чистой случайностью. Учитывая большое количество опытов, Бем мог заявить, что предвидение существует.
Позднее эксперты обнаружили, что при анализе результатов он использовал не совсем корректные приемы. Как правило, результат исследования признают надежным, если вероятность того, что он был получен случайно, не превышает 5 %. Но существует много способов снизить эту величину до нужного уровня: изменить исходные параметры анализа, добавить в выборку или изъять из нее нужное количество примеров, использовать более удачные гипотезы после сбора данных.
Проблема в том, что такие же приемы использовал не только Бем, но и многие другие ученые. Согласно опросу 2011 года, в этом призналась почти половина психологов.
Когда вышла статья о ясновидении, специалисты в области общественных наук Джозеф Симмонс, Лиф Нельсон и Ури Симонсон поняли, что наука движется к собственному краху. Они построили несколько компьютерных моделей и выяснили, что с помощью вполне стандартных статистических приемов можно повысить уровень ложно-положительных результатов в несколько раз. Это значит, что методы, которые формально являются научными, могут легко привести к совершенно абсурдным выводам.
Чтобы это проиллюстрировать, ученые провели эксперимент, который подтвердил, что прослушивание песни “When I’m Sixty-four” делает слушателя на полтора года моложе.
«Все знали, что использовать такие приемы неправильно, но думали, что это нарушение по своей значимости — примерно как перейти дорогу в неположенном месте. Оказалось, что оно больше похоже на ограбление банка», — подытожил Симмонс.
Как отличить плохое исследование от хорошего
Вскоре стало понятно, что проблемы воспроизводимости затрагивают далеко не только психологию. В исследованиях рака научные данные подтверждаются в 10–25 % случаев. В экономике не смогли реплицировать 7 из 18 лабораторных экспериментов. В исследованиях искусственного интеллекта тоже есть признаки кризиса.
Но терять веру в науку, кажется, все-таки не стоит. Ученые уже придумали несколько способов, которые сильно повысили надежность и качество новых исследований.
Несколько лет назад почти никто не публиковал результаты повторных экспериментов, даже если они проводились. Это было не принято, не приносило грантов и не способствовало успешной научной карьере. Согласно опросу Nature, более 70 % ученых-психологов пытались и не смогли воспроизвести чужие исследования, около половины не смогли повторить собственные, и почти никто не стремился предать эти результаты огласке.
Когда кризис воспроизводимости вышел на поверхность, многое изменилось. Повторные исследования постепенно стали обычным делом; данные экспериментов начали всё чаще выкладывать в открытый доступ; журналы принялись публиковать отрицательные результаты и регистрировать общий план исследований еще перед началом их проведения.
Исследования стали более масштабными — выборка 30–40 человек, которая в психологии была вполне стандартной, теперь мало кого устраивает. Крупные международные организации — такие как Psychological Science Accelerator — тестируют одни и те же гипотезы сразу в нескольких лабораториях по всему миру.
Перед проверкой статей из Nature и Science, о которой мы писали в начале, ученым предложили сделать ставки на тотализаторе. Они должны были предсказать, какое исследование успешно пройдет проверку, а какое провалится. В целом ставки были очень точными. «Это означает, во-первых, что научное сообщество может прогнозировать, какие работы удастся повторить, и, во-вторых, что невозможность воспроизвести исследование не была простой случайностью», — говорят организаторы эксперимента.
Ученые в целом неплохо умеют отличать надежные исследования от ненадежных — это хорошие новости. Сейчас специалисты из Центра открытой науки совместно с агентством DARPA пытаются создать алгоритм, который будет выполнять ту же задачу без участия человека.
Каждый год выходит слишком много статей, чтобы можно было вручную перепроверить хотя бы малую часть из них. Если за дело возьмется искусственный интеллект, всё будет намного проще.
Уже в первых тестах ИИ успешно справился с предсказаниями в 80 % случаев.
Что чаще всего делает исследование ненадежным? Маленькие выборки, нестыковки в цифрах, слишком красивое подтверждение гипотез. А также — стремление к сенсациям и слишком простые ответы на сложные вопросы.
Слишком хорошо, чтобы быть правдой
Создавать сенсационные исследования проще всего с помощью обмана. Известный социальный психолог Дидерик Стапель использовал сфабрикованные данные в нескольких десятках научных статей. Исследования Стапеля с огромной скоростью разлетались по газетам и журналам, он получил несколько престижных научных премий, публиковался в Science и считался одним из самых крупных специалистов в своей сфере.
Однажды выяснилось, что Стапель долгое время вообще не проводил исследований, а просто выдумывал данные и отдавал их на анализ студентам.
В науке такое встречается очень редко. Гораздо чаще громкие, но неверные утверждения возникают по другим причинам. Люди отчаянно ищут простые, понятные и эффектные ответы на волнующие вопросы. Можно очень легко поддаться соблазну и решить, что эти ответы у тебя есть, даже если на самом деле это не так. Стремление к простоте и определенности — одна из главных причин, почему многие исследования не проходят проверку на воспроизводимость. Вот несколько известных примеров.
Зефирный эксперимент
В эксперименте детям предлагали выбрать между одним небольшим вознаграждением — например, зефиром, — которое можно получить немедленно, и двойной наградой, если они смогут немного подождать. Позднее оказалось, что дети, которые дождались второй награды, во взрослой жизни стали более успешными. Исследование стало очень популярным и повлияло на некоторые школьные программы.
В 2018 году эксперимент повторили на более широкой выборке. Оказалось, что достаток в семье — куда более важный фактор, от которого зависит в том числе и уровень самоконтроля.
«Позы силы» и «позы слабости»
Участники эксперимента на две минуты принимали одну из двух поз: откидывались в кресле и закидывали ноги на стол («поза силы») или скрещивали руки на груди («поза слабости»). В результате участники из первой группы чувствовали себя более уверенно и чаще соглашались рискнуть в азартной игре. У тех, кто сидел в сильной позе, повысился уровень тестостерона, а у тех, кто в слабой, — кортизола. В повторных экспериментах удалось воспроизвести только один эффект: «позы силы» помогли участникам чувствовать себя увереннее, но не изменили их поведение или гормональные показатели.
Ассоциации со старостью заставляют двигаться медленнее
Участников эксперимента просили решить несколько головоломок. Если в них были вставлены слова, которые ассоциируются со старостью — «забывчивый», «пожилой», «одинокий» — то участники выходили из комнаты более медленным шагом.
В последних испытаниях эксперимент успешно воспроизводился только в одном случае: если сами экспериментаторы знали, что в тестах участникам намекали на старость. Сам эффект сохранился, но причины уже были другими.
Теплые предметы делают доброжелательнее к окружающим
Участникам эксперимента на короткое время давали подержать чашку с горячим или холодным кофе, а затем просили оценить личность человека по короткому описанию. Участники, которые держали чашку с горячим кофе, оценивали человека как более располагающего к себе. В другом эксперименте участникам давали предмет в теплой или холодной упаковке, а затем предлагали оставить его себе или подарить другу. Если предмет был в теплой упаковке, участники чаще выбирали второй вариант. Повторные эксперименты с более широкой выборкой не дали таких результатов. Похоже, теплые вещи не сделают вас альтруистом.
Сила воли истощается, когда мы противостоим соблазнам
Перед участниками эксперимента ставили две тарелки — с печеньем и редисом. В первой группе участникам разрешили есть печенье, а во второй — только редис. Затем каждому участнику предложили решить невозможную головоломку. Участники, которым в первой части эксперимента ели только редис, сдавались значительно раньше других. В повторных экспериментах результаты не подтвердились.
В некоторых случаях способность к самоконтролю не истощалась, а даже усиливалась со временем. Многие психологи теперь считают понятие «сила воли» слишком упрощенным.
В мировой психологии уже многое сделано для того, чтобы сделать исследования более надежными и воспроизводимыми. В России эту проблему только предстоит осознать.
«В российской психологии проблемами кризиса в основном озабочена научная молодежь, которая во многом ориентируется на западную науку, — рассказал «Ножу» доцент РАНХиГС Иван Иванчей. — Контроль за качеством публикаций на русском языке в целом не очень высокий. Журналы редко отвергают статьи, поэтому публикуется много некачественных исследований. Часто используются небольшие выборки, что тоже снижает вероятность успешного воспроизведения. Есть подозрение, что, если серьезно заняться вопросом воспроизводимости русскоязычных работ, можно обнаружить много проблем. Но напрямую этим никто не занимается».
В январе 2019 года стало известно, что российское правительство собирается значительно расширить требования к ученым по количеству публикаций: минимум опубликованных за год статей должен вырасти на 30–50 %.
Ученые из влиятельного академического «Клуба 1 июля» раскритиковали инициативу: «Задача науки не в том, чтобы плодить максимальное число публикаций, а в том, чтобы исследовать мироздание и извлекать из полученного знания пользу для человечества». Скорее всего, новые требования только увеличат масштаб проблемы.
История про кризис воспроизводимости — это не история про грядущий апокалипсис и нашествие варваров. Если бы кризис не произошел, всё было бы гораздо хуже: мы до сих пор ссылались бы на ошибочные исследования в полной уверенности, что знаем правду. Возможно, время бойких заголовков в стиле «британские ученые доказали» подходит к концу. Но слухи о том, что наука умерла, следует считать несколько преувеличенными.
ПСИХОЛОГИЧЕСКОЕ ИССЛЕДОВАНИЕ
Полезное
Смотреть что такое «ПСИХОЛОГИЧЕСКОЕ ИССЛЕДОВАНИЕ» в других словарях:
Психологическое исследование в деятельности адвоката — ПИ – свершение адвокатом действий по оценке психологических трудностей связанных со своими конкретными профессиональными задачами, выявлению и анализу психологической информации необходимой для успешного решения данных задач. Необходимость… … Энциклопедия современной юридической психологии
Медицинско-психологическое исследование — «Медицинско психологическое исследование» медицинско психологическая экспертиза водителя, прежде всего лишенного водительского удостоверения за злостные нарушения Правил дорожного движения, в частности, за пьянство за рулём. В России, кроме того … Википедия
Исследование расщепленного мозга — Психологическое исследование пациентов. подвергшихся церебральной комиссуротомии (или операции по разделению полушарий головного мозга). Во время этой операции, выполняемой при определенных видах острой эпилепсии, осуществляется рассечение… … Большая психологическая энциклопедия
Психологическое литературоведение — Психиатрическое литературоведение термин, введённый В.П. Беляниным, анализ литературного текста с точки зрения выраженности в нем отклонений психопатологического плана. Различается психиатрический анализ персонажей (К.Леонгард, В.П. Руднев) и… … Википедия
Психологическое тестирование — (psychological testing) термин зарубежной психологии, обозначающий процедуру установления и измерения индивидуально психологических отличий [1]. В отечественной психологии чаще употребляется термин «психодиагностическое обследование».… … Википедия
исследование психологическое — предполагает такие этапы: 1) формулировку проблемы; 2) выдвижение гипотезы; 3) проверка гипотезы получение данных эмпирических и обработка их; 4) интерпретация результатов проверки соотнесение полученных результатов с исходной гипотезой, выводы о … Большая психологическая энциклопедия
Психологическое просвещение — Возможно, эта статья содержит оригинальное исследование. Добавьте ссылки на источники, в противном случае она может быть выставлена на удаление. Дополнительные сведения могут быть на странице обсуждения. (25 мая 2011) … Википедия
ИССЛЕДОВАНИЕ ПРОБНОЕ (ИССЛЕДОВАНИЕ ПИЛОТАЖНОЕ, АПРОБАЦИЯ МЕТОДИКИ СБОРА ДАННЫХ) — один из этапов социологич. исследования, следующий за этапом разработки методики сбора данных и предшествующий этапу полевого использования этой методики для получения первич. социологич. информации. Цель И.п. (в отличие от основного) состоит в… … Российская социологическая энциклопедия
Мультикультурное психологическое консультирование — (МПК) один из видов психологического консультирования, сфокусированный на культурных аспектах осуществления психологической помощи на том, как происходит поиск психологической помощи, как организован консультативный процесс и его результаты в… … Википедия
Социально-психологическое самочувствие прокурорских работников — Термин «самочувствие» имеет неоднозначную трактовку и широко используется в медицине, социологии, психологии, философии, а также в повседневном общении. В психологии отдельные авторы истолковывали его определяли его как самооценку, самоотношение… … Энциклопедия современной юридической психологии
Психологическое исследование
Вы будете перенаправлены на Автор24
Требования к психологическому исследованию
Способ получения знаний об окружающей действительности и цель науки заключаются в научном исследовании.
Психологическое исследование представляет собой способ научного познания закономерностей и сущности психических явлений.
Психологическое исследование должно отвечать строгим требованиям:
Этапы психологического исследования
Цель исследования определяет его основные этапы. У психологического исследования выделяется три основных этапа:
Логика каждого отдельного исследования специфична. Исследователь должен исходить из характера проблемы, задач, целей работы, имеющегося материала, уровня технической оснащенности исследования и личных возможностей.
Анкетирование
Анкетирование позволяет получать объективно значимые результаты. Именно поэтому разработке анкеты психологи придают большое значение. Созданию анкеты предшествует этап разработки программы самого исследования. При разработке анкеты следует учитывать особенности формулировки вопросов, в противном случае даже при соблюдении остальных требований существует возможность получения ошибочных результатов.
Готовые работы на аналогичную тему
Заполнение анкеты производится опрашиваемым самостоятельно, именно поэтому конструкция и комментарии должны быть понятны для респондентов.
Основные принципы построения анкеты:
Обычная последовательность разделов анкеты выглядит следующим образом:
Последовательность и структура вопросов в анкете являются установкой психолога на развитие с опрашиваемым коммуникации, которая заключается в пробуждении интереса, завоевании доверия, подтверждении уверенности в своих возможностях, поддержании беседы. Хорошо разработанная анкета заполняется опрашиваемым не более чем за 30 минут. Далее наступает психологическая утомляемость, и внимание к анкете значительно снижается.
исследование психологическое
Полезное
Смотреть что такое «исследование психологическое» в других словарях:
Психологическое тестирование — (psychological testing) термин зарубежной психологии, обозначающий процедуру установления и измерения индивидуально психологических отличий [1]. В отечественной психологии чаще употребляется термин «психодиагностическое обследование».… … Википедия
Исследование расщепленного мозга — Психологическое исследование пациентов. подвергшихся церебральной комиссуротомии (или операции по разделению полушарий головного мозга). Во время этой операции, выполняемой при определенных видах острой эпилепсии, осуществляется рассечение… … Большая психологическая энциклопедия
Психологическое просвещение — Возможно, эта статья содержит оригинальное исследование. Добавьте ссылки на источники, в противном случае она может быть выставлена на удаление. Дополнительные сведения могут быть на странице обсуждения. (25 мая 2011) … Википедия
Психологическое литературоведение — Психиатрическое литературоведение термин, введённый В.П. Беляниным, анализ литературного текста с точки зрения выраженности в нем отклонений психопатологического плана. Различается психиатрический анализ персонажей (К.Леонгард, В.П. Руднев) и… … Википедия
Психологическое исследование в деятельности адвоката — ПИ – свершение адвокатом действий по оценке психологических трудностей связанных со своими конкретными профессиональными задачами, выявлению и анализу психологической информации необходимой для успешного решения данных задач. Необходимость… … Энциклопедия современной юридической психологии
ПСИХОЛОГИЧЕСКОЕ ИССЛЕДОВАНИЕ — научное изучение психических явлений. Предполагает следующие этапы: 1) формулировка проблемы; 2) выдвижение гипотезы; 3) проверка гипотезы получение эмпирических данных и их обработка; 4) интерпретация результатов проверки соотношение полученных… … Энциклопедический словарь по психологии и педагогике
ИССЛЕДОВАНИЕ ПРОБНОЕ (ИССЛЕДОВАНИЕ ПИЛОТАЖНОЕ, АПРОБАЦИЯ МЕТОДИКИ СБОРА ДАННЫХ) — один из этапов социологич. исследования, следующий за этапом разработки методики сбора данных и предшествующий этапу полевого использования этой методики для получения первич. социологич. информации. Цель И.п. (в отличие от основного) состоит в… … Российская социологическая энциклопедия
Медицинско-психологическое исследование — «Медицинско психологическое исследование» медицинско психологическая экспертиза водителя, прежде всего лишенного водительского удостоверения за злостные нарушения Правил дорожного движения, в частности, за пьянство за рулём. В России, кроме того … Википедия
Мультикультурное психологическое консультирование — (МПК) один из видов психологического консультирования, сфокусированный на культурных аспектах осуществления психологической помощи на том, как происходит поиск психологической помощи, как организован консультативный процесс и его результаты в… … Википедия
Социально-психологическое самочувствие прокурорских работников — Термин «самочувствие» имеет неоднозначную трактовку и широко используется в медицине, социологии, психологии, философии, а также в повседневном общении. В психологии отдельные авторы истолковывали его определяли его как самооценку, самоотношение… … Энциклопедия современной юридической психологии
60% исследований по психологии не выдерживают проверки на воспроизводимость результатов
Почти три сотни ученых-психологов под руководством Брайана Носека (Brian Nosek) из Университета Вирджинии (США) повторно провели исследования, о которых докладывалось в 98 научных статьях по психологии. И лишь примерно в 40% случаях удалось получить те же результаты, что в оригинальном исследовании, рассказывают ученые в статье в журнале Science.
Они работали совместно с авторами оригинальных статей, чтобы в точности воспроизвести условия экспериментов. Были использованы исследования, результаты которых описаны в 2008 году в трех ведущих психологических журналах: Psychological Science, Journal of Personality and Social Psychology, Journal of Experimental Psychology: Learning, Memory, and Cognition. Темы исследований касались базовых психологических категорий: память, мышление, восприятие, коммуникация и так далее.
Исследование показало, чем сильнее была статистическая база в эксперименте, тем более вероятно было, что его результаты окажутся воспроизводимыми. Также — что логично — чаще удавалось подтвердить те результаты, которые не казались на первый взгляд удивительными или неожиданными.
Объяснений тому, что результат не удалось воспроизвести, может быть несколько. Первое и самое очевидное состоит в том, что он попросту неверен. Но это необязательно так: возможно, и повторное исследование неверно. Может быть и так, что и противоречащие выводы двух исследований верны, поскольку существует разница в условиях проведения, незамеченная учеными. Но так или иначе, большую часть выводов психологических исследований никак нельзя признать окончательными и достоверными. Во всех этих случаях, как часто пишут сами ученые, требуются дополнительные исследования.