심리학은 여전히 위기에 처해있다.
아직 복제 문제에 관해 이야기하는 것을 중단 할시기는 아닙니다.
어쩌면 세상은 끊임없이 개선되고 있거나 아마 우리는 단지 그것이라고 생각할 것입니다. 과학자들은 역사적인 변화가 필연적이고 불가피한 진보를 포함한다는 생각 인 “휘그당 병력 (Whig history)”을 구독하는 것으로 보인다. 예를 들어, 그들이 일에 관해 말하는 방식을 생각해보십시오.
1974 년에는 50 개 저널 요약 중 1 개가 연구를 기술하기 위해 칭찬 기술자를 고용했습니다. 2014 년까지 이러한 찬사는 6 개의 초록마다 한 번씩 발표되었으며 거의 900 % 증가했습니다. “혁신적”이란 용어는 25 % 더 획기적인 것으로 밝혀졌다. 과학자들은 출력물의 구경이 매 해마다 꾸준히 향상 될 것으로 생각합니다.
그러나 1974 년과 2014 년 사이의 수십 년은 거의 정확하게 출판 된 과학의 질에 대한 불안감이 열풍에 이르렀 던 때였습니다. 비공식 출판 간행물, 저평가 샘플링 및 기타 많은 문제에 대한 우려로 인해 관측통은 출판 된 연구의 입장에 의문을 제기하게되었습니다. John PA Ioannidis의 고전 “왜 가장 많이 발표 된 연구 결과가 거짓인가”와 같은 몇 가지 랜드 마크 논문이 나왔습니다.
우리가 우리 연구의 약점에 대해 더 많이 알수록 강하다고 생각합니다. 이인지 습관은 분명히 문제가됩니다. 우리는 심리학의 복제 문제를 해결할 때마다 염두에 두어야합니다. 불행히도, 우리는 단순히 그 문제를 멀리 할 수 없습니다.
- “미국 최고의 보스”인터뷰
- 새로운 행복의 심리학
- 우리는 아직 끝나지 않았습니다 : 여성의 권리를위한 투쟁
- 너는 너의 유전자가 아니야 : 거식증과 회복의 생리
- 온라인 친구는 전혀 친구가 아닌 것보다 낫습니까?
* * *
사실, 심리 과학을 포함한 과학은 더 좋고 좋지 않고 악화 될 수도 있습니다. 대학 직원의 가치가 교부금 및 인용 횟수로 계산 될 때 개별 연구원에게 좋은 것은 연구에 반드시 필요한 것은 아닙니다. 생산량에 대한 집착은 엄격한 부적절한 결과를 가져오고 대신에 나쁜 과학의 자연 선택을 선호하는 경향이 있습니다.
최근 심리학의 복제 기록에 대한 언론의 관심이 높아지면서 우리의 위기 상황이 새로운 것이라는 인상을 형성하는 것은 쉽습니다. 사실, 우리 분야는 수십 년 동안 여러 가지 복잡한 위기로 인해 격투하고 있습니다.
- 이론적 분열 ( 패러다임 위기 )
- 환원주의 ( 측정 위기 )
- 유의성 및 효과 크기에 대한 부주의 한 접근법 ( 통계적 위기 )
- 인간 인구의 작은 조각에 초점을 맞추는 경향 ( 샘플링 위기 )
- 기초 과학과 재현성 문제 (당신이 원한다면 과장된 위기) 를 해결할 때 심리학의 진보에 대한 조기 낙관론.
위기에있는 심리학 (Psychology in Crisis) 이라는 주제에 관한 저의 새 책 에서 저는 위의 위기와 다른 여러 위기들을 체계적으로 분석합니다.
나는 위기 에서 심리학 을 쓰면서 많은 것을 배웠다 . 예를 들어 나는 누군가가 “위기”라는 단어를 언급 할 때마다 “위기? 어떤 위기? “위기를 멀리하기를 갈망하는 사람들이 항상있을 것입니다.
심리학에서는 자기 조상과 장미 빛 동료들 사이의 공개적인 충돌로 필연적으로 한 명의 헤드 라인 작가가 심리학이 이제는 위기에 처해 있는지 여부에 대한 위기에 처하게되었습니다.
* * *
늦게, 심리학자는 분야를 강화에있는 뜻 깊은 진도를 만들고, 그것을 인정하는 것이 중요하다. 그럼에도 불구하고, 내 견해로는 낙관적 인 태도로 진로를 피하는 것이 중요합니다. 우리는 우리의 경계를 막을 수 없습니다.
이는 문제를 개선하려는 우리의 노력에도 불구하고 복제 문제를 푸는 근본적인 힘, 즉 나쁜 과학의 자연 선택을 배양 한 역효과 인센티브를 거의 또는 전혀 다룰 수 없었기 때문입니다.
아무튼:
- 저널은 널 효과의보고보다 통계적으로 유의미한 결과의 우선 순위를 계속 유지하므로 p 해킹 및 ‘HARKing'(결과가 알려진 후 가정) 및 파일 서랍 효과를 지속하는 것과 같은 부적절한 실행을 장려합니다. 그들이 성공하기 때문에 그들은 그렇게합니다. 시장은 통계적으로 유의미하다. 저널은 스스로가 생존 할 수 있도록 그 기아를 공급합니다.
- 비록 모든 사람들이 그러한 연구가 연구의 질에 대해 아무런 말도하지 않고 연구의 질 을 증진시키지 못한다는 것을 모두 알고 있다고하더라도, 인용 (그리고 h- 색인)은 여전히 개인 연구자의 산출물을 평가하는데 일상적으로 사용됩니다 . 실제로 통계는 종종 품질의 반대를 나타냅니다. 진정한 나쁜 연구는 정기적으로 바이러스 성이 있습니다. 종신위원회와 보조금 기관의 부분에서 연구원의 활약을 측정하기위한 인용을 사용하는 이러한 지속성은 살라미 슬라이스, 무의미한 자기 인용 및 연구를 왜곡시키는 다른 파괴적인 습관을 조장합니다.
- 많은 비난에도 불구하고 Journal Impact Factors는 저널을 가치있게 여기는 주요 통화 단위입니다. JIFs의 부작용은 잘 기록되어 있습니다. 그들은 저널 편집자에게 맹목적으로 눈을 돌려 살라미 슬라이싱과 인용문 채우기로 압박을가합니다. 그들은 또한 출판사가 끝나면 수개월 동안 수개월 동안 ‘보도 자료’또는 ‘인쇄 미리보기 온라인’논문을 보유하고 특정 분야의 연구 결과물에 대한 최후의 기록을 더욱 흐리게 만들 것을 권장합니다. 과학의 질을 극대화하려는 진정한 욕구가 아닌 경쟁 방식의 기준 추적이이 업계의 행동을 주도합니다. 그 위기는 언제든지 사라지지 않을 것입니다.
- 문제가되는 몇 가지 저작자 규칙이 방해받지 않고 계속됩니다. 많은 것은 무료 로딩과 관련이 있습니다 (보증되지 않는 곳에서는 작성자 크레딧 할당). 다시 말하지만, 이는 임의의 협약 및 업계의 편의에 의해 가능합니다. 예를 들어, 표준 이력서 및 개인 정보 (예 : Google Scholar)에서 개별 저자 통계는 대부분의 심리학 논문이 팀의 노력이라는 사실을 제어하지 못합니다. 주어진 논문의 경우, 각 공동 저자는 하나의 전체 출판물 (하나의 몫이 아닌)을 제작하고 (단지 일부가 아닌) 모든 인용을 끌어 당긴 것으로 간주되어서 신용을 얻습니다. 다른 업무 생산성 측면에서 팀의 결과는 논리적으로 하나의 단일 결과 로 간주됩니다 . 팀 구성원 수 를 1 배로 늘린 것으로 결코 계산되지 않습니다. 과학의 다른 곳에서와 마찬가지로 무한한 확장 성은 일종의 일종의 독창적 인 프리 로딩 ( ‘명예’또는 ‘유령’저자이기도 함)을 유발하여 연구 윤리에 대한 일반적인 경멸에 대한 미끄러운 경사를 만듭니다. (고려 : 저자에 관한 윤리적 규범을 무시한다면, 다른 윤리적 규범은 무시할 만하니?) 그런 슬픔은 엄격함의 정반대이며 나쁜 과학을 모든 형태로 악영향을 미친다.
* * *
출처 : Jesse Orrico / Stocknap
연구 프로토콜의 사전 등록은 반드시 파일 서랍 문제를 해결하는 데 도움이 될 것입니다. 그러나 연구 등록은 의무적 인 것이 아니라 선택 사항으로 남아 있습니다. 심리학자들은 사전 등록에 신경 쓰지 않고 연구 프로그램을 쉽게 추구 할 수 있습니다.
재임 또는 승진에 관해서는, 등록되지 않은 전통적 종류와 달리 등록 된 연구를 출판하기위한 보너스 포인트를 제공하는 대학은 거의 없습니다 (있는 경우). 따라서 등록 된 보고서가 훌륭한 과학에 중요하지만 과학자들에게 이들을 생산하도록 장려하는 데 필요한 인센티브는 극도로 취약합니다.
나는이 문제에 대한 포괄적 인 통계를 알고 있지 않지만, 올해 등록 된 심리학 저널에 사전 등록 된 연구가 1 %까지 올라간다면 놀랄 것이다. 오래 전부터 0의 기준선에서, 그것은 진보를 나타냅니다. 그러나 우리의 대담한 신세계를 축하하지 말자.
* * *
심리학 (및 다른 과학)의 연구를 형상화 한 왜곡 된 보상 아키텍처를 해체하지 못하면 지난 세기 동안 우리가 현재의 혼란을 가져온 동일한 역 동성을 계속해서 지켜 나갈 것입니다.
우리가 문제를 해결 한 (또는 더 미묘하게, 우리가 그들을 과장했다는) 주장은 우리를 부당한 낙관주의로 이끌어주기 때문에 비생산적입니다. 그들은 우리가 눈에서 눈을 뗄 수있게합니다.
대신 우리는 우리의 초점을 면도하기 위해 노력을 기울여야한다. 위기의 끝을 조기에 축하하지 않겠습니다. 위기 극복에 굴하지 않거나 전제에 대한 논쟁에 빠져 보자. 우선인지 부조화, 낙관적 인 자기 망상, 그리고 위기를 야기한 불안정한 보강의 꼬리를 피하려고 노력하십시오.
그렇지 않으면 우리는 위기에 처한 지 여부에 대한 위기 상황에서 위기에 직면 할 수있는 더 깊은 유형의 혼란, 결국 우리 자신의 창조물로 끝날 수 있습니다.
