Acrónimo de “Formular hipótesis después de conocer los resultados”
HARKing ( hipótesis después de conocer los resultados ) es un acrónimo acuñado por el psicólogo social Norbert Kerr [1] que se refiere a la cuestionable práctica de investigación de "presentar una hipótesis post hoc en la introducción de un informe de investigación como si fuera una hipótesis a priori ". [1] [2] Por lo tanto, una característica clave de HARKing es que la hipótesis post hoc se presenta falsamente como una hipótesis a priori. [3] HARKing puede ocurrir cuando un investigador prueba una hipótesis a priori pero luego omite esa hipótesis de su informe de investigación después de conocer los resultados de su prueba. El análisis post hoc o la teorización post hoc pueden conducir a una hipótesis post hoc.
Tipos
Se han distinguido varios tipos de HARKing, entre ellos:
Hablando
Formular hipótesis de forma transparente después de conocer los resultados, en lugar de la técnica secreta y no revelada de HARK que propuso Kerr por primera vez. En este caso, los investigadores declaran abiertamente que desarrollaron sus hipótesis después de observar los resultados de su investigación. [4]
CHARKing (o HARKing puro)
CHARKing [5] o "HARKing puro" [1] se refiere a la práctica de construir nuevas hipótesis después de que se conocen los resultados y presentarlas como hipótesis a priori. [1] [5] CHARKing se considera a menudo como la forma prototípica de HARKing.
Haciendo rhar
RHARKing se refiere a recuperar hipótesis antiguas de la literatura existente después de que se conocen los resultados y presentarlas como hipótesis a priori [5]. Tenga en cuenta que las hipótesis RHARKed pueden considerarse hipótesis a priori en el sentido de que se desarrollaron y publicaron antes del conocimiento de los resultados de la investigación actual. [5] [6]
Tiburón
Suprimir hipótesis a priori después de conocer los resultados de las pruebas de esas hipótesis. [1] [5]
HARKing activo y pasivo
El HARKing activo se produce cuando los investigadores HARKean antes de enviar su informe de investigación para su publicación. El HARKing pasivo se produce cuando los investigadores HARKean en respuesta a las solicitudes de los editores y revisores durante el proceso de revisión por pares . [5] : 317
Prevalencia entre los investigadores
Las preocupaciones sobre el HARKing parecen estar aumentando en la comunidad científica, como lo demuestra el creciente número de citas al artículo seminal de Kerr. [7] Una revisión de 2017 de seis encuestas encontró que un promedio del 43% de los investigadores encuestados (principalmente psicólogos) autoinformaron HARKing "al menos una vez". [5] Esta cifra puede ser una subestimación si los investigadores están preocupados por informar prácticas de investigación cuestionables, no se perciben a sí mismos como responsables del HARKing que proponen los editores y revisores (es decir, HARKing pasivo) y/o no reconocen su HARKing debido a sesgos de retrospectiva o confirmación .
Motivación de los investigadores
El HARKing parece estar motivado por el deseo de publicar investigaciones en un entorno de publicación que valora las hipótesis a priori por sobre las hipótesis post hoc y contiene un sesgo de publicación contra los resultados nulos . Para mejorar sus posibilidades de publicar sus resultados, los investigadores pueden suprimir en secreto cualquier hipótesis a priori que no haya producido resultados significativos, construir o recuperar hipótesis post hoc que den cuenta de cualquier resultado significativo inesperado y luego presentar estas nuevas hipótesis post hoc en sus informes de investigación como si fueran hipótesis a priori. [1] [8] [9] [5] [10]
Predicción y acomodación
El método HARKing está asociado con el debate sobre la predicción y la acomodación. [11] En el caso de la predicción, las hipótesis se deducen de una teoría y evidencia a priori. En el caso de la acomodación, las hipótesis se inducen a partir de los resultados de la investigación actual. [7] Una visión es que el método HARKing representa una forma de acomodación en la que los investigadores inducen hipótesis ad hoc a partir de sus resultados actuales. [1] [3] Otra visión es que el método HARKing representa una forma de predicción en la que los investigadores deducen hipótesis a partir de una teoría y evidencia a priori después de conocer sus resultados actuales. [7]
Costos potenciales para la ciencia
Los costos potenciales de HARKing incluyen: [1] : 211
Proponer teorías que no pueden (a la espera de ser replicadas) pasar la prueba de desconfirmación de Popper
Disfrazar las explicaciones post hoc como explicaciones a priori
No comunicar información valiosa sobre lo que no funcionó
Tomando licencias estadísticas injustificadas
Presentar un modelo inexacto de la ciencia a los estudiantes
Fomentar prácticas cuestionables en otras zonas grises
Haciéndonos menos receptivos a los hallazgos fortuitos
Fomentar la adopción de una nueva teoría estrecha y limitada al contexto
Fomentar la retención de teorías antiguas demasiado amplias y no confirmables
Inhibir la identificación de hipótesis alternativas plausibles
Violar implícitamente principios éticos básicos
En 2022, Rubin realizó un análisis crítico de los 12 costos de la investigación HARKing de Kerr. Concluyó que estos costos "o bien están mal concebidos, mal atribuidos a la investigación HARKing, carecen de evidencia o no tienen en cuenta la revisión por pares previa y posterior a la publicación y la disponibilidad pública de los materiales y datos de investigación". [7]
HARKing y la crisis de la replicación
Se cree que algunos de los costos de HARKing han llevado a la crisis de replicación en la ciencia. [4] Por lo tanto, Bishop describió a HARKing como uno de los "cuatro jinetes del apocalipsis de la reproducibilidad", siendo el sesgo de publicación, el bajo poder estadístico y el p -hacking [12] los otros tres. [13] Una visión alternativa es que es prematuro concluir que HARKing ha contribuido a la crisis de replicación. [7] [5] [14]
Se ha propuesto el registro previo de hipótesis de investigación antes de la recopilación de datos como método para identificar y disuadir el HARKing. Sin embargo, el uso del registro previo para prevenir el HARKing es controvertido. [3]
Preocupaciones éticas
Kerr señaló que "el HARKing puede implicar ocultamiento. La cuestión entonces es si lo que se oculta en el HARKing puede ser una parte útil de la 'verdad'... o en cambio es básicamente poco informativo (y, por lo tanto, puede ignorarse con seguridad a discreción del autor)". [1] : 209 Tres posiciones diferentes sobre la ética del HARKing dependen de si el HARKing oculta "una parte útil de la 'verdad'".
La primera posición es que todo HARKing es poco ético bajo todas las circunstancias porque viola un principio fundamental de comunicar la investigación científica de manera honesta y completa. [1] : 209 Según esta posición, HARKing siempre oculta una parte útil de la verdad.
Una segunda posición es que el HARKing cae en una "zona gris" de la práctica ética. [1] [15] Según esta posición, algunas formas de HARKing son más o menos éticas en determinadas circunstancias. [16] [5] [17] [7] Por lo tanto, solo algunas formas de HARKing ocultan una parte útil de la verdad en determinadas condiciones. En consonancia con esta visión, una encuesta de 2018 a 119 investigadores de los EE. UU. encontró que el HARKing ("informar de un resultado inesperado como si hubiera sido hipotetizado desde el principio") estaba asociado con prácticas de investigación "ambiguamente poco éticas" más que con prácticas de investigación "inequívocamente poco éticas". [18]
Una tercera posición es que el método HARKing es aceptable siempre que las hipótesis se deduzcan explícitamente de una teoría y evidencia a priori, como se explica en una justificación teórica, y los lectores tengan acceso a los datos y materiales de investigación relevantes. [7] Según esta posición, el método HARKing no impide a los lectores hacer una evaluación adecuadamente informada de la calidad teórica y la plausibilidad de las hipótesis HARKed y del rigor metodológico con el que se han probado las hipótesis. [7] [17] En este caso, el método HARKing no oculta una parte útil de la verdad. Además, los investigadores pueden afirmar que una teoría y evidencia a priori predicen sus resultados incluso si la predicción se deduce después de que conocen sus resultados. [7] [19]
^ abcdefghijk Kerr, NL (1998). "HARKing: Formulación de hipótesis después de conocer los resultados". Personality and Social Psychology Review . 2 (3): 196–217. doi : 10.1207/s15327957pspr0203_4 . PMID 15647155.
^ John, LK; Loewenstein, G.; Prelec, D. (2012). "Medición de la prevalencia de prácticas de investigación cuestionables con incentivos para decir la verdad". Psychological Science . 23 (5): 524–532. doi :10.1177/0956797611430953. PMID 22508865. S2CID 8400625.
^ abc Lishner, DA (2021). "HARKing: Conceptualizaciones, daños y dos remedios fundamentales". Revista de Psicología Teórica y Filosófica . 41 (4): 248–263. doi :10.1037/teo0000182. S2CID 234886782.
^ ab Hollenbeck, JR; Wright, PM (2017). "Harking, sharking, and tharking: Argumentos a favor del análisis post hoc de datos científicos". Journal of Management . 43 : 5–18. doi : 10.1177/0149206316679487 .
^ abcdefghij Rubin, M. (2017). "¿Cuándo es perjudicial el HARKing? Identificar cuándo los distintos tipos de hipótesis post hoc no reveladas perjudican el progreso científico". Revista de Psicología General . 21 (4): 308–320. doi :10.1037/gpr0000128. S2CID 149228437.
^ Vancouver, JB (2020). "Navegando por el proceso de revisión a través de la santurronería". Psicología industrial y organizacional . 13 : 72–75. doi :10.1017/iop.2020.8. S2CID 219044743.
^ abcdefghi Rubin, M. (2022). "Los costos de HARKing" (PDF) . British Journal for the Philosophy of Science . 73 (2): 535–560. doi :10.1093/bjps/axz050.
^ Mazzola, JJ; Deuling, JK (2013). "Olvidar lo que aprendimos como estudiantes de posgrado: HARKing y presentación de informes selectivos de resultados en artículos de revistas I-O". Psicología industrial y organizacional: perspectivas sobre la ciencia y la práctica . 6 (3): 279–284. doi :10.1111/iops.12049. S2CID 142493071.
^ O'Boyle, EH Jr.; Banks, GC; Gonzalez-Mulé, E. (2017). "El efecto crisálida: cómo los resultados iniciales feos se transforman en artículos hermosos". Journal of Management . 43 : 367–399. doi :10.1177/0149206314527133. S2CID 145237761.
^ Cairo, AH; Green, JD; Forsyth, DR; Behler, AC; Raldiris, TL (2020). "La literatura gris importa: evidencia de informes selectivos de hipótesis en la investigación psicológica social". Boletín de personalidad y psicología social . 46 (9): 1344–1362. doi :10.1177/0146167220903896. PMID 32093574. S2CID 211475516.
^ Barnes, Eric Christian (2022), "Predicción versus acomodación", en Zalta, Edward N.; Nodelman, Uri (eds.), The Stanford Encyclopedia of Philosophy (edición de invierno de 2022), Metaphysics Research Lab, Stanford University , consultado el 28 de octubre de 2022
^ Simmons, Joseph P.; Nelson, Leif D.; Simonsohn, Uri (17 de octubre de 2011). "Psicología de los falsos positivos: la flexibilidad no revelada en la recopilación y el análisis de datos permite presentar cualquier cosa como significativa". Psychological Science . 22 (11): 1359–1366. doi : 10.1177/0956797611417632 . PMID 22006061.
^ Bishop, D. (2019). "Controlar a los cuatro jinetes de la irreproducibilidad". Nature . 568 (7753): 435. Bibcode :2019Natur.568..435B. doi : 10.1038/d41586-019-01307-2 . PMID 31019328.
^ Mohseni, A. (2020). "HARKing: del diagnóstico erróneo a la prescripción errónea" (PDF) . Consultado el 12 de noviembre de 2020 .{{cite journal}}: Requiere citar revista |journal=( ayuda )
^ Butler, N.; Delaney, H.; Spoelstra, S. (2017). "La zona gris: prácticas de investigación cuestionables en la escuela de negocios". Academy of Management Learning & Education . 16 : 94–109. doi :10.5465/amle.2015.0201.
^ Leung, K. (2011). "Presentación de hipótesis post hoc como a priori: cuestiones éticas y teóricas". Management and Organization Review . 7 : 471–479. doi :10.1017/CBO9781139171434.009.
^ ab Vancouver, JN (2018). "En defensa de HARKing". Psicología industrial y organizacional . 11 : 73–80. doi :10.1017/iop.2017.89. S2CID 149220988.
^ Sacco, DF; Bruton, SV; Brown, M. (2018). "En defensa de lo cuestionable: definir la base del compromiso de los científicos investigadores en prácticas de investigación cuestionables". Conducta responsable de la investigación e integridad de la investigación . 13 (1): 101–110. doi : 10.1177/1556264617743834 . PMID 29179623.
^ Worrall, J. (2014). "Revisión de la predicción y la acomodación". Estudios en historia y filosofía de la ciencia . 45 : 54–61. Bibcode :2014SHPSA..45...54W. doi :10.1016/j.shpsa.2013.10.001. PMID 24984450.