Esta semana se publica una serie de 5 artículos sobre el fraude científico en
el Cuaderno de Cultura Científica.También se publican en este blog un día más tarde.
Fraude científico (V). Resumen y conclusiones
El fraude científico existe, existe desde siempre y hay casos entre los científicos más famosos. Desde Ptolomeo hasta la actualidad, pasando por Mendel, Galileo o el hombre de Pitdown, los casos son innumerables. Y no son algunos casos anecdóticos, según estudios realizados entre el 66% y el 72% de los científicos admite realizar algún tipo de malas prácticas y uno de cada 50 admite falsificar o inventar resultados. Lamentablemente no existe un método científico normativo ni ninguna otra característica que proporcione criterios de demarcación definidos entre lo que es científico y lo que no lo es.
La idea de que la mayoría de los científicos son honestos y hay unas pocas manzanas podridas es demasiado simplista. Es necesario un modelo más elaborado que comienza por mostrar todo un continuo de comportamientos inadecuados en el que no es fácil colocar un umbral que delimite las manzanas sanas de las podridas. De hecho, y siguiendo los trabajos de Dan Ariely, podemos establecer la existencia de un umbral de deshonestidad aceptable tanto por el individuo como por la comunidad.
Se pueden identificar dos tipos de fraude: el movido por el deseo de descubrimiento (tipo 1) y el derivado de la presión profesional (tipo 2). En el primero el científico empuja progresivamente el umbral de lo aceptable, manteniendo una autopercepción de honorabilidad mientras que en el segundo se salta el umbral a conciencia. Contribuyen al de tipo 2, menos interesante intelectualmente, presiones externas como la necesidad de publicación e internas como la vanidad. El de tipo 1, más consustancial al avance científico, se produce cuando se explora sin éxito los bordes del paradigma vigente (en términos de Kuhn) e incluye la ciencia patológica.
El modelo propuesto se resume gráficamente en la figura 1, y esquemáticamente en los puntos siguientes:
·
El estado “honesto” de partida
incluye un umbral de fraude aceptable (Ariely)
·
Hay dos formas (fundamentales) de
fraude:
o Tipo 1.- Empujar el umbral en pos de probar una idea
o Tipo 2.- Saltarse el umbral en pos de méritos profesionales
·
El fraude tipo 2 es
intelectualmente menos interesante. Tiene que ver con el equilibrio psicológico
del individuo y con presiones externas.
·
En el fraude C1 se incurre al
salir del entorno seguro del paradigma de Kuhn en busca de hipótesis
revolucionarias.
Figura 1. Resumen esquemático del modelo propuesto para analizar el fraude. Los comportamientos cuestionables forman un continuo sin fronteras definidas en el que hay un umbral aceptable. Ese umbral se puede empujar o saltar dando lugar a dos tipos de fraude. Las prácticas cuestionables masivas están en el entorno del umbral aceptable, quedando un número mucho más reducido de auténticas manzanas podridas.
A la luz de este modelo podemos entender mejor los resultados de los estudios antes comentados. Las prácticas que aceptan llevar a cabo la mayoría de los científicos (recordemos, entre el 66% y el 72%) estarían en el entorno del umbral de lo aceptable. Cuando se pregunta por ellas expresamente se reconoce que no está bien, pero de alguna forma se asume que tampoco está tan mal y que “todo el mundo lo hace”, análogo a llevarse a casa un lápiz de la oficina. Las prácticas que son manifiestamente fraudulentas y conscientes, como inventar datos, afectan a números muy inferiores, compatibles con la idea de las (pocas) manzanas podridas.
La existencia de errores y fraudes en la investigación científica da lugar fundamentalmente a dos consecuencias: retracción de artículos e irreproducibilidad de resultados. El número de artículos retirados de las publicaciones, aunque es muy bajo, crece drásticamente desde el año 2000. Estudios recientes intentando reproducir resultados publicados, por ejemplo en psicología, muestran que en la gran mayoría de los casos los resultados no se consiguen reproducir. Este problema está lejos de ser anecdótico en bastantes disciplinas científicas.
Para el individuo que se dedica a ella, la ciencia es (o puede ser) una actitud vital y una profesión. Además, para la sociedad es un sector de actividad productiva, y en este último sentido la ciencia ha cambiado enormemente en las últimas décadas. En el período de 1996 a 2011 ha habido 20 millones de artículos escritos por 15 millones de autores (ref 1). La ciencia se ha convertido en una actividad de masas.
Las publicaciones científicas existen desde el siglo XVII, pero desde la generalización de internet se pueden consultar con una facilidad y en un número inimaginable hace tres décadas. Por otro lado, los distintos organismos financiadores de la investigación cada vez son más exigentes con los científicos a su servicio: con menos dinero hay que conseguir más publicaciones en menos tiempo. En mi opinión estas son las razones fundamentales que están detrás de la evolución al alza de las malas prácticas en ciencia que, como veíamos, están aflorando aceleradamente.
La presión por publicar la sufren, de manera angustiosa en ocasiones, todos los miembros de la profesión. Esto hace que el colectivo sea más indulgente ante tamaños muestrales escasos, análisis estadísticos pobres, descripciones de la metodología poco claras, conflictos de intereses, etc. En resumen, el umbral de las prácticas aceptables se ha desplazado alejándose de la pulcritud de forma exagerada, en algunos casos al menos. Por otro lado, esa disminución de la calidad de lo publicado no pasa desapercibida ante el escrutinio de un número tan vasto de científicos como el que hoy día rastrea las bases de datos a la caza de ideas para sus próximos trabajos.
La presión por publicar desplazó el acento de la calidad a la cantidad. La presión por el índice de impacto parecía una forma ingeniosa de recuperar el nivel de calidad sin reducir la presión, pero parece que eso está llevando a una disminución de la calidad global, aumentando la tolerancia de los científicos con prácticas dudosas y, en algunas disciplinas, llegando a poner en cuestión el propio avance científico de las mismas.
Un sistema que ha crecido de una forma tan explosiva probablemente tiene aún que encontrar una armonización adecuada de los distintos intereses que alberga. En este camino, la presión por la productividad se tendrá que ver atemperada por la relevancia y la calidad de dichos productos. Para conseguirlo habrá que tener en cuenta cuestiones tales como la incorporación de proyectos colaborativos a gran escala, la cultura de la replicación, el registro, el establecimiento de buenas prácticas de reproducibilidad, la mejora de métodos estadísticos, la estandarización de definiciones y análisis, etc. (recomendaciones tomadas de ref 1). El umbral de lo aceptable se ha desplazado hasta límites que en realidad no queríamos aceptar y es necesario trabajar para devolverlo a un lugar más razonable.
Referencias.
(ref 1) Ioannidis JPA (2014) How to Make More Published Research True. PLoS Med 11(10): e1001747. doi:10.1371/journal.pmed.1001747 http://journals.plos.org/plosmedicine/article?id=10.1371/journal.pmed.1001747
