Problemas con la investigación paranormal. (II)

(Continuación de Problemas con la investigación paranormal)

Falacia de transposición del condicional

El segundo problema radica en confundir la probabilidad de los datos dada una hipótesis (p(D|H)) con la probabilidad de una hipótesis dada los datos (p(H|D)). Por ejemplo, la probabilidad de ganar la lotería participando en ella puede ser de 10^-6, mientras que la probabilidad de haber jugado en la lotería sabiendo que uno ganó es prácticamente 1. Esta es la formalización matemática del principio según el cual “afirmaciones extraordinarias requieren evidencias extraordinarias”. En este sentido, la probabilidad previa tiene que tenerse en cuenta al tomar decisiones racionales. En el contexto de Bem (2010) La probabilidad previa de la existencia de fenómenos paranormales es y debería ser muy baja por lo que la evidencia necesaria para establecer que tal cosa existe debe ser muy alta.

El problema con los p-valores

Finalmente, Wagenmakers (2010) argumenta que los p-valores sobreestiman la evidencia en contra de la hipótesis nula. Esto es porque la hipótesis nula se considera en aislamiento en vez de comparándola con una hipótesis específica. Siguiendo el ejemplo anterior, al ganador de la lotería podría acusárselo de hacer trampa puesto que la probabilidad de ganar es muy baja, pero esta idea resulta ridícula cuando se considera que la hipótesis alternativa (que de alguna manera sabía con antelación qué números iban a salir) tiene una probabilidad mucho menor.

Una de las varias formas de solucionar el problema es mediante el contraste de hipótesis bayesiano. En ella la probabilidad a posteriori (luego de realizar el experimento) es igual a la probabilidad a priori multiplicada por el Factor de Bayes: p(D|H₀) / p(D|H₁). Es decir, el cociente entre la probabilidad de obtener datos dada la hipótesis nula y la probabilidad de obtener los datos dada la hipótesis a corroborar (en este contexto, que exista psi). Un Factor de Bayes de 2 significa que es doblemente probable que los datos se hayan dado bajo la hipótesis a corroborar que bajo la hipótesis nula.

Conclusión

El paper concluye con 6 recomendaciones tanto para los investigadores de fenómenos paranormales como para quienes estudian fenómenos más mundanos:

1. Evitar expediciones de pesca al seleccionar los participantes, métodos y criterios con anterioridad al comienzo del estudio.
2. Establecer los análisis estadísticos a utilizar y las probabilidades previas antes de obtener los datos.
3. Estar en colaboración con uno o varios escépticos (aplicable más que nada a la investigación paranormal)
4. Realizar varios análisis estadísticos. Si el efecto es real, éstos deberían dar resultados consistentes.
5. No transformar experimentos exploratorios exitosos en confirmatorios ni viceversa.
6. Publicar online los datos, software, y materiales además de las decisiones de los pasos 1 y 2.