Know when your numbers are significant

https://www.nature.com/articles/492180a




Some people ask about the replacement of the probability inferior to 5/100 by a more potent rule to reject the null hypothesis in order to strengthen the validity of experimental data interpretation. They favour 0.001 or 0.005 which means that the probability of error in rejecting the null hypothesis will be less than 1/1000 or 5/1000.





One probable unexpected side effect is that this change is a double-edged sword; as for instance for the accepted hypothesis that some pesticides are dangerous for human beings. With the new policy, this hazard will no longer be considered as a risk if we adopt a more strict policy about the null hypothesis rejection.





Certaines personnes s'interrogent sur le remplacement de la probabilité inférieure à 5/100 par une règle plus puissante pour rejeter l'hypothèse nulle afin de renforcer la validité de l'interprétation des données expérimentales. Ils favorisent 0.001 ou 0.005ce qui signifie que la probabilité d'erreur en rejetant l'hypothèse nulle sera inférieure à 1/1000 ou 5/1000.




Un effet secondaire inattendu probable est que ce changement est une épée à double tranchant; comme par exemple pour l'hypothèse acceptée que certains pesticides sont dangereux pour les êtres humains. Avec la nouvelle politique, ce risque ne sera plus considéré comme un risque si nous adoptons une politique plus stricte sur le rejet de l'hypothèse nulle.


https://jamanetwork.com/journals/jama/fullarticle/2676503