Η στατιστική χρησιμοποιεί μεταβλητές για να περιγράψει μια μέτρηση. Μια τέτοια μεταβλητή ονομάζεται σημαντική εάν η πιθανότητα το αποτέλεσμά της να προέκυψε από τύχη είναι μικρότερη από μια δεδομένη τιμή. Οι στατιστικοί έλεγχοι υποθέσεων χρησιμοποιούνται για τον έλεγχο της σημαντικότητας.
Η έννοια της στατιστικής σημαντικότητας ξεκίνησε από τον Ronald Fisher όταν ανέπτυξε τον στατιστικό έλεγχο υποθέσεων, τον οποίο περιέγραψε ως "ελέγχους σημαντικότητας", στη δημοσίευσή του το 1925, Statistical Methods for Research Workers. Ο Fisher πρότεινε μια πιθανότητα ένα στα είκοσι (0,05) ως κατάλληλο επίπεδο αποκοπής για την απόρριψη της μηδενικής υπόθεσης. Στη δημοσίευσή τους το 1933, οι Jerzy Neyman και Egon Pearson συνέστησαν να καθορίζεται εκ των προτέρων, πριν από οποιαδήποτε συλλογή δεδομένων, το επίπεδο σημαντικότητας (π.χ. 0,05), το οποίο ονόμασαν α.
Παρά την αρχική του πρόταση για το 0,05 ως επίπεδο σημαντικότητας, ο Φίσερ δεν είχε την πρόθεση να καθορίσει αυτή την οριακή τιμή, και στη δημοσίευσή του Statistical methods and scientific inference του 1956 συνέστησε να καθορίζονται τα επίπεδα σημαντικότητας ανάλογα με τις συγκεκριμένες περιστάσεις.