Από το 1791, η ομοσπονδιακή κυβέρνηση υποστηρίχθηκε από φόρους στα αποσταγμένα ποτά, τον καπνό, τη ζάχαρη, τα εταιρικά ομόλογα και τους σκλάβους. Αυτοί ήταν έμμεσοι φόροι, το μόνο είδος που επέτρεπε το Σύνταγμα των Ηνωμένων Πολιτειών. Το 1812, το κόστος του πολέμου πρόσθεσε τους πρώτους φόρους επί των πωλήσεων σε χρυσό, κοσμήματα και ασημικά. Το 1817, η κυβέρνηση κατάργησε όλους αυτούς τους φόρους και στηρίχθηκε στα κεφάλαια από τους δασμούς στα εισαγόμενα αγαθά.
Κατά τη διάρκεια του αμερικανικού εμφυλίου πολέμου, χρειάζονταν κεφάλαια για τη χρηματοδότηση του πολέμου. Το 1861, το Κογκρέσο συνέταξε ένα νομοσχέδιο για έναν άμεσο φόρο επί του εισοδήματος φυσικών και νομικών προσώπων. Αυτός ο πρώτος φόρος εισοδήματος επιβάρυνε με 3% τα εισοδήματα άνω των 800 δολαρίων. Το νομοσχέδιο πέρασε και από τα δύο σώματα του Κογκρέσου, αλλά δεν τέθηκε ποτέ σε ισχύ. Το 1862, ωστόσο, ο Αβραάμ Λίνκολν υπέγραψε ένα νομοσχέδιο που προέβλεπε φόρο 3% στα εισοδήματα μεταξύ 600 και 5.000 δολαρίων, 7,5% στα εισοδήματα μεταξύ 5.000 και 10.000 δολαρίων και 10% στα εισοδήματα άνω των 10.000 δολαρίων. Υπήρξαν συζητήσεις στο Κογκρέσο σχετικά με τη συνταγματικότητα του άμεσου φόρου εισοδήματος, αλλά δεν ελήφθη κανένα μέτρο. Αφέθηκε να λήξει το 1872, όταν ήρθε προς ανανέωση.
Το 1862, το Κογκρέσο είχε εγκρίνει το αξίωμα του Επιτρόπου Εσωτερικών Εσόδων. Όπως και σήμερα, είχε την εξουσία να εκτιμά, να επιβάλλει και να εισπράττει φόρους. Είχε επίσης το δικαίωμα να επιβάλλει τους φορολογικούς νόμους με τη δίωξη και την κατάσχεση περιουσίας και εισοδήματος. Ο George S. Boutwell ήταν ο πρώτος επίτροπος του Γραφείου Εσωτερικών Εσόδων. / Το 1894, το Κογκρέσο ψήφισε το δασμολόγιο Γουίλσον-Γκόρμαν. Μείωσε τους δασμούς σε ορισμένες εισαγωγές στις Ηνωμένες Πολιτείες. Ωστόσο, το αντιστάθμισε με την επιβολή άμεσου φόρου εισοδήματος 2%. Το Ανώτατο Δικαστήριο, στην υπόθεση Pollock v. Farmers' Loan & Trust Co έκρινε αντισυνταγματικό τον φόρο εισοδήματος ένα χρόνο αργότερα. Το Δικαστήριο έκρινε ότι το Σύνταγμα δεν επέτρεπε φόρο εισοδήματος χωρίς καταμερισμό μεταξύ των πολιτειών.
Στις 3 Φεβρουαρίου 1913 επικυρώθηκε η δέκατη έκτη τροπολογία του Συντάγματος των Ηνωμένων Πολιτειών. Απαλλαγμένη από το κρίσιμο ζήτημα της κατανομής, επέτρεψε στο Κογκρέσο να επιβάλει φόρο εισοδήματος. Το Γραφείο της IRS ήταν επιφορτισμένο με την είσπραξη των φόρων εισοδήματος. Ο φόρος εισοδήματος φυσικών προσώπων ήταν 1% επί του εισοδήματος άνω των 3.000 δολαρίων. Τα εισοδήματα άνω των 5.000 δολαρίων υπόκειντο σε πρόσθετο φόρο 6%. Οι φόροι εισοδήματος έφτασαν το 77% το 1918 για να βοηθήσουν στη χρηματοδότηση του Α' Παγκοσμίου Πολέμου. Το 1929 έπεσαν στο υψηλό 24%, αλλά αυξήθηκαν ξανά κατά τη διάρκεια της Μεγάλης Ύφεσης του 1929. Κατά τη διάρκεια του Β' Παγκοσμίου Πολέμου εισήχθησαν η παρακράτηση και οι τριμηνιαίοι φόροι.
Το 1953, το Γραφείο Εσωτερικών Εσόδων αναδιοργανώθηκε και άλλαξε το όνομά του σε Υπηρεσία Εσωτερικών Εσόδων.
Το 1998, ο νόμος περί αναδιάρθρωσης και μεταρρύθμισης της IRS αναδιοργάνωσε και πάλι και εκσυγχρόνισε την υπηρεσία. Τα δικαιώματα των φορολογουμένων διευρύνθηκαν περαιτέρω.
Ο σημερινός Επίτροπος Εσωτερικών Εσόδων είναι ο Charles P. Rettig.
