Brant Point Light Station har været hjemsted for flere fyrtårne, startende med det originale tårn bygget i 1746 – det var det andet fyrtårn nogensinde bygget i USA (koloniale Amerika på det tidspunkt). Det nuværende fyrtårn blev bygget i 1901 og er det niende tårn, der fungerer som Brant Point Fyrtårn. Et tegletårn blev bygget ved Brant Point i 1856 og står stadig, men blev deaktiveret i 1900. Fyrtårnet i 1856 bruges stadig som Nantucket Coast Guard station. I 1975 blev Brant Point Light tilføjet til det nationale Register over historiske steder.