Peggy's Point er meget sandsynligt det mest fotograferede fyrtårn i Canada - og med god grund. Selvom det uden tvivl er det mest kendte fyrtårn i Canada og et af de mest fotograferede fyrtårne i verden, er historien om lyset ved Peggy's Cove kun lidt kendt. Forskellige versioner står for navnet. Peggy er kaldenavnet for Margaret, og samfundet kan have fået navnet fra den nærliggende Saint Margaret's Bay, især da punktet markerer den østlige indgang til bugten. Andre beretninger tyder på, at Peggy var en tidlig nybygger. En populær romantisk version siger, at en kvinde ved navn Peggy var den eneste overlevende fra et skibsvrag, og der er endda amerikanske familier, der endda hævder afstamning fra den skibbrudne Peggy.
Under alle omstændigheder blev det besluttet at opføre et lys for at markere den østlige indgang til St. Margaret's Bay i 1868. Selvom det er bedst kendt som "Peggy's Cove Lighthouse", var og forbliver det officielt kendt som Peggy's Point Lighthouse som dets formål er at markere punktet, ikke bugten. Vigen har sit eget lille lys på regeringshavnen. Det første fyrtårn var et trætårn, bygget oven på en vogterbolig på punktet. Det var et rødt lys og brugte en katoptrisk reflektor (et rundt sølvbelagt spejl) til at forstørre petroleumsolielampen.
Trætårnet, bygget oven på en vogterbolig, blev erstattet af det nuværende tårn i 1915, en behagelig og kraftig beton-ottekant 50 fod vest for det oprindelige lys. Målmandens bolig forblev i mange år i nærheden, og det samme gjorde en høj flagstang med kodede sorte kegler og bolde for at advare mod dårligt vejr, der nærmede sig. Det nye fyrtårn viste et hvidt lys fra en dioptrisk linse, en række glasprismer, for at forstørre lyset. Flere farve- og karakterændringer fulgte, den seneste var skiftet fra hvid til grøn i 1979. En anden meget synlig ændring (som hjælper med at datere tidligere farvefotos) var i 1969, da jernlanternen på toppen af tårnet blev ændret fra hvid maling til rød maling.