Die erste normannische Burg wurde bald nach der Eroberung von 1066 in Lydford gebaut; die Überreste seiner Erdarbeiten können auf der Südseite der Kirche St Petrock gesehen werden. Einen neuen Turm wurde 1195, etwas nördlich von der ursprünglichen Burg, möglicherweise für die Nutzung als Gefängnis errichtet. Irgendwann im 13. Jahrhundert, die es komplett neu aufgebaut wurde. Ein Graben wurde gegraben, um den Turm und den Boden gestapelt gegen das Erdgeschoss um einen Hügel zu bilden. Oben, die zwei Etagen in einem kleinen Bergfried, konvertiert wurden, während das Erdgeschoss gefüllte Zoll war zur gleichen Zeit, die das Erdarbeiten Bailey im Nordwesten gebaut wurde. Im frühen 18. Jahrhundert war die Burg verfallen, geworden, aber es wurde repariert und für das nächste Jahrhundert diente als Gefängnis und Gerichtsgebäude, Ehe noch einmal und darf um in den Ruin zu fallen.