Die Ruinen des alten Schlosses in Sherborne stammen aus dem frühen 12. Jahrhundert, als die Burg um Roger de Caen, Bischof von Salisbury gebaut wurde. Er war ein Mann von großer Bedeutung, als Kanzler und anschließend Justiziar, König Henry I. jedoch diente als Henry dort starb streitenden war Konflikt um die Nachfolge, mit Heinrichs Tochter Matilda um den Thron, gegen ihren Cousin, Stephen . Sherborne wurde von Stephen 1135 beschlagnahmt, und es blieb in königlicher Hand bis zur Herrschaft von Eduard III., Bischof Robert Wyville bezahlt, das Schloss wieder in die Hände der Kirche. 1592, Queen Elizabeth versetzt die Lease Sir Walter Raleigh. Er hatte wenig Verwendung für die Burg, sondern nutzten das Anwesen, wo er eine neue Residenz, Sherborne Lodge, gebaut, die jetzt Teil der neuen Sherborne-Burg über den See nach Süden bildet.