White Castle, zusammen mit Skenfrith und Grosmont, ist einer der drei Burgen gebaut, um eine der wichtigsten Routen durch das Grenzgebiet zwischen England und Südwales zu schützen. In den späten 1130 ist König Stephan nahmen alle drei Burgen unter einer einzigen Herrschaft, die die "drei Schlösser" als defensive Einheit gesteuert. Die 1180 White Castle erscheint die erste der drei Burgen in Stein aufgebaut gewesen zu sein. White Castle wurde ursprünglich genannt Llantilio Burg, aber erhielt seinen neuen Namen von das weiße Gips-Rendering, das die Wände bedeckt. Im frühen 13. Jahrhundert Hubert de Burgh die Herrschaft über die drei Burgen statt. Er moderne steinerne Burgen von Grosmont und Skenfrith gebaut, aber die vorhandenen Steinen Einwendungen an White Castle Links. Im Gegensatz zu den anderen beiden Burgen White Castle scheint hauptsächlich ein militärischer Außenposten, anstatt ein Haus für eine Adelige Familie gewesen.