Penjaga istana Carlisle ujung barat perbatasan antara Inggris dan Skotlandia. William II membangun kastil kayu pertama di Carlisle tahun 1092, dan tiga puluh tahun kemudian saudaranya, Raja Henry I, memerintahkan pembangunan sebuah kastil di batu yang termasuk tetap yang sekarang tetap sebagai bagian tertua dari benteng. Dinding menjaga dan kastil akhirnya diselesaikan oleh Raja Skotlandia, David I, yang menguasai Inggris Utara pada masa pemerintahan raja Stephen bermasalah (1135-54). Oleh 1157 benteng itu kembali di Inggris tangan, tapi karena lokasinya di perbatasan antara dua negara sering bertikai berarti itu akan menjadi berjuang atas bagi banyak lebih berabad-abad. Terakhir kali kastil datang dikepung adalah pada tahun 1745 ketika pasukan Jacobite Pangeran Charles Edward Stewart (Bonnie Prince Charlie) berhasil merebut benteng, hanya untuk dipaksa untuk menyerah pada bulan berikutnya.