Với vị trí chiến lược ở biên giới Anh với Scotland, không có gì ngạc nhiên khi Lâu đài Carlisle giữ kỷ lục là nơi bị bao vây nhiều nhất ở Quần đảo Anh. Carlisle đóng vai trò là một trung tâm hành chính và quân sự lớn bắt đầu từ gần 2.000 năm trước, khi nó trở thành Luguvalium của La Mã. Pháo đài sớm nhất ở Carlisle, được làm từ gỗ và gỗ, được xây dựng tại nơi có lâu đài sau này hiện nay, và một thị trấn giàu có mọc lên xung quanh khu phức hợp quân sự. Vai trò của Carlisle như một pháo đài ở biên giới phía bắc tiếp tục trong thời kỳ đầu thời trung cổ khi nó là một phần của vương quốc Rheged. Nhiều câu chuyện khác nhau liên kết Vua Arthur vớiCarlisle; người ta nói rằng anh ta giữ tòa án ở đây. Khi vương quốc Northumbria là một cường quốc ở phía bắc, Carlisle cũng trở thành một trung tâm tôn giáo quan trọng.

Bản khắc Lâu đài Carlisle, 1829

Người Norman Lâu đài được khởi công dưới thời trị vì của William II của Anh, con trai của Kẻ chinh phục, lúc đó Cumberland được coi là một phần của Scotland. Sau khi đánh đuổi người Scotland, William II đã tuyên bố khu vực này cho nước Anh và vào năm 1093, một lâu đài bằng gỗ của người Norman và lâu đài bailey được xây dựng trên địa điểm của pháo đài La Mã trước đó. Năm 1122, Henry I ra lệnh xây dựng một tháp canh bằng đá; các bức tường thành cũng có từ thời điểm này. Lịch sử tiếp theo của Carlisle phản ánh sóng gió trong quan hệ Anh-Scotland, Carlisle và lâu đài của bà đã đổi chủ nhiều lần trong 700 năm sau đó. Thành phố cũng là nơi diễn ra chiến thắng và bi kịch của các vị vua của cả hai quốc gia. David I của Scotland đã lấy Carlisle cho người Scotland một lần nữa sau cái chết của Henry I. Ông được cho là đã xây dựng "một pháo đài rất vững chắc" ở đó, điều này có thể cho thấy công việc do Henry I bắt đầu đã hoàn thành. Lâu đài đã trở lại tay người Anh dưới thời Henry II (1154–1189), người đã bổ nhiệm Robert de Vaux, Cảnh sát trưởng của Cumberland làm thống đốc. Các thống đốc, và sau đó là các cai ngục, của lâu đài có vai trò quan trọng trong việc duy trì trật tự dọc biên giới Anh-Scotland.

Lâu đài đã phát triển hơn nữa khi Carlisletrở thành tổng hành dinh của Edward I trong chiến dịch Scotland đầu tiên của ông vào năm 1296. Trong ba thế kỷ tiếp theo, Carlisle bị bao vây bảy lần, trong đó có một cuộc bao vây kéo dài của Robert the Bruce sau Bannockburn. Cuối cùng nằm chắc trong tay người Anh, lâu đài trở thành trụ sở của Wardens of the West March. Các hệ thống phòng thủ thành phố đồ sộ hơn nữa đã được xây dựng dưới triều đại của Henry VIII, khi kỹ sư Stefan von Haschenperg của ông cũng thiết kế Thành cổ Henric điển hình. Mary Queen of Scots bị giam cầm trong Warden's Tower vào năm 1567. Vào cuối thế kỷ 16, người cai trị biên giới khét tiếng Kinmont Willie Armstrong đã được giải cứu một cách táo bạo khỏi Lâu đài Carlisle, khi đó cũng là một nhà tù. Ngay cả sau Liên minh các Vương miện vào năm 1603, Lâu đài Carlisle vẫn giữ truyền thống thượng võ của nó, được giữ cho nhà vua trong Nội chiến cho đến khi buộc phải đầu hàng sau một cuộc bao vây của Nghị viện khiến những người cư ngụ phải khuất phục. Lâu đài cũng bị quân Jacobite chiếm và trấn giữ vào năm 1745. Ngày nay, truyền thống quân sự của pháo đài hùng mạnh phía bắc này vẫn tiếp tục thông qua Bảo tàng Đời sống Quân sự của Cumbria.