Враховуючи його стратегічне розташування на англійському кордоні з Шотландією, не дивно, що замок Карлайл є рекордсменом з найбільш обложених місць на Британських островах. Роль Карлайла як великого адміністративного та військового центру почалася майже 2 000 років тому, коли він став римським Лугуваліумом. Найперший форт у Карлайлі, зроблений з дерева та бруса, був побудований там, де зараз знаходиться пізніший замокРоль Карлайла як фортеці на північному кордоні збереглася і в ранньому середньовіччі, коли він входив до складу королівства Регед. Різні перекази пов'язують короля Артура з Карлайлом; кажуть, що він тримав тут свій двір. Коли королівство Нортумбрія було силою на півночі, Карлайл також став важливим релігійним центром.

Гравюра замку Карлайл, 1829 рік

Нормандський замок почали будувати під час правління Вільгельма II Англійського, сина Завойовника, в той час Камберленд вважався частиною Шотландії. Після вигнання шотландців Вільгельм II оголосив регіон Англією, і в 1093 році на місці більш раннього римського форту був побудований дерев'яний норманський замок Мотте і Бейлі. У 1122 році Генріх I наказав побудувати кам'яний замок; містоПодальша історія Карлайла відображає турбулентність англо-шотландських відносин, і протягом наступних 700 років Карлайл та її замок багато разів переходили з рук в руки. Місто також було сценою тріумфу і трагедії для монархів обох країн. Давид I Шотландський знову повернув Карлайл шотландцям після смерті Генріха I. Йому приписують, що він збудував "замокдуже міцний замок", що може свідчити про завершення робіт, розпочатих Генріхом І. Замок повернувся до рук англійців за Генріха ІІ (1154-1189), який призначив губернатором Роберта де Во, шерифа Камберленду. Губернатори, а згодом і наглядачі замку відігравали життєво важливу роль у підтримці порядку вздовж англо-шотландського кордону.

Замок отримав подальший розвиток, коли Карлайл став штаб-квартирою Едуарда I під час його першого шотландського походу в 1296 р. Протягом наступних трьох століть Карлайл сім разів піддавався облозі, включаючи тривалу облогу Робертом Брюсом після Баннокберна. Зрештою, міцно опинившись в англійських руках, замок став штаб-квартирою Вартових Західного Маршу. Наступними масованими заходами з оборони міста булипобудований за часів правління Генріха VIII, коли його інженер Стефан фон Гашенперг також спроектував типово генріхівську Цитадель. У Наглядовій вежі була ув'язнена Марія, королева Шотландії, у 1567 р. Наприкінці 16 ст. з Карлайлського замку, який на той час також був в'язницею, відважно врятувався сумнозвісний прикордонний розбійник Кінмонт Віллі Армстронг, який на той час також був в'язнем. Навіть після укладення Союзу Корон у 1603 р., Карлайлський замок продовжував залишатисязберіг свої військові традиції, утримуючи короля під час Громадянської війни, поки не був змушений здатися після парламентської облоги, яка змусила окупантів підкоритися голоду. Замок також був захоплений і утримувався військами якобітів у 1745 р. Сьогодні військові традиції цієї могутньої північної фортеці продовжуються в Музеї військового життя Камбрії.