История замка Лидса довольно увлекательна и насчитывает более 900 лет. Первый камень замка был заложен в 1119 году нормандским бароном Робертом де Кревекуром на острове в реке Лен. В 1278 году замок приобрела королева Элеонора Кастильская, жена Эдуарда I.
В течение следующих 300 лет замок оставался королевской резиденцией для разных королей и королев. В 1552 году Энтони Сент-Легер получил замок от Эдуарда II в знак признания его заслуг в битве против восстания в Ирландии.
Замок Лидс Кент превратился в частную резиденцию в XVII веке. Это был якобинский загородный дом, георгианский особняк, уединение XX века и популярное историческое здание в Британии в XXI веке. Когда леди Бейли умерла в 1974 году, замок был оставлен благотворительной организации под названием Leeds Castle Foundation. Их главной задачей стало сохранение замка для будущих поколений.