A história do Castelo de Leeds é bastante fascinante e remonta a mais de 900 anos. A primeira pedra do castelo foi colocada em 1119 por um barão normando, Robert de Crevecoeur, em uma ilha no rio Len. Em 1278, a rainha Eleanor de Castela, esposa de Eduardo I, adquiriu o castelo.
Nos 300 anos seguintes, o castelo continuou sendo a residência real de vários reis e rainhas. Em 1552, Anthony St. Leger recebeu o castelo de Eduardo II em reconhecimento aos seus serviços na batalha contra a revolta na Irlanda.
O Leeds Castle Kent foi transformado em uma residência particular no século XVII. Foi uma casa de campo jacobina, uma mansão georgiana, um retiro do século XX e um edifício histórico popular na Grã-Bretanha no século XXI. Quando Lady Baillie morreu em 1974, o castelo foi deixado para uma instituição de caridade chamada Leeds Castle Foundation. Sua principal tarefa tem sido preservar o castelo para as gerações futuras.