Londra Kulesi'nin inşası yüzyıllara yayılmış ve çeşitli hükümdarların önemli katkılarıyla şekillenmiştir:

• 1078: Fatih William Beyaz Kule'yi inşa etmeye başlar. 1066'daki Norman Fethi'nin ardından I. William, Thames nehri üzerindeki bu bölgeyi zorlu bir taş kale inşa etmek için seçmiştir. Rochester Piskoposu Gundulf tarafından denetlenen yapının inşasında Caen taşı kullanılmıştır.
  
• 1190s: I. Richard İç Koğuş'u geliştiriyor. Hükümdarlığı sırasında Aslan Yürekli Richard, Kulelerin savunmasını güçlendirmeye odaklandı. Beyaz Kule'yi çevreleyen iç perde duvarının inşasını emretti ve dönemin tipik yuvarlak Gotik kemerleri ve pencereleriyle inşa edilen Çan Kulesi gibi önemli savunma kuleleri ekledi.
  
• 1216-1272: Henry burayı bir Kraliyet Sarayı'na dönüştürür ve Dış Koğuş'u ekler. Kule'nin odağını bir saraya doğru kaydırarak ücretli yenilemeler yaptı. Daha büyük bir müstahkem muhafaza olan dış perde duvarını inşa etti. Bu genişleme Kraliyet Darphanesi, Zırh Odası ve diğer binaları da içeriyordu. Thomas Kulesi'ni (daha sonra Hainler Kapısı olarak bilinecektir), büyük bir nehir kenarı girişini ve kraliyet lojmanları için Wakefield Kulesi'ni inşa etmiştir.
  
• 1272-1307: I. Edward önemli savunma yapıları ekleyerek daha da güçlendirir. Tanınmış bir askeri lider olarak, önemli bir savunma yapısı ve hapishane olan meşhur Kanlı Kule'nin inşasıyla tanınır. Ayrıca Kuleler'i yüksek rütbeli mahkumlar için özel bir infaz alanı olarak kullanmıştır. I. Edward ayrıca Kuleler'i çevreleyen hendeği de tamamladı.

Bu nedenle Londra Kulesi tek bir kişi tarafından tek seferde inşa edilmemiş, birbirini izleyen hükümdarlar tarafından sipariş edilen stratejik eklemeler ve değişiklikler yoluyla yüzyıllar içinde gelişmiştir.