Innan kungafamiljen flyttade in var Kensington Palace Nottingham House, en relativt anspråkslös herrgård i jakobinsk stil. Vilhelm III och Maria II köpte slottet 1689 och bad sedan Sir Christopher Wren att bygga ut det till en fullvärdig kunglig bostad. Det slott som dagens besökare ser står fortfarande på grunden till det tidigare herrgården. Den förändringen förändrade dess status för alltid.