Långt innan medeltidsslottet uppfördes byggde romarna en fyr på kullen strax efter år 43 e.Kr. Den är känd som den romerska fyren och är fortfarande en av de bäst bevarade romerska byggnaderna i England samt en av endast tre bevarade romerska fyrar från det forna romerska riket.