Седиште британских монарха

У средњем веку, место будуће палате чинило је део поседа Ебури. Мочварно тло је натапала река Тајберн, која и данас тече испод дворишта и јужног крила палате. Тамо где је река била прелазна, израсло је село Ија Крос. Власништво над локацијом је много пута мењало руке; власници су били Едвард Исповедник и његова супруга краљица Едит од Весекса у касно саксонско доба, а након норманског освајања, Вилијам Освајач. Вилијам је дао ово место Џефрију де Мандевилу,