「議會山莊」1774年建成以來，多次易手，其間曾是招待皇室和社會名流的場所，包括已故英皇佐治六世（KingGeorgeVI）和現任英女皇伊利沙伯二世（QueenElizabethII）。
「議會山莊」原名Parkfield，本來面積較小，到19世紀末由股票經紀斯克林杰（WalterScrimgeour）購入後，為了妻子和八名子女，加建了一個課室、育嬰室、健身室和桌球室。
1913年斯克林杰一家遷出，由國會議員克羅斯菲爾德爵士（ArthurCrosfield）購入。他妻子熱愛網球，曾是瑞士女子網球賽冠軍，兩夫婦於是花了100萬英鎊（相等於現在2.48億港元），把Parkfield改建成40,000平方呎的「宮殿」，並加設四個網球場，招待倫敦貴族名流。克羅斯菲爾德將大宅命名為Withurst（議會山莊），Witan代表議會，hurst代表種滿林木的山。
名人參加慈善網球賽
每年溫布頓網球賽後，國際知名的網球員及名人都會到「議會山莊」參加慈善網球賽（圖），英皇佐治六世登基前都曾參賽，還有其他國家不少皇室成員。
克羅斯菲爾德1938年逝世，大宅由他妻子打理，二戰時更成為皇家空軍的娛樂中心。戰後，名人、皇室人員再次回流「議會山莊」，包括現時的英女皇。由1970年起數十年，大宅多次易手，直至2008年由一名神秘富豪買下。
英國《每日郵報》