De privileges van de vice–premier kwamen onder vuur te liggen nadat hij een deel van zijn portefeuilles moest inleveren na het bekend worden van diens affaire met zijn secretaresse. Een aantal parlementariërs van regeringspartij Labour begon eind mei met een actie om Prescott weg te krijgen. Omdat premier Blair al eerder heeft aangegeven zijn vice–premier niet te willen missen, wilden de parlementariërs Prescott in ieder geval zijn gratis huizen en zijn royale ministerssalaris afnemen.De controverse over Dorneywood werd nog eens gevoed nadat er foto’s in de media verschenen waarop te zien was hoe Prescott croquet speelde op het landgoed, terwijl hij op dat moment waarnemend premier was voor Blair die toen op vakantie was. Prescott liet woensdagavond weten dat hij nu inziet dat hij „door het gebruik van Dorneywood" gehinderd wordt in zijn werkzaamheden.