In september 1944 was Villa Hartenstein het onderkomen van een deel van de staf van de Duitse veldmaarschalk Model die zijn hoofdkwartier in Oosterbeek had. Na de start van Operatie Market Garden moesten Model en zijn staf vluchtten om niet in Britse handen te vallen.

Op 18 september werd Villa Hartenstein het hoofdkwartier van de 1^st Airborne Division. Vanuit deze locatie stuurde generaal-majoor Urquhart en zijn staf de Britse en Poolse troepen aan. Hartenstein lag niet in de frontlinie van de perimeter, maar werd toch getroffen door beschietingen. Door de schade aan het gebouw was er geen licht of stromend water meer. Om veilig te blijven werd het hoofdkwartier naar de kelder van de villa verplaatst. Hier was ook een medische post ingericht waar gewonden veilig verzorgd konden worden.

De open velden rondom Hartenstein werden gebruikt als dropzones voor nieuwe voorraden. Met lichtsignalen en een speciaal Eureka baken probeerden de troepen op de grond naar de bevoorradingsvliegtuigen te seinen dat ze hun lading daar af moesten werpen. Helaas kwam slechts 14% van de geplande voorraad in Britse handen. 

In het hoofdkwartier werd het oorlogsdagboek van de divisie bijgehouden. Hier werd op 23 september het volgende in geschreven: “…perimeter grotendeels onveranderd, maar zeer dun bemand. . . Bevoorrading een flop, slechts kleine hoeveelheid munitie binnengehaald. Nog steeds geen voedsel en iedereen bijzonder smerig als gevolg van watertekort. Moreel nog voldoende hoog, maar onophoudelijke artillerie- en mortierbeschietingen hebben duidelijk effect.”