Tidligere ble det vi nå kjenner som Pilestredet Park, omtalt som øvre og nedre bakkehus. Da Rikshospitalets andre bygg ble tatt i bruk så tidlig som i 1883 var området omkranset av bølgende grønne åser og liten annen bebyggelse. Her beitet kyrne fredelig til lyden av fuglekvitter. Muren som fortsatt står mot Pilestredet og Nordahl Brunsgate, ble i sin tid bygget for å hindre at smitten spredte seg fra pasientene på hospitalet til byens innbyggere. Murarbeidene var både omfattende og kostbare, og førte til at utbyggingen av selve hospitalet faktisk stoppet opp i mange år på grunn av pengemangel. Muren er i dag vernet.