Under 1929 fick Ladew sin passion för rävjakt att besöka den del av Maryland som ligger norr om Baltimore. Han lämnade sitt hem på Long Island och köpte den 101 hektar stora gården ”Pleasant Valley Farm” i Monkton. Vid tidpunkten för köpet var huset på fastigheten i ett förfallet skick. Ladew inledde ett omfattande restaureringsprojekt där han byggde om delar av huset och inkluderade moderna inventarier. Efter ombyggnaden skulle huset så småningom ha 15 rum, inklusive ett ovalt bibliotek som kallades ”ett av de 100 vackraste rummen i Amerika”.
1937 var huset i stort sett färdigställt och Ladew riktade sin uppmärksamhet mot tomten. Han hade upptäckt konsten med formklippning i England på 1920-talet när han såg en klippt jaktscen på toppen av en häck i Gloucestershire. Från sina resor till England och Italien visste han vilken typ av trädgård han ville ha. Den skulle ha två tväraxlar för att möjliggöra de långa utblickar som han hade sett i italienska trädgårdar med ”trädgårdsrum” vid varje axel. Axlarna möts i Ladews ovala simbassäng, som är placerad i mitten av den stora skålen. Han ritade bland annat topiarier föreställande en räv och hundar, en kinesisk skuta med segel, svanar och en giraff.
Denna förvandling av 89 000 m² av fält som tidigare använts för grödor och boskap till trädgårdar ledde till att Pleasant Valley Farm beskrevs som ”den mest enastående topiarieträdgården i Amerika” av Garden Club of America. Senare förklarades den av New York Times vara ett ”utsökt trädgårdsland”.
Ladew var fast besluten att bevara sin trädgård för alla, och därför inrättade han Ladew Topiary Gardens, Inc. en ideell organisation vars uppdrag är att ”underhålla och främja trädgårdarna, huset och anläggningarna i enlighet med Harvey S. Ladews kreativa anda för allmänhetens bästa och för utbildningsmässiga, vetenskapliga och kulturella syften”. Huset, trädgårdarna och anläggningen öppnades för allmänheten 1971 och står värd för flera evenemang per år.