Em 1929 a paixão de Ladew pela caça à raposa levou-o a visitar a parte de Maryland ao norte de Baltimore. Saindo de sua casa em Long Island, ele comprou a “Pleasant Valley Farm” de 250 acres (101 ha), localizada em Monkton. No momento da compra, a casa na propriedade estava em condições degradadas. Ladew embarcou em um extenso projeto de restauração, reconstruindo seções da casa e incluindo instalações modernas. Como reconstruída, eventualmente teria 15 quartos, incluindo uma biblioteca oval chamada “um dos 100 quartos mais bonitos da América”.
Em 1937 a casa foi concluída em sua maioria, e Ladew voltou sua atenção para o terreno. Ele tinha descoberto a arte da topiária na Inglaterra nos anos 20, quando viu uma cena de caça cortada no topo de uma sebe em Gloucestershire. De suas viagens à Inglaterra e Itália, ele sabia que tipo de jardim ele queria. Era ter dois eixos cruzados para permitir as longas vistas que ele tinha visto nos jardins italianos com “salas de jardim” fora de cada eixo. Os eixos encontram-se na piscina oval de Ladew, colocada no centro do Great Bowl. Ele projetou topiários representando uma raposa e cães de caça, um lixo chinês com velas, cisnes e uma girafa, entre outros.
Esta transformação de 22 acres (89.000 m²) de campos anteriormente utilizados para cultivos e gado em jardins levou a Fazenda Pleasant Valley a ser descrita como “o jardim topiário mais notável da América”, pelo Garden Club of America. Mais tarde foi proclamada uma “requintada propriedade de jardim” pelo The New York Times.
Ladew estava determinado a preservar seu jardim para todos, e assim estabeleceu a Ladew Topiary Gardens, Inc., uma organização sem fins lucrativos cuja missão é “manter e promover os jardins, a casa e as instalações de acordo com o espírito criativo de Harvey S. Ladew para o benefício público e para fins educacionais, científicos e culturais”. A casa, os jardins e os terrenos foram abertos ao público em 1971, recebendo vários eventos por ano.