Construit en 1891-1892 par l'entrepreneur local Cornelius Sheehan, l'Observatoire du parc Patterson était l'idée du concepteur Charles H. Latrobe. Cette structure bien-aimée est simplement connue des habitants sous le nom de "La Pagode".

La tour de quatre étages s'élève à 18 mètres de haut et est construite en fer, verre et bois. Elle se trouve sur la colline de Hampstead, une fortification clé lors de la Bataille de Baltimore en 1814.

Le pont supérieur offre des vues à couper le souffle dans toutes les directions, y compris sur le centre-ville et le port intérieur, la rivière Patapsco, Sparrows Point, le pont Key, le fort Carroll et le fort McHenry.

L'observatoire est tombé en décrépitude en raison d'un manque de fonds pour l'entretien et a été fermé en 1951. Des rénovations partielles ont été réalisées au fil des ans, mais la structure était en très mauvais état en 1990 et a failli être démolie.

Les efforts des membres de la communauté, ainsi que du conseil municipal, ont conduit à un important projet de réaménagement en 1998 qui s'est poursuivi jusqu'au début de 2002 et ont permis à la communauté d'adopter La Pagode comme symbole emblématique de la persévérance, désormais entretenue par l'organisation locale "Les Amis du parc Patterson".

L'observatoire est de forme octogonale et dispose d'un escalier en colimaçon qui mène à chacun de ses niveaux. Bien qu'il présente une certaine ressemblance physique avec une pagode, ce n'est pas une véritable pagode.

Ce terme est dérivé des stupas de l'ancien Népal et est traditionnellement utilisé pour désigner un reliquaire utilisé à des fins religieuses par les bouddhistes et d'autres cultures asiatiques.

Il y a un mouvement visant à redonner à la structure son nom original "L'Observatoire" pour décrire plus fidèlement son but initial. Le temps dira si les habitants, qui l'ont toujours connu par son appellation plus familière, adopteront et utiliseront son vrai nom à la place.