Onde outrora estava uma antiga fortaleza, foi terminado em 1856 o monumento a D. Pedro IV, esta pirâmide quadrangular em pedra, vulgarmente conhecida como a Memória, verdadeiro ex-líbris da cidade.

Deste admirável e sobranceiro Miradouro da Memória, que tende a concentrar o olhar na baixa da cidade e no seu jardim público, tem-se no entanto uma panorâmica alargada sobre esta cidade Património da Humanidade. Entre os edifícios classificados, agarrados às suas típicas varandas, e as ruas de traços geométricos e calçadas paralelepipédicas, destacam-se a Sé Catedral dos Açores, a Baía de Angra e os Castelos de São João Baptista e de São Sebastião.