На Сусанинской площади находится здание Гауптвахты — редкий образец гарнизонной архитектуры в стиле ампир. Построенное в 1823-1826 годах по проекту губернского архитектора Петра Фурсова, оно изначально предназначалось для размещения главного караула и содержания арестованных военнослужащих.
Здание воплощает лучшие традиции русского ампира: шестиколонный портик, лепные композиции с воинскими доспехами, изящная ограда с аутентичными фонарями.
Сегодня в его стенах размещается военно-исторический музей Костромского музея-заповедника с уникальной коллекцией подлинного и реконструированного оружия, обмундирования, наград и архивных материалов о подвигах костромичей.
Этот музей - тот самый случай, когда архитектурный памятник и его содержание равноценны по значимости. После посещения стоит осмотреть Пожарную каланчу , посетить старейшие в России торговые ряды и пройтись до набережной реки Волги.