В него входят 52-метровая колокольня, и пять корпусов: Восточный, с мрачной тюремной камерой; Южный — с церковью Неопалимой купины; Архимандритский — со Спасским собором, под спудом которого были похоронены владыка Фотий и А.А.Орлова-Чесменская; над Северным возвышается колокольня; а с востока к нему примыкает церковь и Крестовоздвиженский собор (1823).
Церковь в честь Воздвижения Честного и Животворящего Креста Господня находится на северо-восточном углу монастыря. Каменный собор построен в 1823 году при архимандрите Фотии на месте сгоревшей в 1810 году предыдущей деревянной постройки.
Имеет 5 глав синего цвета, на которых размещены 208 вырезных восьмиконечных звёзд. После закрытия монастыря большевиками храм со временем утратил настенную роспись, и в настоящее время не имеет таковой. Внутренние стены окрашены в белый цвет.
В советские годы в соборе располагался музей и картинная галерея. Летом 2004 года был заново выстроен северо-западный купол, а также заменена металлическая обшивка остальных четырёх куполов и всех пяти крестов. Собор имеет систему отопления и используется для регулярных богослужений как в летнее, так и в зимнее время.