В архитектурный комплекс Соборной горы входит Богоявленский теплый собор. Он был воздвигнут стараниями епископа Парфения в 1781-1787 гг. по проекту губернского архитектора М. Слепнёва. Основные средства выделила епархия, часть собрали жители города, а 4500 рублей пожаловала императрица Екатерина II, на деньги которой Собор достроили и в том же году освятили.