Георгивская церковь стоит на высоком месте между двух оврагов, рядом с восточным участком крепостной стены. Её хорошо видно со смотровой площадки у Успенского собора. Церковь построена в 1784 году, колокольня пристроена в 1826 году.