При правлении Александра II, в городе на Ниве появилось католическое кладбище, которое не могло состоять только из надгробных плит. Этот вопрос был решен с помощью архитектора Бенуа, разработавшего план часовни рядом с кладбищем. Так была возведена церковь, которую далее советская власть использовала для своих целей, а именно, как хранилище картофеля. В настоящее время, церковь снова принадлежит католикам и там проводятся службы.