В 1813 году в Алексеевке построили новый храм, посвященный святому Дмитрию Чудотворцу. На сегодняшний день церковь действующая и является памятником культуры города.
Каменный храм Святого Дмитрия, в народе его зовут Дмитриевским, был возведен в Николаевской слободе, которая с некоторых пор входит в черту Алексеевки.
В конце 19 века прихожан церкви насчитывалось больше тысячи человек, но, к сожалению, уже в 1930 году из здания церкви сделали склад, а вновь служить в ней начали только лишь во время войны. Сама церковь построена в классическом стиле.
В начале XX века настоятелем церкви является Дионисий Курбатов. Священник построил каменный дом из двух этажей для себя и своей семьи. Семья священника уехала из Алексеевки в 1919 году, спасаясь от репрессий, которым в то время подвергались все духовные лица. Но уже в 1930 году стало известно, что отец Дионисий погиб.
Церковь была отреставрирована в 1997 году, а обновленный храм сразу же был освящен, вокруг него построили новенькую кованную ограду.
Государство взяло под охрану любимый жителями храм и объявило его историческим и культурным памятником. До сих пор церковь действует, а настоятелем с 1994 года является отец Василий Джуган.
