Из святынь Ильзенбергской церкви большое внимание обращает на себя икона Божией Матери, на которой учинена такая надпись: „1733 года Василий Сафонович Кульнев благословил сына своего Петра на 10-м году его рождения. В царствование Анны Ивановны в селе Болдыреве“. Направо от входа покоится прах строителя храма Михаила Петровича Кульнева. Над памятником го висит небольшой образ св. архистратига Михаила в серебровызолоченной ризе. Памятник сделан из железа и бронзы, обнесён решеткой. На листовом железе, в рамке, имеется следующая надпись: „Владелец им. Ильзенберга, строитель храма сего Михаил Петрович Кульнев, умер 1841 г., августа 22 дня, на 65 году от роду“. По левую сторону от входа, почти против памятника строителю храма, покоится прах внука его Николая Константиновича Кульнева. Над памятником висит небольшой образ Святого Николая в серебро-вызолоченной ризе. Надпись на этом памятнике следующая: „Младенец Николай Кульнев, родился 1840 г., августа 14 дня, скончался 1841 г., сентября 22 дня“.
Храм с южной стороны. В выступе – могила Я.П. Кульнева.
Интерьер Ильзенбергского храма.
По ту же сторону от входа, немного ближе к клиросу, покоится прах супруги строителя храма Надежды Кульневой. Над её памятником, сделанным из дерева и имеющим вид как бы саркофага, висит изображение св. мученицы Надежды. На лицевой стороне этого памятника имеется такая надпись: „Надежда-Элеонора Кульнева, супруга Михаила Петровича, урождённая Розеншильд-Паулин, родилась 1780 г. мая 25 дня, преставилась 1837 г. 14 апреля“. С правой стороны у клироса, как раз напротив памятника Надежды Кульневой, покоится прах незабвенного героя двенадцатого года Якова Петровича Кульнева, со славою павшего на полях Клястицких, неподалёку от Полоцка. Памятник окружён чугунной решеткой, на углах которой позолоченные орлы. В головах фамильный герб; в ногах портрет генерал-майора Кульнева, сделанный на фарфоровой доске и вправленный в бронзовую ажурной работы раму, у которой крышка откидывается сверху вниз. На ней вырезана крупными позолоченными буквами надпись: „От Клястинцев-Гродненцев и Почитателей Незабвенному Герою. 1892 года“.
Над памятником висит образ Спасителя, перед которым вывешена новая, серебряная лампада с надписью: „Ильзенберг 27 ноября 1892 года», то есть место, число, месяц и год освящения этого памятника“».
Вскоре храм приобрёл надлежащий вид. В 1912 году, к 100-летию победы России в Отечественной войне 1812 года, храм был полностью отреставрирован. Средства на его реставрацию были выделены по личному указанию Николая II. Юбилейные торжества в Илзенберге прошли тогда 20 июля по старому стилю, в день памяти пророка Божия Илии и в день Клястицкой битвы, в которой погиб генерал Яков Петрович Кульнев.
В торжествах принимали участие представители полков, в которых служил Я.П. Кульнев и его прямые потомки. На могилу героя были возложены тогда серебряные венки, ныне не сохранившиеся. Некоторое представление о тех венках можно получить глядя на чудом сохранившееся серебряное перо из венка, представленное в экспозиции краеведческого музея Лудзы, расположенного в доме, где родился Яков Петрович Кульнев.
Последовавшие за тем годы Первой мировой войны и революции вовсе не способствовали улучшению положения строения. В 1926 году газета «Слово» поместила статью В. Остужева «Забытое Кульнево», в которой автор писал: «…При входе в церковь на стене мраморная доска: „Под сводами храма сего покоится прах незабвенного героя Отечественной войны 1812 года, генерал-майора Я.П. Кульнева, со славою павшего в бою при Клястицах 20 июля 1812 года. По велению Николая I в 1830 году поставлен в Сивошине, на месте его геройской кончины, а в 1832 году прах его перенесен оттуда на место настоящего упокоения“…
В церкви полутемно. Направо, в глубине, большая каменная плита. В углу модель ядра, по стене четыре венка с полуистлевшими лентами – один серебряный, три металлических:
„Генерал-майору Я.П. Кульневу – внуки и правнуки“;
„Генерал-майору Я.П. Кульневу, славному герою и незабвенному командиру лейб-эскадрона – сумские гусары“;
„Незабвенному шефу от клястинцев“;
„Славному герою-однокашнику от 1-го кадетского корпуса“. Три четверти своей недолгой жизни провёл Кульнев в героических боях. Его образ овеян дымом сражений и шумом славных знамен… <…>
Долго бродил я по запущенному кладбищу, с полей тянулся густой октябрьский туман. Изредка моросил мелкий дождь…
Могила Я.П. Кульнева.
Могила Я.П. Кульнева.
Говорил я со священником: ни одна русская школа до сих пор не привела сюда своих учеников, в дни русской культуры никто не вспомнил Кульнево. В последний раз Кульнево видело гостей в 1912 году, в столетний юбилей Отечественной войны».