В 1863 году Илья Николаевич обратился к своему бывшему учителю Астраханской гимназии Тимофееву, который к тому времени был директором училищ в Нижнем Новгороде, с просьбой помочь перебраться в Нижний Новгород и устроиться работать в губернской мужской гимназии. В том же году Мария Бланк решила экстерном сдать экзамены на звание учительницы начальных школ. Илья Николаевич помогал во время подготовки. Экзамены Мария сдала успешно. Сохранилось свидетельство, выданное дирекцией самарских училищ. В нем говорится: «Дано сие дочери Надворного Советника девице Марье Бланк в том, что вследствие поданного ею прошения о желании получить право на первоначальное обучение чтению и письму по Русски, Немецки и по Французски, она была допущена к испытанию в Самарской Гимназии и оказала в Законе Божием, Русском языке, Арифметике, Немецком и Французском языке вполне удовлетворительные сведения. А потому ей, Бланк, и дано право на преподавание вышеупомянутых предметов...». Из Самары Маша отправилась в Кокушкино. В метрической книге по Лаишевскому уезду Казанской губернии за август 1863 г. содержится запись о том, что «25 августа старший учитель Нижегородской гимназии Илья Николаевич Ульянов, 32 лет, православного вероисповедания и дочь надворного советника Александра Дмитриевича г-на Бланка Мария Алек¬сандровна Бланк, 28 лет, православного вероисповедания венчались первым браком». Но «медовый месяц» оказался слишком коротким. 7 сентября там же, в Кокуш¬кино, скончалась крестная мать и воспитательница Марии Александровны Екатерина Ивановна фон Эссен. А через несколько дней молодые уже поднимались пароходом по Волге в Нижний Новгород.
В 1871 г. умерла мать Ильи Николаевича. В Астраханском государственном архиве была обнаружена метрическая книга астраханской Гостино-Николаевской церкви, в ней имеется такая запись: «Вдова, астраханская мещанка Анна Алексеевна Ульянова. Дата смерти — 26 октября 1871 года. Возраст — 83 года. Причина смерти — от древности». Запись подписали протоиерей Николай Ливанов и дьякон Михаил Рувимов. На ее могильном камне высечены слова: «Анна Алексеевна Ульянова скончалась 28 октября 1871 года, от роду 87 лет».
Через 6 лет, в 1877 г., умерла сестра Ильи Николаевича — Мария Николаевна Горшкова. А еще через год скончался брат Ильи Николаевича, которому он многим был обязан. Василий долго болел, носил черную ленту, повязанную на голове. Говорил, чтобы не надуло уши. В записи церкви сообщается: «Астраханский мещанин Василий Николаевич Ульянов. Дата смерти — 12 апреля 1878 года, погребения — 14 апреля 1878 года. Возраст — 55 лет. Умер от чахотки». Василий Ульянов был похоронен на астраханском Духосошественском кладбище. Заведующий Астраханским городским архивным бюро П.И. Усачев писал в своих заметках: «Когда Василий Николаевич умер, то фирма Сапожниковых на склепе Ульяновых соорудила памятник. Памятник этот, хотя и сохранился, но весь разбит». На могильном камне еще видны буквы: «Здесь покоится прах астраханского мещанина Василии Николаевича Ульянова, скончавшегося 12 апреля в 4 часа пополудни 1878 года. Жития ему было 60 лет». Данные о возрасте Анны Алексеевны и Василия Николаевича Ульянова в метрической книге и на памятнике расходятся. Следуя выпискам из ревизионных сказок о рождении Василия и свадьбы Анны Алексеевны с Николаем Никитичем, принимаем за достоверные надписи на памятниках. (1788 – 1871 для Анны Алексеевны и 1819 - 1878 для Василия Николаевича). Чем были вызваны такие расхождения, сказать трудно.
Анна Ильинична Ульянова-Елизарова писала в 1926 году: «Василий Николаевич умер в 1878 году. На астраханском кладбища до сих пор сохранился памятник, сооружённый на могиле сослуживцами, среди которых он оставил по себе добрую память. Мария Николаевна умерла раньше, и из родных отца я помню только Федосью Николаевну, младшую его сестру, добрую женщину, небольшого роста, с черным платком на голове, которая приезжала как-то к нам в Симбирск и которую отец, а после смерти мать, поддерживали, посылая деньги».
Когда Василий Николаевич умер, его сестра Феодосия отправила телеграмму к младшему брату в Симбирск.: «Братец умер, домом я владеть не могу, если можете приезжайте, продайте его, а мы разделим наследство пополам». Илья Николаевич ответил: «Никакого дома не надо, сестра, а вы можете его продать и живите, кормитесь на эти деньги». Дом Ульяновых был куплен купцом первой гильдии Александром Антоновичем Фокиным в 1881 г. Он заплати маклерских 25 рублей и составил купчую крепость на 200 руб. Дом и все подворье находились в ветхом состоянии. Купец его отремонтировал, а затем продал Смирнову, подворье гостиницы которого вплотную примыкало к дому Ульяновых.