По всей видимости, последовавшие за 1881-м годы дались либерально настроенному чиновнику чрезвычайно тяжело. В сфере образования особенно отчетливо ощущался взятый властями курс на реакцию. Программа средней школы стала более традиционной; по возможности были исключены науки, способствующие зарождению вольнодумства среди студенчества. Высказывалось сомнение относительно желательности всеобщего начального образования. Министр народного просвещения открыто заявил о непозволительной глупости и даже вреде, нанесенном в результате обучения «детям кухарок» (не требуется большого ума, чтобы понять, что отнюдь не «дети кухарок» были в авангарде революционного движения). Теперь в образовании основной упор делался на нерковно-приходские школы; народным школам по большей части не уделялось никакого внимания. Последние четыре года жизни Ильи Николаевича прошли в неустанной борьбе, в атмосфере, не оставляющей надежд на выполнение обещаний, данных в 70-х годах, он, как говорится, «шел против течения». Ко всему прочему, его не оставляло беспокойство в отношении старшего сына. С тех пор как в 1883 году Александр стал заниматься наукой в Санкт-Петербургском университете, его взгляды, круг его общения являлись источником все увеличивающегося беспокойства Ильи Николаевича. Перед смертью он просил Анну уговорить Александра позаботиться о себе, «исключительно ради нас». В январе 1886 года Илья Николаевич скоропостижно скончался от кровоизлияния в мозг.
На одной из сохранившихся фотографий изображен Илья Николаевич с женой и детьми. В центре возвышается монолитная фигура главы семейства, рядом два старших сына в форме гимназистов. Борода и гладкий череп еще больше подчеркивают строгое выражение лица Ильи Николаевича. На другой фотографии, где директор народных училищ сидит в окружении подчиненных – пяти школьных инспекторов, он также серьезен и неулыбчив.
В описании жизни семьи Ульяновых обычно используются приторно-слащавые тона. Родители любили, но не баловали детей. Дети, в свою очередь, отвечали им взаимностью, и, кроме того, каждый из детей испытывал особую привязанность к ближайшему по возрасту брату или сестре, не обделяя при этом остальных. Не добавить ли еще, что Ульяновы с раннего возраста проявляли самостоятельность и помогали по дому? В попытке представить семью Ульяновых примером для подражания молодежи советские авторы утверждали, что в этой семье не было места конфликтам, тревогам и разочарованиям,