Отец Федора Михайловича был врачом Мариинской для бедных больницы в Сущеве, в Москве. В той же местности отец мой, М. Т. Каченовский, имел свой дом, в котором и жила наша семья. Нашим домашним врачом был врач той же больницы Козьма Алексеевич Щировский, супруга которого Аграфена Степановна была очень близка с моею матерью. Отец мой, весь преданный своим ученым занятиям, имел очень мало семейных знакомств, и тем более мы ценили их. Чаще всего мать моя видалась с княгиней А. Ф. Шаликовой, а затем с Агр. Степ. Щировской.
Летом раза два в неделю мать водила меня с сестрой к Щировским… Едва успев войти в их квартиру, мы, дети, спешили в тенистый сад больницы и вмешивались в группы играющих детей местных медиков и служащих. Как теперь помню в числе их двух белокурых мальчиков; один из них был немного старше меня, другой — лет на пять. Для игр они выбирали себе более подходящих к ним по возрасту товарищей и становились их руководителями. Авторитет их между играющими был заметен и для меня, ребенка. Эти дети были Федор и Михаил Достоевские… Прошло года два, в течение которых я ближе сошелся с обоими братьями, которые мне и сообщили, что они уже учатся в пансионе.
Из опасения быть не точным, я не определяю годов этих детских воспоминаний, которые становятся точными лишь с 1834 года. В этот год я поступил в пансион Леонтия Карловича Чермака, пользовавшийся лучшею репутацией как по бдительному надзору за учащимися, так и по составу преподавателей. Достаточно сказать, что в числе их были Д. М. Перевощиков, А. М. Кубарев, К. М. Романовский, лучшие учителя того времени.
В первый же день поступления, когда я, оторванный от семьи, окруженный чужими для меня лицами и, как новичок, даже обижаемый ими, предавался порывам детского отчаяния, во-время рекреации послышался в среде резвившихся вокруг меня детей знакомый голос… Это был Федор Михайлович Достоевский, который, увидев меня, тотчас же подошел ко мне, прогнал шалунов-обидчиков и стал меня утешать, что ему скоро и удалось вполне. С тех пор он часто приходил ко мне в класс, руководя моими занятиями, а во время рекреаций облегчал занимательными рассказами тоску мою по родительском доме.
Он был ко мне очень приветлив и ласков.
В это время Федор Михайлович был вместе с братом уже в старших классах: это был серьезный, задумчивый мальчик, белокурый, с бледным лицом. Его мало занимали игры: во время рекреаций он не оставлял почти книг, проводя остальную часть свободного времени в разговорах со старшими воспитанниками пансиона — А. М. Ломовским, Ф. и Ал. Мильгаузенами, Д. и А. Шумахерами и П. Перевощиковым.
В 1835 году Достоевские оставили пансион и поступили в Инженерное училище в Петербурге, унося — по крайней мере Федор Михайлович — в себе теплое воспоминание о месте их первоначального образования.
Андрей Михайлович Достоевский:
Выше я упомянул о семейных чтениях, происходивших в гостиной. Чтения эти существовали, кажется, постоянно в кругу родителей. С тех пор как я начинаю себя помнить, они уже происходили.