Полк Алексей Григорьевич оставил 14 апреля 1785 года в звании секунд-майора. Оное получил к отставке, «на пропитание». В Полутоне жил уже незатейливой холостяцкой жизнью брат Николай. Алексей Григорьевич поселился в двадцати верстах от него, в Кареве. Ему шел двадцать восьмой год, жизнь впереди была еще долгая, и семьей обзаводиться он не спешил. Усадьба была невелика: господский дом, людская, несколько хозяйственных построек. Вокруг простирались пашни. Доход от своих земель Алексей Григорьевич имел небольшой. Рыбы в Жижецком озере водилось предостаточно, однако почвы близ него были илистые: ни хорошего пастбища, ни большого урожая. Впрочем, к хозяйственной жизни Алексей Григорьевич не питал никакого интереса, при крайней надобности предпочитая продать часть земель, нежели оказать усердие в делах. Он сдружился с соседями, особенно выделяя Чириковых. Но большую часть времени проводил среди дворовых. Любил ли отставной секунд-майор просиживать дни на берегу с удой, волнуясь, когда дернется поплавок? Или кровь заходилась от скачки да отчаянного лая гончих во время охоты? Или всему предпочитал пасьянсы, покуривая и попивая, тем и коротая холостяцкие дни? Характер у него был крутенек. Но о том, каково было переносить его ближайшему окружению, история умалчивает. Из дворовых людей Алексей Григорьевич выделял Семена Емельянова, в прошлом — своего денщика. Семен-то первым и нарушил холостяцкую жизнь — взял себе в жены молоденькую крестьянку Прасковью, которая годилась ему в дочери. Следом переженились как-то и другие обитатели дома. Размеренный ход жизни менялся. Барин один оставался холостяком. Впрочем, и у него появилась своя подруга.
Ирина, Егорова дочь, была крестьянкой из деревеньки Юрьево. Здоровья она была, по всей видимости, крепкого, возможно унаследовав его от деда и прадеда, проживших более века. Жила в многодетной семье, была среди мальчишек единственной сестрой. Ее, семнадцати лет, вместе с младшим из братьев, и взял к себе в Карево барин дворовыми людьми. От барина и прижила Ариша своего первенца, Петра.
Алексей Григорьевич не собирался венчаться со своей холопкой. С незаконнорожденным сыном выдал ее замуж за своего дворового, Льва Парфенова. Скоро у Ирины родился и второй, «крестьянский» сын, Авраамий. Но супруг ее вскорости приказал долго жить, и Алексей Григорьевич — как-то незаметно — снова сошелся со своею крепостной, которая родила ему еще дочерей: Олимпиаду и Надежду. К пятидесяти годам барин был все также холост. А тут, в 1807-м, скончался брат его, Николай. Детей у покойного не было, Алексей Григорьевич стал обладателем и Полутона. Туда, в родовое гнездо Мусоргских, он отправился доживать свой век вместе с Ириной и детьми. К шестидесяти барин, похоже, ощутил, что непутевое его житье не принесет более никаких особых перемен. Жизнь прошла, а у него — ни нормальной семьи, ни полноправных наследников. Тогда-то, в 1818-м, он решится, наконец, обвенчаться с «торопецкой мещанкой» Ириной Георгиевной. Через два года прошение Алексея Григорьевича об уравнении супруги в правах и усыновлении собственных детей подпишет император Александр I.
Скончался дед будущего композитора в 1826 году, в возрасте 68 лет. Детям своим он смог-таки дать неплохое образование. И все же — носить с ранних лет фамилию «Богданов», которую дают внебрачным детям, расти — и узнавать всю странность своего положения: ни барин, ни крепостной… Впрочем, это — лишь смутные догадки непростой судьбы Петра Алексеевича.
Служить он будет в Сенате. Какие учебные заведения могли позволить ему занять там даже столь небольшую должность, как сенатский регистратор? Петербургская гимназия? Служебные связи отца?
В 1814 году, шестнадцатилетним, Петр Алексеевич начнет свою службу. Через шесть лет, в 1820-м, он уже губернский секретарь. Не потому ль, что в этом году 9 мая император Александр I подписал прошение отца, Алексея Григорьевича, об «узаконении прижитых до брака детей»? Впрочем, и выписка личного дела Петра Алексеевича говорит о редкой его исполнительности: «В продолжении служения своего вел себя хорошо, отправляя должность свою с особым прилежанием и успехом, а в штрафах и под судом не бывал». Значит, был человеком терпеливым и добросовестным.
Через два года он покинет столицу, вернется в родные места. Служить еще будет, но поблизости, в Торопце, коллежским секретарем. По смерти родителя своего, Алексея Григорьевича, еще сравнительно молодым человеком примет наследство и станет полноправным помещиком.