Несмотря на доверие Петра, князь Долгоруков не разделял всех его реформаторских устремлений, и потому оказался в числе лиц, близких к царевичу Алексею. Долгорукова, поднявшего голос в защиту Алексея, лишили всех чинов и сослали в Соликамск. В армию он вернулся лишь по случаю коронации Екатерины I в 1724 году, причём в чине бригадира. Но уже в 1726 году был произведён в генерал-аншефы и назначен командующим войсками на Кавказе. Благодаря усилению Долгоруковых при Петре II Василий Владимирович вошёл в состав Верховного Тайного Совета и сделался генерал-фельдмаршалом. Однако вёл он себя крайне осторожно, не поддержал кондиции, предложенные князем Голицыным, и потому после воцарения Анны Иоанновны сохранил своё положение. Более того, он стал сенатором и президентом Военной коллегии. Но всё-таки старый вояка не мог спокойно взирать на опалу своих родственников. В разговорах он неоднократно неодобрительно отзывался об императрице. Эта неосторожность стоила ему свободы. По доносу генерал-поручика принца Гессен-Гомбургского в 1731 году Долгорукова приговорили к смертной казни, но заменили её заточением в Шлиссельбургской крепости. В 1737 году князя сослали в Ивангород, а уже в следующем году, когда раскрылось дело с фальшивым завещанием Петра II, навечно посадили в тюрьму Соловецкого монастыря. Вернулся князь только при Елизавете Петровне. Государыня возвратила ему фельдмаршальский чин и поставила во главе Военной коллегии. После этого Василий Владимирович прожил ещё несколько лет.
Его брат — Михаил Владимирович (1667 — 1750), один из первых сенаторов, в общих чертах повторил судьбу своего брата. Он тоже был сослан по делу царевича Алексея, потом вернулся, несколько лет губернаторствовал в Сибири, в 1729 году вошёл в состав Верховного Тайного Совета (действительный тайный советник), при Анне Иоанновне вынужденно отправился на житьё в одну из своих деревень, затем был сослан в Нарву, а в страшном для Долгоруковых 1739 году его приговорили к смертной казни. Поскольку никакого непосредственного участия в делах девятилетней давности он не принимал, казнь заменили ссылкой. Елизавета Петровна помиловала князя Михаила, но вскоре он предпочёл по старости выйти в отставку.
В екатерининскую эпоху взошла звезда талантливого полководца князя Василия Михайловича Долгорукова (1722 — 1782), сына Михаила Владимировича. С юных лет он пошёл служить в армию. Неоднократно отличался в сражениях русско-турецкой войны, но никакого продвижения по службе не получал. Наконец командующий русскими войсками фельдмаршал Б.-Х. Миних на свой страх и риск произвёл его за храбрость при штурме Перекопа в прапорщики. Более успешно развивалась карьера князя при императрице Елизавете. Он с самой лучшей стороны проявил себя на полях Семилетней войны, в том числе при Цорндорфе. А в день коронации Екатерины II получил чин генерал-аншефа. Триумфом князя стала русско-турецкая война 1768 — 1774 годов. Командующий 2-й армией, он действовал на крымском театре военных действий, и в 1771 году, преодолев отчаянное сопротивление противника, прорвался через Перекоп (уже знакомый ему по предыдущей войне с Турцией) и занял Крым. За эту победу и по случаю заключения Кючук-Кайнарджийского мира императрица наградила Василия Михайловича золотой шпагой с алмазами, орденом Святого Георгия I степени и почётной фамилией Крымский