Невозможность для братьев Наполеона действовать самостоятельно и их «обязанность подчиняться приказам министров»
и генералов нередко оборачивались против интересов империи. На острове Святой Елены свергнутый император признавался, что «побежденные народы становятся подданными победителя лишь при слиянии политики и жесткого управления, что должно подкрепляться силами армии. Всего этого в Испании не было». Однако сам Наполеон помешал королю Жозефу применить по отношению к испанцам стратегию «покорения сердец и умов». 1 февраля 1810 года у Жозефа еще оставалась надежда завоевать симпатии испанского народа, так как жители Севильи его приветствовали очень тепло. Однако неделю спустя Наполеон издал декрет, согласно которому северные провинции отдавались в подчинение военным властям. Жозефа такое распоряжение рассердило, и 9 октября 1810 года он писал своей жене, которая уехала в Париж ходатайствовать за мужа перед его братом: «После злополучного декрета от 8 февраля все в этой стране изменилось. Теперь общественное мнение против нас. Я думаю, что пока еще возможно исправить причиненное зло, если сделать то, что я предлагал императору в своем письме. Но малейшее изменение в моем плане сделает успех в этом деле невозможным, и я за него уже не возьмусь. Передай это императору, и пусть он знает, что получит куда больший, чем я, выигрыш в славе и ответственности, которые станут его вкладом в будущее». В Париже Жюли растерялась от приема, оказанного ей Наполеоном. В первые две встречи она получила только пространные и смутные ответы на свои просьбы, а во время третьего разговора император и вовсе запретил ей упоминать об Испании. В 1811 году стало ясно, что оккупационная политика Наполеона потерпела крах. Жозеф приехал в Париж в надежде убедить брата изменить политику в отношении Испании и дать ему, Жозефу, свободу в действиях. Но император мечтал только об одном: сделать Каталонию французским департаментом. Когда Жозеф вернулся в Испанию, он даже не успел отречься от занимаемого им престола. В июле 1812 года французские войска были разгромлены под Арапилами, и это поражение открыло дорогу на Мадрид английским войскам под командованием Веллингтона.Если всемогущество Наполеона обмануло надежды его семьи, то и Наполеон в свою очередь страдал от эгоизма собственных родственников. Например, его сестра Каролина, которая получила титул королевы Неаполитанской, вела непрерывные интриги, стараясь сделать своего мужа Мюрата преемником Наполеона в случае, если императору, по какой-либо причине, придется исчезнуть. Император был поражен карьеризмом сестры, в которой обнаружил безудержный макиавеллизм. Талейран, на которого Каролина произвела сильное впечатление, говорил о ней так: «На плечах этой хорошенькой женщины находится голова Кромвеля». Циничная и умевшая подчинять других своей воле, Каролина, однако, умела быть осторожной в советах, которые она давала своему мужу: «Вся Европа находится под игом Франции. […] Над тобой еще меньше всех издеваются. […] Тебе нужно немного успокоить свои мысли и ждать момента, когда мы будем более хладнокровными и независимыми». В 1814 году, когда Мюрат подписал соглашение с Австрией, Наполеон негодовал: «Мюрат! Мюрат! Мой зять и предательство… […] Это жена стала причиной его измены».
В конце концов Каролина рассорилась с семьей и умерла от душевной болезни. Уже будучи в изгнании, Наполеон отзывался о ней с некоторым раздражением, как о «незначительной женщине».