Герцог испытал ошеломляющий восторг, когда опробовал его на практике: оказалось, что оно опутывало не только верхние покои замка, но и подвалы оружейных, вещевых и продовольственных складов, а также тюремные камеры вместе с комнатами надзирателей и палачей. Однако радость Людовико Сфорца не была приятна Леонардо, так как наряду с ней он обрёл себе массу врагов, узнавших о том, что конструкцией и обустройством слуховых труб Дионисиева Уха занимался он. Даже те, кто раньше, казалось, до беспамятства были влюблены в него, стали его врагами, а сам Леонардо узнал о теневой жизни замка столько, что почувствовал себя опутанным змеиным клубком. Любовные интриги придворных, имевшие вид модного помешательства, переплетались с политическими. Герцог Людовико Сфорца, помимо супруги Беатриче д’Эсте, любовницы Чечилии Галлерани, – вышедшей к этому времени замуж за графа Бергамини, и взявшей его фамилию, – и множества мимолётных связей, завёл ещё одно любовное знакомство с девушкой знатного происхождения, но разорившегося рода. Её звали Лукреция Кривелли, ради которой он сделал её родного брата Матео Кривелли камерарием своего монетного двора. Он искусно уделял внимание всем, сочетая его с утончённым политическим коварством. Никто из женщин не мог ему противиться, потому что знали, что им грозит в случае их отказа. Если раньше поговорка «И стены имеют уши» была лишь условностью, намекавшей, чтобы собеседники не были излишне болтливы, то теперь она имела совершенно прямое значение. В стенах замка люди боялись говорить даже шёпотом, и то, что Людовико Сфорца не «докладывали стены», ему доносили его любовницы, их мужья и братья, считавшие себя обязанными это делать, так как герцог, наряду с отдыхом в постели с их жёнами и сёстрами, жаловал им весьма почётные должности при Дворе. Тех придворных, кому не нравилось поведение Людовико Сфорца, и они роптали на него, герцог отправлял в подземные казематы замка. Пострадал от него и его секретарь-летописец мессере Джорджо Мерула, рассказавший Леонардо о том, что Людовико не собирается отдавать престол племяннику Джан-Галеаццо и его супруге Изобелле Арагонской, а задумывает их отравить. Для этого герцог тайно заставил своих кубикулариев выкрасть у него из сада плоды тех деревьев, над которыми Леонардо проводил опыты с ядами. Это известие стало для него таким потрясением, что он не сразу от него оправился. И хоть он знал, что отравленные стволы деревьев не дают отравленных плодов, он считал себя причастным к замышляемому герцогом убийству.
На следующий день после их разговора Джорджо Мерула был отправлен герцогом в тюремное подземелье замка, а по Милану распространился слух, что Джан-Галеаццо тяжело заболел. За пределами замка на городских площадях и рынках слышался ропот о том, что его болезнь – это медленно действующий яд плодов из фруктового сада Леонардо. При Дворе не стало ни одного человека, который не жил бы в страхе. Ненависть придворных к Леонардо стала неистовой, как рвущийся из плавильной печи огненный жар. Изобелла Арагонская, жена Джан-Галеаццо, когда-то увлечённо бегавшая за ним со своей двоюродной сестрой Беатриче д’Эсте, теперь избегала с ним встреч и не позволяла ему встречаться с мужем. А Джан-Галеаццо между тем медленно умирал. Леонардо знал, что он не виноват и плоды с деревьев из его сада тут ни при чём, но расползавшиеся по замку и по городу слухи, что именно он виноват в начавшейся затяжной болезни законного наследника Престола, делали своё чёрное дело. Он обратился за помощью к Беатриче, с которой у него сохранились весьма дружеские отношения, но и она отнеслась к нему холодно и не помогла ему объясниться с Изобеллой, чтобы та поняла, что не он виновен в болезни её мужа. Эти две, ранее дружные девочки, ныне стали злейшими врагами, и он стал между ними. Беатриче д’Эсте была заинтересована в том, чтобы вина за отравление Джан-Галеаццо пала на Леонардо. В этом случае её супруг герцог Людовико Сфорца оставался незапятнанным и мог спокойно взойти на престол после смерти его племянника, о чём она мечтала и за что прощала все его любовные похождения и измены. Поняв, что она ему не поможет, Леонардо сделал вывод, что мечта стать Великой герцогиней Ломбардии затуманила рассудок Беатриче д’Эсте и прежняя искренняя девочка под воздействием мужа-тирана превратилась в настоящую хищницу-гарпию. Её противостояние с Изобеллой достигло такого апогея, что они открыто заговорили о войне.