В это время появляется ее второй портрет, выполненный в темных тонах, на ее пальцах два кольца одно с именем Альба, другое с именем Гойя. У ног на песке написано «Solo Goya». Эта надпись была закрашена, но рентгеновское облучение позволило исследователям прочитать ее. Эта деталь могла бы, очевидно, показывать, подобно большинству рисунков из так называемого Санлукарского альбома, что между ними установилась интимная связь. Однако Гассье придерживается иного мнения, потому что «нет ничего более неправдоподобного, чем романтическая легенда о страстном отношении Гойи к герцогине Альба». При этом он ссылается, прежде всего, на письмо к Сапатеру, единственное, где он упомянул герцогиню: «Ты должен мне помочь получше загримировать мой отказ герцогине Альба, которая посетила мою мастерскую для того, чтобы заказать свой портрет». Однако факт остается фактом, Гойя в 1812 году после смерти жены завещал портрет герцогини своему сыну Хавьеру и ничего не сохранил из того, что указывало на любовь к этой женщине. Вероятной причиной этого могла быть ревность, которая подтверждается рисунками, сделанными в Санлукаре, где ясно обозначены две фигуры, одна их них герцогиня, а другая — поклонник из офицерского корпуса. Его ревность подвергалась сомнению, но она подтверждается словами, написанными не неопубликованных листах из его Caprichos: «Ложная мечта и непостоянство».
Эта запись — несомненное свидетельство того, какую мучительную страсть он испытывал к герцогине Альба. Изображая символический полет бабочки на одном из листов, Гойя имел в виду герцогиню и то, как она с выражением высокомерного презрения упорхнула (Caprichos 61).
Конечно, если учесть их возраст, физическое состояние и сущность, то очень трудно поверить во взаимную любовь. Страстное чувство Гойи скорее всего не получало ответа со стороны этой женщины. Она вступала в противоречие с ним во всем: ее природой была непредсказуемость и непостоянство, а сострадание и чувственные наслаждения переплетались между собой. Однако без ответа с ее стороны страстные чувства Гойи привели бы его к новому отчаянному положению, а он опять испытывал радость жизни и был полон сил, чтобы выйти навстречу новому блистательному периоду в своей карьере. 4 октября 1795 года Гойя стал преемником Франсиско Байеру (который скончался в августе этого года) и был назначен на должность директора отделения живописи в академии. О том, насколько эффективным и окончательным было его восстановление в работе, доказывает то обстоятельство, что в начале 1796 года он принял на службу человека для смешивания красок. В апреле 1797 года, когда Гойя прибыл в Мадрид, любовная история с герцогиней осталась в прошлом. Пришло отрезвление и чувство разочарования, связанное непостоянством и неверностью этой женщины.
У него было два дела, которые избавили его от монотонной работы в мастерской по изготовлению портретов, а именно — фреска в мадридской церкви Сан-Антонио де ла Флорида и роспись дворца Мануэля Годоя. Они стали наивысшим достижением творчества Гойи, и этот год в жизни художника был самым плодотворным. Необычайная фреска вошла в историю живописи как удивительный шедевр, и Гойя, не испытывая забот, ощущая полную свободу, в творческом порыве выполнил ее за сто двадцать один день. И хотя этой фреске уже два столетия, она до сих пор воспринимается так, как тогда, когда она была изготовлена. Правда, духовенство пришло в некоторое замешательство, потому что Гойя придал ангелам слишком округлые, почти сладострастные формы, но все-таки критики сошлись на том, что мастер на куполе и тимпане церкви вдохновенно передал пламенную, полнокровную жизнь улиц Мадрида и создал изображение земной и небесной сути, заполнившее фреску «образами, которые невозможно описать словами». То, что он во время работы над фреской испытывал сильнейший творческий подъем, единодушно отмечали все современники.