Кроме того, по меньшей мере, легкомысленное и двусмысленное поведение Казановы тоже было ему не на пользу. Стоит ли удивляться, что одиночество и скука быстро возродили его потребность в женщине? Возможно, в замке заметили, что он дает волю рукам с кое-какими субретками, которые грубо поставили его на место, а на улицах Дукса он без большого успеха прижимался к юным поселянкам. Случилось так, что у консьержа замка была дочь, Анна Доротея Клеер, если не красавица, то по меньшей мере приятная и любезная девушка. Ей было девятнадцать лет, когда Казанова приехал в Дукс. Через несколько месяцев после того, как он поселился в замке, Доротея оказалась беременна и упорно отказывалась назвать имя отца будущего ребенка. Все заподозрили Казанову. Клевета? В одном письме к Ламбергу от 19 марта 1787 года Казанова допускает, как будто не придавая этому значения, что Доротея ежедневно приходила к нему в комнату. Он рассказывает о своем предложении «совету чести», состоявшему из отца Доротеи, местного кюре и двух свидетелей: если она назовет его отцом будущего ребенка, он примет на себя отцовство. Тогда Доротея голосом, прерываемым рыданиями, решилась открыть имя обольстителя – некоего Франца Ксаверия Шетнера, художника из Дукса, который во всем повинился и женился на ней в январе 1787 года. Слишком уж все хорошо! Немного напоминает постановку. Мы имеем полное право скептически отнестись к развязке этой истории, тем более что Казанова как будто оказывал весьма дорогостоящие знаки внимания Доротее и ее родным. Франческа Бускини раздраженно и разочарованно пеняла ему в одном письме на то, что он больше не посылает ей ни гроша, потому что осыпает Доротею и всю ее семью из шести человек знаками внимания, на которые уходят все его деньги. Надо полагать, Казанова не горел желанием вступить в брак или же семейство из Дукса не считало его подходящим мужем из-за возраста или национальности, так что пришлось подыскать возможного отца, у которого была своя корысть: кое-какие деньги взамен утраченной девственности. Поведение Казановы, по меньшей мере, двусмысленно, поскольку, объявив себя готовым возместить ущерб в любой форме, он не признал себя виновным в беременности Доротеи. С уверенностью ничего утверждать нельзя, но можно предположить, что Казанова избавился от ненужного отцовства за несколько десятков флоринов. Тем не менее, вся эта история не способствовала его популярности в поселке, и он получил репутацию иностранца, соблазняющего и бросающего местных девушек, купив им мужа.
Положение сильно ухудшилось, когда в 1787 году граф нанял дворецким некоего Георга Фельткиршнера, старого обер-лейтенанта австрийской армии, вышедшего в отставку после Семилетней войны. Движимый, наверное, глупой агрессивностью солдата по отношению к интеллигенту, этот шестидесятилетний старик организовал систематическую травлю несчастного Казановы. Он был тем более въедливым и злопамятным, что прекрасно знал: одно письмо его врага в военное министерство немедленно лишит его двухсот флоринов пенсии по инвалидности: на самом деле, он и не имел на нее права, поскольку получал жалованье. Хотя он не был управляющим самим поместьем, он забрал власть над всеми службами и всей обслугой замка. Требуя от них рабской покорности, он без труда настроил их против Казановы, который и без того всячески этому способствовал!
В первое время, несмотря на явную взаимную неприязнь, дело не сдвинулось с мертвой точки и война объявлена не была. К несчастью, Казанова, имевший привычку есть за одним столом с графом, когда тот был в замке, или заказывать кухарке вкусные блюда, которые подавали ему в комнату, внезапно лишился средств на потворство своему чревоугодию. Издание «Искамерона» за счет автора обернулось сущей катастрофой. Издательский провал обошелся Казанове не менее чем в две тысячи флоринов. Он оказался сплошь в долгах и был вынужден уволить свою дорогую кухарку. С утонченными ужинами у камина в том 1788 году было покончено! По милости графа фон Вальдштейна ему оставалось только одно: есть в людской, делить стол со слугами и терпеть грубое общество этих увальней, потешавшихся над его разорением. Он, еще вчера важничавший и капризничавший, теперь вынужден ежедневно обедать и ужинать с другими слугами. Несомненно, Казанова, стыдясь того, что скатился на самый низ общественной лестницы, делался все более невыносимым склочником в ответ на нахальство и сарказм этих варваров.