Злые строки Неелова — одно из предельных выражений негодования в адрес Петра Яковлевича. «Что же касается до моего положения, — пишет он брату, — то оно теперь состоит в том, что я должен довольствоваться одною прогулкою в день и видеть у себя ежедневно господ медиков, ex officio меня навещающих. Один из них, пьяный частный штаб-лекарь, долго ругался надо мною самым наглым образом, но теперь прекратил свои пoceщения, вероятно по предписанию начальства». Жалоба Чаадаева обер-полицмейстеру с угрозой писать выше Бенкендорфу возымела быстрое действие, и «умалишенного» на Басманной вскоре стал посещать давний и некогда лечивший его приятель, доктор Гульковский. Визиты врачей носили формальный, но регулярный характер, и об их исполнении ежемесячно докладывал в Петербург московский военный генерал-губернатор.
Среди слухов, особенно усугублявших подавленное состояние Петра Яковлевича, выделялись двусмысленные разговоры о «даме» и ее взаимоотношениях с автором философического письма. Они вскоре приняли опять-таки «сумасшедший» оборот, когда 17 декабря московское губернское правление освидетельствовало умственные способности Екатерины Дмитриевны Пановой по настоятельной просьбе мужа, пожелавшего поместить свою тридцатидвухлетнюю жену в лечебное заведение Саблера. Когда до «басманного философа» дошли отклики об ответах Пановой на предложенные ей вопросы, он через пристава испросил разрешение явиться к московскому обер-полицмейстеру Цынскому, которому сделал письменно следующее заявление: «Коллежская секретарша Панова во время свидетельствования ее губернским правлением в умственных способностях, рассказывала в присутствии, что она республиканка и что во время войны в 1831 году она молилась за поляков, и тому подобные вздоры говорила»; а потому он опасается, чтобы «по прежним его с Пановой связям правительство не заключило, что он причиною внушения ей подобного рода мыслей, так как философические письма, напечатанные в Телескопе, были писаны к ней».
Не удовлетворившись таким уведомлением и не успокоив тревоги за ухудшение своего «сумасшедшего» положения, Чаадаев на следующий же день отправил Цынскому послание с более пространными объяснениями. Он подробно рассказал историю знакомства с Екатериной Дмитриевной и ее мужем, а также еще раз убеждал обер-полицмейстера: «Что касается до того, что эта несчастная женщина теперь, в сумасшествии, говорит, например, что она республиканка, что она молилась за поляков и прочий вздор, то я уверен, что если спросить ее, говорил ли я с ней когда-либо про что-нибудь подобное, то она, несмотря на свое жалкое положение, несмотря на то, что почитает себя бессмертною и в припадках бьет людей, конечно, скажет, что нет. Сверх того и муж ее тоже может подтвердить… Впрочем, я убежден, что мудрое правительство не обратит никакого внимания на слова безумной женщины, тем более что имеет в руках мои бумаги, из которых можно ясно видеть, сколь мало я разделяю мнения ныне бредствующих умствователей…»
Когда-то Петр Яковлевич советовал «безумной женщине» облечься в одежду смирения и умиротворять взволнованный дух всецелой покорностью религиозному чувству. Но его советы, как оказалось, не помогли ей, как не помогала преображению внутреннего мира самого Чаадаева его антииндивидуалистическая теория «высшего синтеза», входившая в очередное противоречие с эгоиста ческими началами конкретного поведения. Попав в затруднительное положение, он не только открещивался от реальной помощи своей бывшей «ученице», но и сжигал мосты возможного общения с ней.
Екатерину Дмитриевну поместили на время в сумасшедший дом. Следы дальнейшего ее жизненного пути теряются. Но кое-что известно из последних, не менее драматичных, лет ее жизни, о которых позднее вспоминал внук Александра Улыбышева Н. Вильде. Он рассказывал, что, проводя лето в нижегородском родовом имении умершего деда, с любопытством и страхом проходил мимо ветхой избы, где жила старая безногая женщина, которую бабушка презрительно и насмешливо называла «философкой», а то и просто сумасшедшей. «Философка» (а ею оказалась Екатерина Дмитриевна Панова) много лет находилась в разладе с братом Александром, смертельно враждовала с его женой, а вот теперь приехала к ней в простой телеге, без копейки денег, имея при себе лишь костыли, и чуть ли не на коленях умоляла о помощи и пристанище. Судя по всему, она недолго прожила в старом домике, куда ей носили обед с барского, стола. «Где она умерла? — вопрошает Вильде. — В больнице для умалишенных или в каком-нибудь нищем доме, или из милости у чужих людей? Где ее могила?»