Это он говорил для того, чтоб от него из кельи малого не взяли, а он малого очень любит, хочет душу свою за него выронить. Я малого расспрашивал: что с тобою старец о каких-нибудь делах разговаривал ли или про кого-нибудь рассуждает ли? И друзей своих кого по имени поминает ли? Малый отвечал: «Отнюдь со мною старец ничего не говорит». Если малому вперед жить в келье у твоего государева изменника, то нам от него ничего не слыхать. А малый с твоим государевым изменником душа в душу. Да твой же государев изменник мне про твоих государевых бояр в разговоре говорил: «Бояре мне великие недруги. Они искали голов наших, а иные научали на нас говорить людей наших, я сам видал это не однажды». Да он же про твоих бояр про всех говорил: «Не станет их ни с какое дело, нет у них разумного. Один у них разумен Богдан Вельский, к посольским и ко всяким делам очень досуж». Велел я сыну боярскому Болтину расспрашивать малого, который живет в келье у твоего государева изменника, и малый сказывал: «Со мною ничего не разговаривает. Только когда жену вспоминает и детей, то говорит: „Малые мои детки! Маленьки бедные остались. Кому их кормить и поить? Так ли им будет теперь, как им при мне было? А жена моя бедная! Жива ли уже? Чай она туда завезена, куда и слух никакой не зайдет! Мне уж что надобно? Беда на меня жена да дети: как их вспомнишь, так точно рогатиной в сердце толкает. Много они мне мешают: дай господи слышать, чтобы их ранее бог прибрал, я бы тому обрадовался. И жена, чай, тому рада, чтоб им бог дал смерть, а мне бы уже не мешали, я бы стал промышлять одною своею душою. А братья уже все, дал бог, на своих ногах“».
На это донесение царь Борис отвечал приставу: «Ты б старцу Филарету платье давал из монастырской казны и покой всякий к нему держал, чтоб ему нужды ни в чем не было. Если он захочет стоять на крылосе, то позволь, только б с ним никто из тутошних и прихожих людей ни о чем не разговаривал. Малому у него в келье быть не вели, вели с ним жить в келье старцу, в котором бы воровства никакого не чаять. А которые люди станут в монастырь приходить молиться, прохожие или тутошные крестьяне и вкладчики, то вели их пускать, только смотри накрепко, чтобы к старцу Филарету к келье никто не подходил, с ним не говорил и письма не подносил и с ним не сослался».
В итоге из кельи Филарета «малого» вытурили, а вместо него поселили старца Иринарха, чтобы тот приглядывал за ссыльным. Надо ли говорить, что новый сосед-старец не понравился Филарету, и, видимо, от некоторых утех с «малым» пришлось отказаться. Тем не менее, вел себя Филарет тихо и богобоязненно.
Но вот до Антониево-Сийского монастыря дошли слухи о походе Лжедмитрия на Москву, и смиренный инок Филарет буквально начинает скакать от радости.
В начале 1605 г. пристав Воейков шлет несколько доносов в Москву о бесчинствах Филарета, и жалобы на игумена монастыря Иону, который смотрит на них сквозь пальцы.