О сокровенной жизни его внутреннего человека мы знали мало. Но не могли не чувствовать, что за внешним его чудачеством и юродством кроется самоотверженный подвиг, за неназойливым ворчанием — любовь к нам, как к детям немощным и неискусным, за видимой общительностью — великая тишина и тайна созерцания невидимого мира… …Это было в конце 1920-х годов, летом. Мы с инокиней Мариамной ходили по горам. Пришли на Горельник в келью к Виктору. Неподалеку под горой была яма, в которой он молился. Был поздний вечер… Не помню зачем, я вышла из кельи и пошла в сторону ямы. И вдруг вижу — Виктор стоит на коленях в воздухе, примерно в метре от земли и еще в 1,5 м от дна ямы и молится с воздетыми к небу руками. Я была потрясена, мне стало страшно не потому, что он стоял на воздухе — я читала жития святых и знала о такой молитве — а потому, что своим приходом мы мешаем ему молиться, нарушаем его тишину. И тихо-тихо, чтобы веточка не хрустнула, я попятилась назад, а, зайдя за гору, побежала что есть сил к Мариамне, рассказала о том, что видела, и мы ушли, оставив его…
Из воспоминаний А.Нагибиной
В 1930-х годах в Алма-Ате в разгаре были гонения на священников, в горах шли облавы на пустын но жителей. Почти все из них ушли, покинули свои склепы и перебрались кто куда. Но Виктор остался. Там же, в своей келье, он и был арестован 9 февраля 1935 г.
Из обвинения:
«Задачи контрреволюционной группы монахов сводились к следующему:
1. Переход на нелегальную ее деятельность.
2. Проведение контрреволюционной религиозной работы среди верующих с целью срыва мероприятий Советской власти в области колхозного строительства и агитации против сов. власти…
Руководителем алма-атинской части группы церковников был Матвеев Виктор Матвеевич.
…эта часть группы, обосновавшаяся в горах Аксая, развернула свою религиозную деятельность среди верующих Никольской церкви г. Алма-Аты.
Пользуясь репутацией “прозорливого старца”, Виктор привлекал к себе массу паломников-верующих, которые, несмотря на дальность расстояния (30 км), систематически посещали тайные кельи монахов в мест. Аксай, приносили им продукты и участвовали в тайных богослужениях. Связь между “талгарской” и “аксайской” группами контрреволюционеров осуществлялась путем встречи руководителей Макария, Пахомия, Виктора, Антония в Алма-Ате на квартирах у монашек или в Никольской церкви. Пребывание участников группы в Алма-Ате тщательно конспирировалось…
Кроме тайной деятельности, монахи вели систематическую антисоветскую агитацию среди посещавших их верующих, распросраняли провокационные слухи о войне, о скорой кончине мира, агитировали против колхозов…