Все описанное происходило еще в конце прошлого года. Когда же 19 декабря Белецкий удостоился Высочайшего приема и когда Государь поблагодарил его за заботы о Старце, Белецкий стал охранять Распутина еще серьезнее и еще внимательнее стал следить за поступками министра. Хвостов начал догадываться, что с организацией покушения что-то неладно, что два подчиненных ему хитрят, и он начал действовать независимо от них.
Хвостов привлек к делу некоего молодого человека Бориса Ржевского, хорошо известного ему еще по Нижнему Новгороду. Маленького роста, блондин, худощавый, с лисьей физиономией и бегающими глазами, Ржевский сотрудничал в нескольких газетах и когда-то в Нижнем Новгороде исполнял для Хвостова щекотливые поручения. Хвостов зачислил Ржевского при себе чиновником, дал хорошее содержание, неофициально поручил ему организовать в целях агентуры клуб журналистов. Туда был привлечен на службу инженер Гейне. В то же время Ржевский состоял на службе как уполномоченный Красного Креста, где занимался мошенническими операциями по продаже разрешений на перевозку товаров. Ржевский имел автомобиль, хорошую квартиру, жил весело и красиво.
Именно ему Алексей Хвостов и поручил организовать убийство Распутина, пообещав большую сумму денег. Ржевский рассказал об этом своей возлюбленной, а перед Гейне похвастался, что скоро они будут с большими деньгами. По выработанному Хвостовым плану Ржевский выехал под вымышленной фамилией через Финляндию в Норвегию, чтобы войти там в соглашение с бывшим монахом Илиодором, врагом Распутина, и привлечь его к организации покушения с помощью преданных ему в России лиц. Некоторые считали, что покушение, совершенное на Распутина в Покровском в 1914 году, было инспирировано Илиодором. Но Белецкий зорко следил за Хвостовым и его подозрительными приятелями. Как только он узнал о таинственной поездке Ржевского, он решил вывести Ржевского из игры.
За время отсутствия Ржевского Белецкий приказал произвести дознание о его мошеннических операциях по Красному Кресту. Были добыты все улики, достаточные для высылки Ржевского административным порядком в Сибирь. Принял Белецкий и меры к установке официально маршрута Ржевского при его поездке. На границе в Териоках при первом проезде Ржевского был спровоцирован при просмотре документов маленький скандал с жандармами, составлен протокол и разоблачен псевдоним, под которым ехал Ржевский и его якобы жена, и установлено также, что он ездил с секретным поручением министра Хвостова. Все делалось втайне от Хвостова.
Когда в начале февраля Ржевский вернулся в Петроград, он немедленно был вызван Белецким. Накричав на него по поводу скандала на границе с жандармами, Белецкий потребовал объяснений о его мошеннических операциях, стращая высылкой в Сибирь. Ржевский так перетрусил, что принес Белецкому полную покаянную, рассказал ему о своей поездке к Илиодору и раскрыл всю подготовку убийства Распутина. Получив все, что ему было нужно, Белецкий еще более горячо стал распекать Ржевского как чиновника за то, как смел он выдавать секрет, порученный ему министром, как смел заявить о своей секретной командировке на пограничном пункте. Ржевский совсем растерялся.
Белецкий во всеоружии добытых от Ржевского сведений явился к Хвостову и доложил ему о мошеннических операциях Ржевского, предложил передать дело на рассмотрение особого совещания с целью высылки Ржевского. Обо всем остальном, узнанном от Ржевского, Белецкий умолчал, делая вид, что он ничего не знает о секрете Хвостова и Ржевского. Хвостов также продолжал скрытничать и заявил Белецкому, что он может поступать с Ржевским как ему угодно. Хвостов предал Ржевского. Белецкий назначил срочно особое совещание для рассмотрения дела Ржевского.
Ржевский, узнав о предстоявшей высылке, чем уже стращал его Белецкий при первом свидании, обезумел. Он бросился к своему другу Гейне в тот же день 4 февраля рассказал все так называемому секретарю Распутина еврею Симановичу, который устраивал через Распутина свои еврейские дела. Симанович оповестил Распутина. Распутин, уже и так нервничавший несколько дней, перетрусил. В квартире началась настоящая паника. Незадолго до этого по совету Белецкого, чтобы напугать Старца, Комиссаров накричал на него так сильно, что тот пожаловался в Царское Село в полной уверенности, что против него что-то замышляется. Предчувствие усилилось, когда Комиссаров вдруг снял охрану.
И вот теперь, когда Симанович передал, что Распутина хотят убить, хочет сам Хвостов, все стало ясно. Акилина была в гневе. 5 февраля, когда вернувшийся лишь в шестом часу утра пьяным Распутин проспался, состоялось совещание о том, что дальше делать.
В известность обо всем происшедшем была поставлена Вырубова. Написали письмо императрице с просьбой защитить.