Вспомнив о его знакомстве с Илиодором, Хвостов предложил Ржевскому отправиться к нему в Христианию для совместной организации убийства Распутина. Хвостов разработал Ржевскому двойную «крышу»: формальным предлогом поездки была покупка в Скандинавии мебели для клуба журналистов; для царя, стань ему известно о поездке, было заготовлено объяснение, что Хвостов командирует Ржевского к Илиодору (Труфанову) выкупить его рукопись «Святой черт» или хотя бы воспрепятствовать ее публикации до конца войны. Книгу эту, направленную прямо против Распутина и косвенно против царской семьи, Труфанов начал в 1913 году, сразу после снятия монашеского сана, и закончил за границей, благодаря тому, что товарищ министра заведующий полицией Джунковский разрешил — в качестве очередного антираспутинского шага — жене Труфанова вывезти за границу его архив. В действительности Хвостов уже знал из доклада Белецкого, что права на издание куплены у Труфанова одним из русских издателей и экземпляр рукописи находится в Москве.
Белецкий понимал, что Штюрмер и Хвостов долго не уживутся — либо Хвостов попытается повалить Штюрмера, чтобы занять желанное место председателя, либо Штюрмер подкопается под Хвостова, чтобы получить важное Министерство внутренних дел. Узнав по филерским сводкам, что уже на второй день по назначении Штюрмер встретился с Распутиным, Белецкий сообразил, что Распутин проводил в премьеры не Хвостова, а Штюрмера. К тому же Хвостов, желая держать в руках Питирима, уличил его в свиданиях с Распутиным — но тем самым только нажил в митрополите злейшего врага. При коалиции Распутина, Штюрмера и Питирима против Хвостова Белецкий призадумался, стоит ли далее связывать с ним свою судьбу.
«Дело Ржевского» представляло для товарища министра лучшую возможность покончить и с Хвостовым, и со своим двусмысленным положением «заговорщика». Хвостов, Ржевский и Труфанов были отчаянные болтуны, но «слова к делу не подошьешь», и Белецкий начал подбирать документы. Прежде всего, выдав Ржевскому 5000 рублей на дорогу, он посоветовал Ржевскому попросить у Хвостова разрешение на приобретение иностранной валюты — тот, в нетерпении убрать Распутина, подписал отношение в кредитную канцелярию. Как только Ржевский выехал из Петрограда, Белецкий, ранее через агентуру установив, что тот торгует железнодорожными литерами Красного Креста, приказал назначить расследование и подготовил доклад министру о необходимости высылки Ржевского. Далее, при переезде границы жандармский офицер стал чинить Ржевскому и его жене препятствия, тот вспылил, обозвал офицера «хамом», раскричался, что едет по специальному заданию министра, — и об этом тотчас был составлен протокол.
В конце января, пока Хвостов в Петрограде сговаривался с думскими лидерами, что те не будут задевать Распутина, его агент в Христиании обсуждал с Труфановым план убийства «старца». Остановились на том же плане: используя свою жену как приманку, Ржевский под видом шофера повезет к ней Распутина, притормозит в глухом переулке, где в машину вскочат пять царицынских приятелей Труфанова, а после убийства сбросят тело в прорубь на Неве. На организацию выезда пятерых человек из Царицына в Петроград Труфанов запросил 5000 рублей, оплата ему самому должна была идти отдельно. Ржевский немедленно телеграфировал Хвостову о необходимости выдачи денег лицам, намеченным для убийства.
В первых числах февраля Белецкий пригласил вернувшегося в Петроград Ржевского и, с документами на руках, заставил его признаться во всем, а затем доложил министру о злоупотреблениях Ржевского литерами и необходимости его высылки. Белецкий не говорил Хвостову, что ему известна подноготная дела, а тот делал вид, что ему безразлична судьба Ржевского. Теперь Белецкий решил не выдавать Хвостова Распутину, но держать его «делом Ржевского» в руках. Возможно, как ранее Хвостов рассчитывал избавиться от Распутина руками Белецкого, а затем уволить его, так теперь Белецкий рассчитывал выждать убийство Распутина руками Хвостова-Ржевского-Труфанова и посмотреть, кто без Распутина овладеет волей царя. Если Хвостов, то при назначении его премьером потребовать себе место министра внутренних дел, шантажируя его разоблачением. Если Штюрмер, то выдать Хвостова царю и получить его место в правительстве Штюрмера. Чтобы не помешать людям Труфанова и создать «алиби» себе самому, он решил убрать от Распутина Комиссарова и его агентов. Хвостову он сказал, что делает это для облегчения планов убийства, а Комиссарову поручил, упрекнув Распутина за тайные поездки, которые делают охрану невозможной, все же проститься с ним дружески.
Белецкий имел все козыри на руках, но, как человек хотя и хитрый, но нерешительный, он в конце концов перехитрил самого себя. «Дело Ржевского» — при необычайной болтливости его участников — скоро из достояния Белецкого стало общим достоянием. Ржевский еще до поездки в Норвегию рассказывал своему компаньону по клубу журналистов В. В. Гейне, что получил важное задание от Хвостова, показывал ордер на иностранную валюту, хвастал, что у него будут большие деньги, — теперь, напуганный угрозами Белецкого об аресте, он бросился к Гейне за советом. В тот же день, 4 февраля, Гейне рассказал все Симановичу, а тот Манасевичу-Мануйлову. Тот уже слышал о попытке убийства от самого Распутина на вечере у Снарского, но принял за поэтическое преувеличение его слова: «Вот видишь — моя рука: вот эту руку поцеловал министр, и он хочет меня убить». Теперь же, получив известия от Симановича, Мануйлов немедленно, в 12 часов ночи, позвонил Штюрмеру, у которого на 8 февраля был назначен доклад царю.
— Милейший Алексей Николаевич Хвостов… в роли убийцы. Это напоминает водевиль! — воскликнул Штюрмер, который, по словам Мануйлова, «отнесся к этому крайне недоверчиво: говорил, что это фантазия и, верояно, — как он сказал, — какие-нибудь жидовские происки и шантаж против Хвостова, который ненавидит жидов». Не обещая, что он доложит царю, Штюрмер на следующий день попросил все же привести ему Симановича и после разговора с ним поручил Мануйлову негласно расследовать дело и допросить Гейне и жену Ржевского.
С начала поездки Ржевского Хвостов и Белецкий старались чаще и самым дружеским образом встречаться с Распутиным, чтобы не вызвать подозрения у него. По-видимому, о планах убийства он впервые услышал от Снарского, вслед за тем последовал уход Комиссарова — обрадовавшись возможности развязаться с Распутиным, он не только не простился с ним «дружески», но «по-русски обратился и очень неприлично отозвался о дамском обществе», затем Распутин получил покаянное письмо совсем потерявшего голову Ржевского, услышал подробный рассказ Симановича — и двинул в бой «тяжелую артиллерию».
«6 февраля 1916 года звонит телефон из Царского Села, — показывал генерал Беляев, помощник военного министра, ведавший контрразведкой, — и Вырубова мне заявляет, что императрица Александра Федоровна желает со мной переговорить… Это было в первый и единственный раз, что она меня вызвала. Я был очень смущен». Еще более смущен он был, когда в тот же вечер в Царском Селе Вырубова, «страшно нервная дама… с костылем», сообщила ему, что на Распутина собираются сделать покушение и она просит его предотвратить это. Вслед за тем вышла императрица и сказала, что она очень привязана к Вырубовой, жалеет ее и что очень хотела бы ей помочь. На следующий день, допросив Симановича, Беляев с двумя контрразведчиками ломали головы, то ли как охранить Распутина, то ли как уклониться от этого, как было получено известие об аресте Ржевского. Срочно арестовать Ржевского и сделать у него обыск приказал Белецкий, увидев, что вся история выплывает наружу, — уже ходили слухи, что Распутин убит. При обыске у Ржевского было обнаружено неотправленное письмо к Хвостову и приобщено к делу, что вызвало ярость министра, считавшего, что жандармы обязаны были доставить ему это письмо в зубах". Вместо этого Белецкий доставил ему на подпись проведенное через Особое совещание постановление о высылке Ржевского в Сибирь за незаконную торговлю литерами. Ржевский был выслан 27 февраля — но это было только завершением разыгравшейся «на верхах» борьбы.
Штюрмер как опытный бюрократ скорее всего не стал бы сам докладывать об этом деле царю, но тот, приехав 8 февраля из ставки для торжественного открытия Думы, сразу же узнал от царицы о готовящемся покушении на «нашего Друга». Вырубова, заехав к Штюрмеру, вместе с письмом Ржевского Распутину передала высочайшее повеление начать расследование, и Штюрмеру не оставалось ничего другого, как выполнять его. «Теперь… будут разбирать», — сказал Распутин филерам 9 февраля. Штюрмер сам опросил Хвостова и поручил следствие своему старому приятелю Гурлянду, который оттер Манасевича-Мануйлова и убедил Ржевского изменить первоначальные показания о подготовке убийства на показания, что он ездил купить рукопись Илиодора. Возможно, Гурлянд действовал в интересах Хвостова, с которым тоже был в приятельских отношениях, возможно, выполнял указания Штюрмера, который боялся, что версия о «министре-убийце» подорвет в глазах общества позиции всего правительства, во всех случаях Гурлянд не хотел «выносить сор из избы». Версия о «покупке рукописи» и была доложена Штюрмером царю.