Заброски боевых групп по линии РОВС в 30-х годах продолжались. Так, в 1931 году на территории СССР обезврежена такая группа белого офицера Потехина, в 1934 году та же участь постигла диверсионную группу Дмитриева. А прослушивающий штаб-квартиру РОВС тайный агент НКВД Третьяков опять сообщал, что Миллер передал деньги английской разведки представителю РОВС в Румынии Жолондковскому для активизации террористических забросок в СССР, так что к 1937 году против Миллера было решено провести силовую акцию, подобную акции против его предшественника Кутепова семью годами ранее. Правда, к 1937 году боевая деятельность в РОВС уже выдыхалась. Видя бесперспективность таких разовых забросок и гибель смельчаков из таких групп РОВС без практического вреда для советской власти, к этому году в помощи Миллеру отказали даже самые верные среди западных спецслужб финские разведчики, как ни требовал от них поддержки новых забросок представитель РОВС в Хельсинки генерал Добровольский. Создать же сильную подпольную сеть внутри самого СССР при советских реалиях 1937 года и тотальном контроле НКВД руководство РОВС было просто не в состоянии. Сам Миллер вынужден был признать необходимость в таких условиях сократить масштабы боевой работы и диверсионных забросок, чем все чаще стали заниматься молодые конкуренты ровсовцев из союза НТС. Понимал он и невозможность в сталинском СССР выстроить действительно устойчивую подпольную сеть агентуры РОВС. Уже под арестом в Москве генерала Миллера чекисты все время спрашивали об этой деятельности, в частности как РОВС использовал движение «Смены вех» для внедрения под видом возвращающихся в СССР эмигрантов своих активных членов для «залегания» на советской территории, на что Миллер недоуменно отвечал: «Такой вопрос даже не поднимался нами, мы же отлично знали, как чекисты следят за каждым таким возвращенцем».
Упадок боевой работы вел к нападкам на Миллера и других ветеранов в руководстве РОВС со стороны более молодого поколения радикалов в РОВС, со стороны экстремистской «Внутренней линии» Шатилова и Закржевского, со стороны прогермански настроенной фракции генерала Туркула в РОВС. В результате Миллер еще в 1934 году собирался в отставку с поста главы РОВС, собираясь передать власть более молодому и энергичному генералу Шатилову, но затем передумал. В 1935 году его отставки потребовал ряд руководителей РОВС (так называемый «Заговор маршалов РОВС») во главе с Туркулом и Фоком, и среди пославших Миллеру эту «черную метку» лидеров РОВС одним из первых был агент НКВД Скоблин. Чекисты вообще поощряли эту внутрифракционную грызню внутри РОВС, как и между РОВС и другими эмигрантскими объединениями, особенно набиравшими силу молодыми НТС Байдалакова и «Штабс-капитанами» Солоневича. Позднее, уже в 1936 году, недовольный пассивностью Миллера лидер радикального крыла РОВС генерал Туркул увел из организации своих сторонников, основав на платформе продолжения террористической борьбы кутеповскими методами свой союз РНСУВ, открыто, в отличие от РОВС, ориентируясь на союз с гитлеровской Германией и Японией. Хотя в эмиграции появлялась еще одна радикальная антисоветская группа, создание РНСУВ руководство НКВД все равно радовало фактом ослабления РОВС и новым расколом в эмиграции.
Эту атмосферу очень хорошо передал в своих изданных в США мемуарах «Незримая паутина» (ОГПУ – НКВД против белой эмиграции) Борис Прянишников – бывший белый офицер, член РОВС и руководитель НТС, всю свою долгую жизнь посвятивший поиску агентов ГПУ – НКВД – МГБ – КГБ в среде эмигрантов. Хотя книга во многом посвящена этим дрязгам внутри РОВС и других эмигрантских союзов. И к концу ее чтения очень трудно ориентироваться в многоуровневой паутине взаимных подозрений и обвинений среди эмигрантов, во всей этой грызне «стариков из РОВС», «молодых из НТС», «Внутренней линии», «Штабс-капитанов» Солоневича, эсеров Бурцева, «туркуловцев», «шатиловцев», «возрожденцев» и так далее до бесконечности.
Сама операция по похищению и вывозу в СССР Миллера сейчас описана во всех деталях: первый человек в белой эмиграции был прямо с парижской улицы доставлен тайно в подвалы Лубянки, где позднее встретил свою смерть. Скоблин заманил его в ловушку, позвав на встречу якобы с германскими разведчиками для обсуждения стратегии сотрудничества. В итоге Миллер приведен Скоблиным на специально снятую конспиративную квартиру советской разведки, где был схвачен и усыплен хлороформом. В отличие от Кутепова Миллера чекисты благополучно довезли, заколотив в деревянный ящик, до Гавра, где тайно загрузили на советский корабль «Мария Ульянова» и доставили в Ленинград, затем тайно этапировав в Москву на Лубянку. После чего старый генерал и вождь Белого дела был помещен в камеру внутренней тюрьмы НКВД под фамилией Иванов, где позднее после долгих допросов был тайно казнен, как ранее Рейли, Савинков и другие жертвы подобных тайных операций чекистов.