Высадив десантников, белые корабли отошли от берега, чтобы было удобнее обстреливать город. Теперь пришлось возвращаться в попытке спасти уцелевших. 'Я иду вглубь, - вспоминает Анатолий Ваксмут, - в самую гущу стрельбы. Тут же мичман Киреенко был тяжело ранен в шею, а мичман Герасимов легко. Стрельба была настолько интенсивная, что когда деревянные ручки моего рулевого штурвала при повороте его выходили вне защиты рубки, то все почти сбивались пулями'.
'Кубанец' прикрыл своим корпусом возвращавшиеся шлюпки с десантниками. Все они были по несколько раз ранены, поэтому члены команды бросились помогать казакам, поднимая ослабевших на борт. Руководивший этим командующий Евгений Герасимов был тяжело контужен, боцмана убило наповал. Подобрали всего около сорока человек. Остальные погибли на берегу. Анатолий Ваксмут принял командование Донской флотилией на себя и повёл корабли в море. При отходе к белым присоединился бежавший из Ейского порта небольшой пароходик 'Фанагория', что оказалось очень кстати. На нём имелись все необходимые приборы навигации, с помощью которых флотилия добралась до Таганрога, где переправила своих раненых в госпиталь, а затем вернулась в Ростов.
По возвращении Ваксмут лично доложил о походе самому атаману Краснову, был радушно принят и за боевые отличия произведён в старшие лейтенанты.
По возвращении в Новороссийский порт старший лейтенант Ваксмут обратил внимание на стоявший там 'бесхозный' ледокол с ободряющим названием 'Полезный'. Ваксмут доложил морскому министру о том, что переговоры успеха не имели, однако, дабы не откладывать создание Белого флота в долгий ящик, по его мнению, имело смысл 'реквизировать' гражданское судно, которое он заметил, и вооружить его, положив тем самым начало новой флотилии. Получив одобрение, Ваксмут был направлен в подчинение старшему лейтенанту Сергею Ивановичу Медведеву, назначенному новым командиром ледокола. Стараниями молодых офицеров на ледокол были привезены с завода и установлены 75-мм орудия, и над его кормой ввысь взмыл Андреевский флаг. Анатолий Петрович Ваксмут был назначен старшим офицером 'Полезного', а артиллерийским офицером на корабль прибыл лейтенант Балтийского флотского экипажа Сергей Яковлевич Ильвов. Это был испытанный участник 1-го Кубанского похода, который он прошел вместе со своим братом Борисом, тоже лейтенантом Балтийского флотского экипажа и его женой Зинаидой Валериановной Ильвовой, служившей в Морской роте Добровольческой армии сестрой милосердия. Штурманом на 'Полезном' стал мичман Михаил Иванович Тихомиров. Судьба ледокола 'Полезный' сложилась таким образом, что с первых же дней он как боевое судно принял участие в боевых операциях, курсируя у северо-западных берегов Азовского моря, от Геническа до Мариуполя, и прикрывая с моря боевые операции войск ВСЮР. Позже ледокол был выслан обеспечивать охрану Арабатской стрелки и позиций белых на Ак-Манае.
В мае 1919 года А.П. Ваксмут, получив погоны капитана 2 ранга, возглавляет и успешно проводит сухопутную экспедицию по доставке из Новороссийска в Царицын дивизиона катеров для белой флотилии на Волге. Затем отряд Ваксмута направился в порт Петровск (ныне Махачкала).
На Каспии капитан 2 ранга А.П. Ваксмут командует вспомогательным крейсером 'Америка'. В августе 1919 года его крейсер, действовавший в районе 12 фунтовового рейда Астрахани, обнаружил в море обычный рыболовецкий парусник. Во время досмотра юнга-мальчишка кинулся к капитану парусника с требованием выпустить торпеду! При детальном осмотре 'рыбак' оказался 'рыбницей-торпедоносцем' красной флотилии. Под водой у борта рыбницы была закреплена готовая к пуску торпеда (мина Уайтхеда). По приказанию командира 'Америки', корабль был захвачен, весь экипаж доставлен в Петровск, где после допросов все красные военморы, кроме юнги, были расстреляны.
Теперь дадим слово самому Анатолию Петровичу:
'Каспийская флотилия состояла из вооруженных пароходов общества "Кавказ и Меркурий" и других, в мирное время возивших нефть из Баку в Астрахань. Пароходы были вооружены и прекрасно снабжены англичанами (коммодор Норрис), сражавшимися на них с большевикам в 1918 году и передавшими их командованию Добровольческой Армии летом 1919 года.
Почти весь 1919 год флотилия, уже с русским составом, находилась все время в море под Астраханью и, ведя бои с большевицкими кораблями, пытавшимися "выйти в море", не выпускала их, и таким образом все Каспийское море было свободно и безопасно для плавания. Флотилия была укомплектована, главным образом, морскими офицерами, приказом главного командования снятыми с фронта с броневых поездов, и астраханскими рыбаками, приходившими в Петровск целыми партиями на своих "рыбницах" и по сухому пути. Разграбленные большевиками, они страшно их ненавидели.