При подходе к острову явившийся на произведенный выстрел лоцман сообщил, что утром проведет судно в гавань. Увы, верный своему слову лоцман утром явился, но вести корабль в гавань категорически отказался. «Губернатор сожалеет, но не может дозволить вам войти, т. к. по этому поводу им получено официальное приказание. Вход в гавань может быть разрешен только в случае крайней вашей нужды». И вновь Семс отправляет губернатору письмо: «Сэр, меня очень удивило известие от вашего превосходительства, что вверенному мне судну будет дозволено войти в гавань только в случае какого-нибудь бедствия. Ваше превосходительство, вероятно, находится в сомнении относительно характера «Сэмтера». Судно это — военный пароход правительства Конфедеративных Штатов, которые в настоящей войне признаны воюющей стороной всеми главными европейскими державами, а именно: Великобританией, Францией, Испанией и проч. Хотя державы эти и не позволяют приводить в свои порты призы, но они не делают никакого различия между крейсерами обеих сторон. Последние имеют совершенно одинаковое право доступа в их порты. Или, может быть, Голландия следует другому правилу и не только не впускает призы, но и сами военные суда Конфедеративных Штатов, в то время как она открывает свои порты крейсерам Соединенных Штатов и нарушает таким образом свой нейтралитет? Если действительно таково положение Голландии в настоящей войне, то прошу ваше превосходительство уведомить меня об этом письменно».
Судя по всему, письмо возымело действие, и «Сэмтер» получает разрешение войти в лагуну. Здесь он простоял несколько дней, постоянно окруженный шлюпками, «наполненными всевозможных цветов туземцами, такими же болтливыми и пестрыми, как попугаи». Экипаж занимается «наливкой воды, приемкой угля и свежей провизии». По вечерам команду поочередно спускали на берег «освежиться и освободиться от лишних денег». 24 июля «Сэмтер» выходит в море. Увы, на берегу остается «один из матросов, порядочный негодяй, который, будучи подговорен янки, воспользовался случаем, чтобы сбежать». Это был первый дезертир. Справедливости ради следует заметить, что потом их будет много, почти в каждом порту.
Взяв курс на Венесуэлу, «Сэмтер» шел вдоль берега. С рассветом показалось судно, за которым сейчас же пустились в погоню. Вскоре шхуна «Аббу Брефорд», шедшая из Нью-Йорка в Пуэрто-Кабельо, была захвачена и взята на буксир. Попытка зайти в Пуэрто-Кабельо, и оставить там свой приз успехом не увенчалась. На письмо Р. Семса губернатор ответил, что «Сэмтер» должен оставить порт в течение 24 ч и не позже как с рассветом 27 июля. На захваченную шхуну пришлось назначить призовой экипаж, который получил приказание отвести ее в Новый Орлеан. Не успели сняться с якоря, как на подходе с моря показалось еще одно судно. Это был филадельфийский барк «Джозеф Максвелл», шедший в Пуэрто-Кабельо. Его захватили в расстоянии всего семи миль от порта, куда он шел. Поскольку половина груза принадлежала нейтральному владельцу в Пуэрто-Кабельо, то его шкипер вместе с ревизором с «Сэмтера» были посланы на берег с предложением хозяину нейтрального груза купить за умеренную цену не только остальной груз, но и само судно. Переговоры были прерваны распоряжением губернатора, потребовавшего от Семса привести приз в порт и оставить его там до выяснения правительством Венесуэлы обстоятельств, был ли он захвачен в нейтральных водах или нет. Возмущенный Семс приказал пробить тревогу и, готовый к бою, с людьми у орудий отправился к своему призу. На этот раз шкипера вместе с семейством свезли на берег, а судно с призовым экипажем отправили в один из портов Кубы.
Вскоре, продолжая свое плавание на восток, «Сэмтер» встречает еще одно судно. На его мачте развевается ненавистный, но столь желанный флаг — «полоски со звездами». Увы, на этот раз шкипер тщательно придерживается береговой полосы, и неприкосновенная «нейтральная морская лига» спасает его от участи, постигшей других его соотечественников. Впрочем, были и курьезные случаи. В Порт-оф-Спейн на Тринидаде к Семсу явился шкипер балтиморского брига, стоявшего на якоре недалеко от «Сэмтера». Почтенный шкипер, наслышавшийся о делах своего соседа, будучи в немалом беспокойстве за свою участь, решил узнать, будет ли он задержан, если выйдет в море? Какова же была радость, когда его приветствовали как гражданина дружественного штата и сообщили, что хотя Мэриленд, повинуясь силе, и продолжает еще оставаться верным федеральному правительству, но южане считают его своим союзником, а потому не препятствуют его торговле. Правда, немаловажную роль здесь, очевидно, сыграло и то, что сам Семс был родом из штата Мэриленд. С облегченным сердцем шкипер ушел с «Сэмтера», и вскоре «балтиморский бриг весело отправился в путь».