Балли устроил пышный прием в честь высокого гостя с участием многих молодых и красивых женщин, которые всегда почему-то оказывались на его судах. Шериф принял приглашение. На следующее утро, когда он проснулся, бриг был уже в открытом море, а сам он получил предложение пересесть в шлюпку, чтобы вернуться на берег и попасть в свой кабинет. Альтернативой было даровое путешествие в Австралию. Удрученный шериф предпочел шлюпку, а прелестные женщины Хайса смеялись над ним до слез. Случай с шерифом получил огласку чуть ли не во всех портах Тихого океана, а слава золотобородого пирата еще больше возросла. Тем не менее несколькими неделями позже Балли Хайс потерял «Эллениту» — бриг дал течь и затонул неподалеку от Самоа. Значит, все-таки на краденом коне далеко не ускачешь. Капитан и его подружки благополучно достигли берега.
Вскоре Хайс в качестве пассажира на попутном корабле добрался до Австралии и оказался в Сиднее. Поскольку к тому времени он был уже хорошо известной личностью, одна городская газета «приветствовала» его статьей «История одного негодяя». «Неизвестно, — говорилось в статье, — на что еще решится этот субъект, безнаказанно совершивший столько преступлений. Может быть, он снова будет уводить суда или наметит очередную жертву себе в жены…»
Несмотря на то что к тому времени на счету у Хайса были значительные «заслуги», тем не менее он считал, что ему приписали несколько больше преступлений, чем он совершил на самом деле. Поэтому капитан написал в редакцию опровержение, в котором, правда, признавался в похищении шерифа с Гавайев, но категорически отметал все остальные обвинения. Как бы то ни было, вскоре его арестовали за долги и заключили в тюрьму Дарлингхарст.
После того как он покинул тюрьму, Балли на какое-то время пропал, к большому огорчению его многочисленных жен. Позднее стало известно, что он, загримированный под негра, выступал в качестве шансонье перед горняками на золотых приисках Австралии.
Немного отдохнув в пустынных районах Австралии, Хайс снова бросился в авантюру — обманул какого-то торговца и на деньги последнего купил трехсоттонный барк «Лаунсестон». В марте 1861 г. Хайс погрузил на барк уголь с пунктом назначения Бомбей и покинул новый Южный Уэльс. Как легко можно догадаться, уголь в Бомбей доставлен не был, так как Балли продал его с пользой в Батавии, где снова погрузил товар в кредит и исчез в открытом океане. О «Лаунсестоне» никто больше никогда не слышал, зато о капитане…
В 60-х годах наш герой значительно расширил круг своей преступной деятельности. Он занимался тем, что похищал аборигенов Меланезии, продавая их в рабство, поставлял маори оружие для борьбы с англичанами, уводил суда, грабил товары и, наконец, с оружием в руках громил небольшие торговые станции, размещенные белыми торговцами на множестве мелких островов. Случались у Хайса и «несчастные случаи на производстве». Такое произошло в свое время с «Элленитой», буквально из-под его ног ушел под воду и бриг «Рона». Однако Балли удалось добраться до острова Манихики (архипелаг островов Кука). Там с помощью местных мастеров он построил небольшую лодку, на которой отправился на Самоа затем, чтобы на своем новом невольничьем судне снова вернуться на тот же Манихики и… похитить островитян, которые совсем недавно помогали ему сооружать лодку. Со временем Балли Хайс приобрел известность как одна из зловещих личностей того времени.
В 1870 г. последний пират Тихого океана командовал кораблем под названием «Пионир» вместе со своим сообщником, который выручил его из беды на Самоа. Бриг вышел в Коралловое море, и театром его действий стали воды, омывающие Микронезию. Вскоре в этих районах участились случаи похищения детей в рабство, грабежи и разбой. Оба пирата хозяйничали в водах Каролинских, Соломоновых островов и острова Лайн. Прошло какое-то время, и Хайс стал единственным владельцем черного брига «Леонора», а его сообщник погиб насильственной смертью при неизвестных обстоятельствах.