Недоброжелатели Каса, конечно же, распустили слухи о том, что они с Джимом любовники. Ника Бека такие заявления жутко веселили. Когда он спустя время окажется в Нью-Йорке, где Джим поселится в собственной квартире, швейцар будет просить его подождать в вестибюле, и он сможет подняться наверх только после того, как из квартиры Джейкобса выпорхнет очередная сногсшибательная красотка. Ник писал в этой связи: «Меня поражало, когда их называли геями. К тому времени практически все журналисты, писавшие на боксерскую тему, невзлюбили Джимми, и один из моих друзей, вращавшихся в средствах массовой информации, предположил, что обвинение в гомосексуализме было их способом отомстить Джейкобсу».
На момент уже упоминавшегося «боксерского» банкета 1962 года Джим и Кас плотно работали над документальным фильмом о Флойде, который они планировали продать телевидению. Паттерсон согласился дать интервью за символическую плату в один доллар при условии, что впоследствии он получит долю от общей прибыли. Фильм начинался с кадров визита Флойда в Белый дом, где он встречался с президентом Кеннеди. Затем шла ретроспектива карьеры боксера. К сожалению, интерес со стороны кабельных телевизионных компаний был невелик, и бюджет сократили. Несколько лет спустя, как это ни печально, фильм станет яблоком раздора между Флойдом и Касом.
Обсуждение состязания между Паттерсоном и Листоном выплеснулось далеко за пределы боксерского мира. Правозащитные организации старой школы, такие как Национальная ассоциация содействия прогрессу цветного населения, опасались, что бандитский имидж Листона сведет на нет достижения в защите прав чернокожих граждан. Руководитель ассоциации Перси Саттон признавался: «Черт возьми, шутки в сторону! Я обеими руками за Паттерсона, потому что он представляет нас гораздо более достойно, чем Листон». Но у Сонни был авторитетный сторонник в лице Дика Грегори – известного комика и признанного активиста движения за гражданские права. Грегори заявил: «Конечно же, не менеджеру Паттерсона решать, следует ли Листону участвовать в поединке».
В сложившейся ситуации Листон решил взять дело в свои руки. Прежде чем избавиться от Бароне, он отправился к Хосе Торресу и попросил отвести его к Касу. Как обстояло дело дальше, я узнал от самого Каса. Сонни казалось, что он запугал моего учителя. Однако Хосе объяснил ему, что тот никого не боится, и они вдвоем без предупреждения нагрянули в офис. Хосе всегда мнил себя искусным политиком и старался поддержать всех и каждого. Кас был поражен, увидев у себя Листона, но сохранил самообладание.
– Кас, почему бы тебе не устроить мне бой с Паттерсоном?
Листон казался взбешенным. Кас завел свой излюбленный монолог о необходимости провести «чистку» команды, руководящей Листоном, но Сонни оборвал его:
– Тогда сам выбери мне менеджера!
Кас сдержанно ответил, что не вправе решать этот вопрос и не желает больше обсуждать эту тему. К тому времени Листон уже успокоился, и они вместе с Торресом ушли.
10 мая 1961 года Листон объявил, что его новый менеджер – Джордж Кац, представший перед Атлетической комиссией штата Пенсильвания и признанный достойным гражданином. А буквально через неделю Листон вступил в перепалку с полицейским. Когда блюститель порядка велел Сонни идти своей дорогой и не ошиваться рядом с ним, тот язвительно усмехнулся: «А если не пойду, арестуешь?» Полицейский так и сделал, обвинив Сонни в хулиганстве и сопротивлении аресту. Правда, позднее обвинения в адрес боксера свелись к тому, что он слонялся без дела. Сонни был хорошо знаком с полицейскими участками. В штате Миссури он отбывал наказание за пять вооруженных ограблений. Стычка с полицейским 17 мая завершилась его восемнадцатым по счету арестом. В девятнадцатый раз он был арестован 12 июня, после того как они с приятелем, выдавая себя за полицейских, остановили автомобиль, за рулем которого находилась женщина. Когда к ним подъехал охранник парка, где все происходило, парни рванули прочь. Сотрудник охраны, преследуя их со скоростью 80 миль в час, открыл огонь по машине Сонни, после чего они были вынуждены остановиться. После этого ареста Атлетическая комиссия штата Пенсильвания до октября отстранила Сонни от выступлений на ринге.
Черт возьми, а все считали меня опасным криминальным элементом! Да на фоне Сонни Листона я примерный бойскаут. Мой приятель Мак, парикмахер из Лас-Вегаса, очень хорошо знал Сонни. Я как-то рассказал ему, что буквально боготворю Листона, а Мак в негодовании вывалил на меня кучу историй про то, как Сонни ходил в бары, отбирал у парней выпивку, а затем избивал их. Листон мог припарковать машину в Лас-Вегасе прямо посреди улицы, потому что копы просто-напросто боялись связываться с ним. Дело доходило до того, что, узнав о предстоящем приезде Листона, полицейские ждали на вокзале или автобусной станции либо перехватывали его машину и сообщали о запрете на въезд в город. Этому ниггеру фактически не разрешалось показываться в различных частях страны!