Историки джаза часто упоминают об инциденте, который произошел в первый же день выступления Армстронга в «Себёрбен-гарденс». Конферансье отказался представить слушателям «этого ниггера», и Луи был вынужден объявить себя сам. Напомним, что ресторан предназначался только для белых и цветные туда не допускались даже на порог. Были и другие проблемы. Например, местный профсоюз музыкантов пытался помешать выступлению негритянского оркестра в заведении для белых. Однако, несмотря ни на что, Армстронг и его друзья-оркестранты остались очень довольны гастролями в Новом Орлеане. «"Себербён-гарденс" находился в удивительно красивом месте, — рассказывает Джордж Джеймс. — Со всех сторон он был огорожен зеленой стеной. Его яркие фонари виднелись даже с набережной. Каждый вечер толпы негров, вход которым в ресторан был категорически запрещен, приходили на берег реки, чтобы оттуда послушать игру и пение своего Луи. Утром всегда находился какой-нибудь поклонник, желавший угостить нас завтраком или просто сделать что-то для нас приятное».
Вместе с Армстронгом в Новый Орлеан приехала и Элфа. Влюбленные сняли небольшую квартиру, купили маленький «форд». Турне, рассчитанное на три недели, продлилось целых три месяца.
В сентябре Армстронг и его оркестр покинули наконец Новый Орлеан и направились на гастроли по другим городам страны, которые продолжались до февраля 1932 года. Затем музыканты вернулись в Нью-Йорк, где им предстояло играть в одном из концертных залов Бродвея. Одновременно был подписан контракт на выступления в зале «Лафайетт» в Гарлеме. Накануне первого концерта газета «Нью-Йорк эйдж» писала: «Музыкальные критики считают Армстронга величайшим корнетистом мира, королем блюзов, автором самых популярных песен. Его называют самой яркой артистической личностью на современной американской сцене. На днях состоится его первое выступление в Нью-Йорке за последние два года»
.Но тут снова начались неприятности. Томми Рокуэлл и владельцы кабаре «Коннис-Инн» братья Иммерман обвинили Армстронга в нарушении контракта. Не исключено, что они действовали по указанию гангстеров, которым всегда принадлежало решающее слово. Армстронг выдвинул встречный иск, и последовавшая за этим юридическая волокита лишила на какое-то время оркестр права выступать.
Обычно, сталкиваясь с такого рода проблемами, Армстронг стремился поскорее куда-нибудь сбежать. Подобные настроения обуревали на этот раз и Коллинза, который боялся, что Рокуэлл и гангстеры лишат его источника доходов. В конце концов оба уехали в Чикаго. Сделав на местной студии несколько записей, Армстронг направился в Калифорнию, где снова начал работать в «Себастиан'с Коттон-клаб».
Перед бегством из Нью-Йорка Армстронг вместе со своим оркестром успел сняться в двух отвратительных короткометражных фильмах. В одном из них, называвшемся «Rhapsody in Black and Blue»
, главный персонаж — негр, которого постоянно колотит собственная жена. Однажды, придя в себя после очередных побоев, он обнаруживает, что стал королем страны Джазмания. Появляется Армстронг, почему-то одетый в леопардовую шкуру, и начинает играть для своего повелителя. Другой фильм, вышедший под названием «I'll Be Glad When You're Dead, You Rascal You» , был наполовину игровым, наполовину рисованным. Герои обеих картин — типичные персонажи минстрел-шоу. За всю свою кинокарьеру Армстронг не исполнял худших ролей, чем эти, но сам факт приглашения его на киностудию свидетельствовал о росте его популярности.