В мемуарах она называет дом своего детства в Лос-Анджелесе «особняком» и «особняком моего отца». Семья собиралась на совместный обед лишь на День благодарения. Горничные и повара кормили и одевали детей. Лайла не удивлялась, когда заставала в гостиной таких знаменитостей, как Майкл Джексон и Джон Траволта. «Меня тянуло к другой черной семье, которая жила вниз по улице, – писала она. – Они ужинали вместе каждый вечер… Эти родители устанавливали детям правила и следили, чтобы они выполнялись. Вот чему я завидовала. Я мечтала о такой семье».
Дети Али от его первого брака виделись с отцом два-три раза в год. Джамиля в недавнем интервью сказала, что они со своими сестрами Рашидой и Мэй Мэй хорошо ладили со сводными сестрами Ханой и Лайлой. Али позаботился, чтобы дети Халилы познакомились с детьми Вероники. Когда Вероника и Мухаммед были женаты, дети часто проводили лето у них дома в Лос-Анджелесе. Джамиля вспоминала, что делить отца со своими сводными сестрами было несложно: «Нам все равно приходилось делиться им со всем миром».
Внебрачные дети Али проводили с отцом еще меньше времени. Мия, дочь Патриции Харвел, одной из любовниц Али, сказала, что отец регулярно звонил ей и время от времени приглашал в Лос-Анджелес. Однажды, когда дети в школе дразнили ее, поскольку не верили, что Али действительно ее отец, он прилетел, сам отвел ее в школу и выступил перед учениками, представившись отцом Мии. Он также провел беседы с некоторыми из ребят, кто сомневался в словах ее дочери. «Для меня это значило больше, чем можно было выразить словами», – сказала Мия.
Веронике тоже приходилось делить Али. Часто она не выходила за пределы своей комнаты, чувствуя себя заложницей в собственном доме. В кухню или гостиную она решалась зайти только при полном параде, потому что никогда не знала, кого могла там встретить. Вероника отличалась застенчивостью, которую люди принимали за холодность.
«Я стала бесчувственной, – сказала она в интервью много лет спустя. – Да, было больно, слишком больно».
Али изменял Веронике. «Он мог привести другую женщину прямо у тебя на глазах, – вспоминает она, – и потом выясняется, что они встречаются». Даже узнав о стабильных отношениях Али с Лонни Вильямс, Вероника закрывала на это глаза, потому что думала, что ее муж по-настоящему не любил других женщин.
Вторая жена Али, Халила (ранее известная как Белинда), также переехала в Лос-Анджелес в конце 1970-х, что только осложняло ситуацию. В 1979 году Халила получила роль в кинокартине «Китайский синдром», где снялись Джейн Фонда и Джек Леммон. Но после этого ее актерская карьера пошла на спад, и она прожгла большую часть денег, которые получила при разводе. В 1980-х она работала уборщицей в том же районе Лос-Анджелеса, где проживал бывший муж с его новой семьей. Ее дела были так плохи, что ей пришлось продавать свою плазму за девяносто долларов каждую неделю.
Лонни приехала в Лос-Анджелес в середине 1980-х годов. Девушка, которая была моложе Али на пятнадцать лет, впервые встретила боксера в 1963 году, когда ее семья поселилась в доме на Верона-Вэй в Луисвилле, через дорогу от дома, который Али купил для своих родителей. В то время Лонни была первоклассницей с косичками. Ее мать, Маргарита Уильямс, стала одной из самых близких подруг Одессы Клей. На протяжении многих лет Али приводил каждую из своих жен в Луисвилл, а Сонджи, Халила и Вероника успели отобедать за столом семьи Уильямс. Лонни лишь наблюдала за хороводом женщин Али. В 1982 году, во время своего визита в Луисвилл, Али пригласил Лонни на обед. Во время обеда девушка была обеспокоена эмоциональным и физическим состоянием Али. «Он был подавлен, – сказала она Томасу Хаузеру. – Это был не тот Мухаммед, которого я знала». Вскоре Вероника разработала план: Лонни переедет в Лос-Анджелес, чтобы помочь ухаживать за Али. Взамен Али оплатит все ее расходы, включая обучение в аспирантуре Калифорнийского университета.
Али даже не пытался утаить свои новые отношения от жены и детей. Лайла, дочь Али от брака с Вероникой, писала: «Иногда он брал нас с собой, когда… заезжал в ее апартаменты в Вествуде… Тогда я и подумать не могла, что в этом было что-то неправильное. Мне потребовались годы, чтобы осознать всю дикость ситуации, когда женатый человек знакомит своих детей с таким особенным другом, как Лонни».
Летом 1985 года Вероника и Мухаммед решили развестись. Али велел своим адвокатам не принимать во внимание брачный договор, заявив, что не хочет скупиться. Некоторые из друзей Али считали, что Вероника развелась с Али, потому что он был болен, но она решительно опровергла эту версию, сказав, что считает состояние ее мужа стабильным и верит, что его ждет долгая и насыщенная жизнь. Она сказала, что все еще любит Али, но была вынуждена уйти, потому что отношения Мухаммеда с другими женщинами слишком часто ранили ее. «Нельзя поступать так, а затем надеяться на чью-то любовь», – сказала она.