В течение жизни Кроули потерял многих своих друзей. Одних он разочаровал, других бросил. Новые друзья появлялись у него нечасто, поскольку людей отпугивала его репутация. Тем не менее сохранялся небольшой круг тех, кому он по-прежнему был интересен. Их притягивала его эрудиция, острота и сила его ума, его замечательные способности шахматиста, его чувство юмора, а также скрывавшаяся под личиной дерзкого, а нередко даже алчного человека изначально присущая ему честность. У него был красивый голос, богатый тональными оттенками, прекрасный словарный запас (которым он владел настолько хорошо, что в разговоре крайне редко прибегал к банальным фразам и почти никогда не повторялся). Кроме того, он имел большую склонность к сложным словесным играм и употреблению фразеологизмов. Несмотря на все свои грехи, Кроули никогда ничего не стремился скрыть: он был именно таким, каким казался со стороны. Он никогда не пытался притвориться не тем, кем являлся на самом деле, представиться не таким, каким сам себя ощущал. При общении с Кроули было одно условие. С ним не следовало заговаривать о магии. Кроули и сам никогда не касался этого предмета в разговорах. Льюис Уил-кинсон, состоявший с ним в близких дружеских отношениях с 1907 года до самой смерти Кроули, никогда не говорил с ним ни о сексе, ни о магии, видя в нём лишь яркого интеллектуала с несколько странными религиозными воззрениями.
Кроули обладал изумительным остроумием. Оно то и дело прорывалось быстрыми, острыми и язвительными репликами. Однажды, когда Теодор Драйзер запамятовал английское слово, означающее птенца лебедя, и спросил у Кроули: «Как это сказать? Как вы назвали бы молодого лебедя?», Кроули мгновенно ответил: «Почему бы не назвать его Альфредом?» В другой раз, когда некая знакомая Кроули спросила его, в какой из женских коледжей он посоветовал бы ей отправить дочь, Кроули абсолютно серьёзно назвал Рэдклифф Холл. На самом деле это было не название колледжа для девочек, подобное Маргарет-холлу в Оксфорде, а имя писательницы-лесбиянки, написавшей роман «Колодецодиночества». Когда Кроули задали вопрос, каким образом можно провести ночь в России и при этом не быть покусанным клопами, Кроули посоветовал: «Передвиньте границу». Письмо Кроули к матери, в котором описывается день его женитьбы на Роуз, достаточно хорошо подтверждает тот факт, что тексты Кроули вполне соответствуют лучшим образцам современных ему произведений комедийного жанра.
Однако самым сильным оружием Кроули была его личная харизма. Нечто необъяснимое влекло к нему людей. Фрэнсис Той, двоюродный брат Джеральда Келли, охарактеризовал Кроули как «гения, который пошёл по неверному пути», обладающего «особым талантом поэта, подобного Браунингу, бурным воображением и исключительным чувством юмора. В самом деле, оглядываясь назад, понимаешь, что чувство юмора было самой заметной его чертой». Аугустус Джон, который в течение многих лет время от времени встречался с Кроули, утверждал, что стал наслаждаться его компанией с тех пор, как тот «перестал притворяться, что он — Калиостро». Кроули, как утверждал Джон, «со временем превратился в очень приятного пожилого джентльмена», который представлял собой «нечто гораздо больше, чем обыкновенный шарлатан с обыкновенным набором уловок, и которому, возможно, лишь недоставало хорошего вкуса». Даже некоторые из тех друзей Кроули, которых он прогнал сам, сохранили к нему расположение. Джеральд Йорк, который с некоторых пор, говоря о Кроули, называл его не иначе как «старым грешником», поклялся хранить документы Кроули и не только сдержал слово, но и собирал, где только мог, все связанные с Кроули бумаги вплоть до своей собственной смерти, последовавшей в 1983 году. Йорк создал архив, куда вошли не только книги и рукописи Кроули, но также его одежда, регалии и бронзовые магические принадлежности, причём архив этот был открыт для каждого, кто желал изучать жизнь и личность Кроули. Теперь эта коллекция хранится в Варбургском институте в Лондоне. Йорк никогда не переставал восхищаться личностью Кроули, и даже после того как они отдалились друг от друга, Йорк время от времени присылал Кроули деньги, если узнавал, что тот сидит без гроша, а иногда финансировал публикацию его произведений. Исраель Регарди тоже продолжал поддерживать Кроули после разрыва их отношений. Возмущённый несправедливыми утверждениями, которые допустил Джон Симондс в написанной им весьма предвзятой биографии Кроули, Регарди осуществил своё собственное исследование жизни и деятельности Кроули, результатом которого стала объемная и достаточно объективная книга под названием «Глаз в треугольнике». Кроме того, после смерти Кроули Регарди готовил многие его произведения к публикации.