Тем временем Фишер несколько раз появлялся на телевидении, в том числе и на шоу Боба Хоупа, где отвечал на исполненные благих намерений вопросы иногда мрачно, иногда с неохотной усмешкой, склонив голову набок, уставив глаза в пол и нечётко выговаривая слова. По приглашению Фишера в Штаты прибыл Палссон, взяв в полиции неоплачиваемый отпуск, с желанием стать его помощником и посредником, а при случае найти возможность и для реализации собственных танцевальных талантов. Его семья осталась в Исландии. «Жена, наверное, ревновала к Бобби, поскольку он всегда хотел общаться со мной и отнимал очень много времени», — рассказывает Палссон.
Палссон и Фишер остановились в Нью-Йорке у Маршаллов, а затем переехали на западное побережье, в Пасадену. Никто из знакомых Фишера не удивился бы, узнав, что Палссон не получил ни цента за свой визит. Но сегодня исландец не жалеет о поездке. Его цитировали в прессе и обращались с ним, как со звездой; днем, когда Фишер спал, он разъезжал в лимузине, нанятом для них Бобом Хоупом. На одном шикарном приёме председатель приветствовал его как телохранителя Фишера, «без которого, по словам Фишера, он бы никогда не смог стать чемпионом мира». «Все стояли и аплодировали, — говорит Палссон. — Это Америка. Было здорово. Настоящая вершина жизни».
Фишер клялся Палссону, что он даже может встретиться с президентом, — из Белого дома пришло приглашение, и они оба туда отправятся. На самом деле по записям Белого дома видно, что вопрос о приглашении Фишера вызвал в администрации серьёзные сомнения, создав поток противоречащих друг другу рекомендаций. Годом раньше, после победы Фишера над Петросяном, обсуждалась десятиминутная совместная фотосессия. Президент должен уделить этому время, гласила первая рекомендация, поскольку тем самым он «продемонстрирует интерес к интеллектуальному спорту, поклонников которого в мире насчитывается почти 60 миллионов». Идея возникла у специального советника президента Никсона и его наперсника Леонарда Гармента. Д-р Киссинджер и Совет национальной безопасности одобрили предложенную встречу, но письмо Гармента от 18 января 1972 года всё погубило:
После триумфа Фишера тема встречи вернулась в Белый дом. Шёл даже разговор о приглашении на неё Спасского. Генерал Александр Хейг, глава администрации Никсона, не видел «проблемы в том, чтобы президент согласился на встречу с Бобби Фишером. К матчу был проявлен широкий международный интерес, и такая встреча будет приятна, например, исландцам, учитывая, что их президент сам недавно встречался с Фишером. С другой стороны, нам представляется, что президенту не следует встречаться с Борисом Спасским».
Что случилось с приглашением, неясно. Палссон утверждает, что оно было, но Фишер никак не мог решить вопрос с датой: «Бобби знал, что мне хотелось попасть в Белый дом. Он должен был отослать список гостей и сказал: "Ты в списке самый первый". Я спросил, когда же мы идём. Он, как обычно, откладывал». Ценность этой встречи для президента с каждым днем становилась всё ниже. Почти через тридцать лет разгневанный Фишер ворчал: «Меня никогда не приглашали в Белый дом. Они пригласили эту олимпийскую русскую гимнастку — маленькую коммунистку Ольгу Корбут».
Трёх месяцев в Штатах Палссону вполне хватило. Его семья не хотела переезжать в США, а он скучал по дому. Наконец он сказал Фишеру, что должен улетать; исландская авиакомпания купила ему билет на родину. Фишер примчался к своему другу в аэропорт и спросил: «Ты действительно оставляешь меня?» Ощутив некоторые угрызения совести, Шахматная федерация США нашла 500 долларов на оплату трудов Палссона: он пробыл с Фишером целых пять месяцев, так что каждый день стоил три доллара.
На несколько месяцев Фишер исчез из поля зрения публики, появившись только в конце 1972 года на турнире «Жареные цыплята». Турнир проходил в Сан-Антонио, в Техасе, и финансировался Джорджем Чёрчем, сколотившем состояние на продаже жареных цыплят. Туда приехали несколько лучших игроков мира, а вот Фишера играть не пригласили. Один из организаторов объяснял это так: «Опасались, что для оплаты участия Бобби потребуется весь бизнес мистера Чёрча». Однако его позвали в качестве почётного гостя, выделив частный самолёт. Разумеется, он опоздал, задержав начало тура на пятнадцать минут.