В своей книге «Моя беспокойная жизнь» («Мятущаяся душа») Адамсон признавалась, что ее «появление на свет 20 января 1910 года было большим разочарованием для родителей, поскольку они ждали мальчика». Ей дали имя Фредерика Виктория, но отец, Виктор Гесснер, старший советник строительного комитета, обращался с дочерью, как с мальчишкой, и называл Фрицем. Девочка росла храброй и не боялась ничего, «кроме какого-то вымышленного Бубутца». Детство было обеспеченным, веселым и беззаботным и протекало в австрийском имении матери «Фредерика» в Зайфенмюле (территория впоследствии отошла к Чехословакии), где семья владела несколькими бумажными фабриками.
Воспитание Фредерики и ее сестер Трауте и Дорле было предоставлено нянькам и гувернанткам, а после развода родителей девочек разделили. Фредерика с 12 лет жила с бабушкой Омой в Вене. Она училась в закрытой экспериментальной школе, где преподавание велось новыми методами, а в 15 лет серьезно занялась музыкой. Усердная девочка была настолько прилежна, что перетрудила обе руки. Концертная деятельность оказалась невозможной, а заниматься преподаванием она не хотела. Фредерика десять лет металась в поисках себя: получила диплом на курсах кройки и шитья, брала уроки пения, изучала машинопись и стенографию, рисовала с натуры, реставрировала картины, серьезно занималась скульптурой и фотографией, училась в школе верховой езды… Затем она решила посвятить себя психоанализу и медицине и поступила на подготовительные курсы. Стройная, красивая, с голубыми глазами и белокурыми волосами, она даже пыталась стать актрисой… А в 1935 г. познакомилась с Виктором фон Кларвиллом (Цибель) и, покоренная его любовью к природе и «желанием избавиться от сложностей городской жизни», вышла за него замуж.
Как оказалось это был не осознанный поступок. Уже по дороге в Африку (1937 г.) Фредерика познакомилась со швейцарским ботаником Питером Балли и поняла, что если и искать дом для жизни в Кении, то только не для эксцентричного мужа. Первый брак был расторгнут. В Найроби (1938 г.) она присоединилась к экспедиции Питера, и их медовый месяц прошел в изучении горной цепи Чиулу. Женщина, выросшая в городе, в холе и неге, приняла походные неудобства как должное. Она не старалась приспособиться, а словно вливалась в этот еще непонятный, но такой притягательный мир дикой природы.
«Питер решил, что Фредерика Виктория слишком трудно произносить, и дал мне новое имя – Джой. С тех пор я и ношу это имя». Никаких знаний и опыта, нужных в экспедиции, у нее не было, и Джой решила зарисовывать акварельными красками растения, собираемые Питером. Занятие это оказалось не только занимательным, но и полезным, и вскоре ее рисунки украсили иллюстрированную книгу «Садоводство в Восточной Африке». Они были характерны своей научной достоверностью, вместе с тем Джой сумела внести в них «оттенок старины», с удивительной точностью соединив четкость линий с некоторой стилизацией. По мнению специалистов, эти иллюстрации «равно хороши как в научном атласе, так и на репродукциях». После выставки рисунков в Найроби и Лондоне Джой получила золотую медаль Гренфел.
Молодая исследовательница участвовала в восхождении на Килиманджаро (высота 5895 м), принимала участие в раскопках в системе рифтовых долин Рифт-Валли и кратера Нгоронгоро в Кении и путешествовала по Конго (1942, 1944 гг., Заир). В 1942 г. она познакомилась с легендарным Джорджем Адамсоном из Департамента охоты. Их объединила не только любовь, но и удивительная схожесть взглядов на окружающую природу. Жизнь с Джорджем превратилась для Джой в сплошное познавательное путешествие. Вместе они осуществляли охотничий надзор, арестовывали браконьеров, устанавливали контроль за ареалами диких животных, отстреливали львов-людоедов и взбесившихся слонов, улаживали межплеменные конфликты. Их дом в Исиоло почти всегда пустовал.
Джой рисовала, собирала насекомых, небольших пресмыкающихся и грызунов для музея в Найроби, снабжала отдел энтомологии различными, ранее неизвестными видами ночных бабочек, а ведь она не была ни профессиональным ученым, ни зоологом. Но природная одаренность позволила ей внести неоценимый вклад в изучение природы Африки. Чего только стоят великолепные рисунки «сказочных» коралловых рыб побережья Порт-Судана, приобретенные муниципалитетом Момбасы для морского музея! Национальным достоянием Кении стала серия портретов африканцев. Первоначальной задачей Джой было как можно точнее зафиксировать детали нарядов, уборов и ритуальную символику коренного населения, которые с приходом цивилизации стремительно исчезали. Но эти портреты оказались серьезным трудом по этнографии Восточной Африки. Они легли в основу книги Адамсон «Народы Кении».