Ни у кого не возникали тогда сомнения ни по поводу необычайной одаренности Иоганнеса, ни по поводу того, что он пойдет по стопам отца. С самого начала мальчик заинтересовался фортепиано, и поэтому в возрасте семи лет отец отвел его к именитому пианисту Отто Фридриху Виллибальду Косселю. Будучи 10 лет от роду, Брамс уже выступал в престижных концертах, где исполнял партию фортепиано в квинтете ор. 16, Бетховена и квартете Моцарта, что давало ему возможность совершить турне вундеркинда по Америке. К счастью, Косселю удалось отговорить родителей Иоганнеса от этой идеи и убедить их, что мальчику лучше продолжить обучение у педагога и композитора Эдуарда Марксена. Марксен вскоре заметил способности ученика к композиции и постарался развить их. 30 лет спустя Марксен писал о юном Брамсе: «…очевидность больших успехов укрепила меня в намерении и далее развивать этот выдающийся талант. Когда до нас дошла весть о смерти Мендельсона, то в кругу ближайших друзей, глубоко убежденный в своей правоте, я сказал: „Великий мастер покинул сей мир, но более великий дар расцветает в Брамсе“».
Иоганнес был хрупким, часто страдающим от головных болей мальчиком. Возможно, именно долгое пребывание в душных, прокуренных локалях и постоянное недосыпание из-за работы по ночам стали причиной его юношеского малокровия. Как он позже рассказывал своему другу, поэту Клаусу Гроту, что когда он возвращался по утрам домой, то его качало из стороны в сторону от сильного головокружения. Коссель описывает семилетнего Брамса, как «хрупкого, бледного ребенка с голубыми глазами и целой гривой густых волос до плеч». Он был маленького роста, а хрупкость и изящество даже в двадцать лет придавали ему мальчишеский вид, чему способствовал и высокий голос.
В 14 лет Иоганнес окончил частное реальное училище Иоганна Фридриха Гофманна, к которому всю жизнь относился с большой благодарностью, о чем свидетельствует фотография с надписью «от благодарного ученика», которую Брамс прислал в подарок директору к 50-летнему юбилею в 1878 году. После окончания школы, наряду с продолжением музыкального образования, отец стал привлекать Брамса для вечерней работы в различных местах, что, возможно, и повлияло отрицательно на рост его организма. Но, может быть, он унаследовал рост и сложение от матери, которая была худенькой и низкорослой. Во всяком случае, складывается впечатление, что именно упомянутые психические и физические перегрузки и, в особенности, частое недосыпание оказали отрицательное воздействие на его здоровье. Однако позже Брамс говорил, что, хотя в юные годы ему часто приходилось трудно, он не жалеет об этом, «…так как это время очень помогло мне в музыкальном развитии».
Тем не менее, несмотря на частые головные боли, Иоганнес не производил впечатления болезненного ребенка, но бледность и хрупкость мальчика наводили на мысль о том, что необходимо позаботиться о его здоровье. Именно поэтому Адольф Гиземанн, частый гость в Альстер-павильоие и владелец бумажной мельницы в Винзене, пригласил Иоганнеса погостить в своем загородном доме на лоне природы. Все, что пережил мальчик во время продолжительного пребывания вдали от городского шума и сутолоки, навсегда отпечаталось в его душе. Именно природа, носитель всего живого, способствовала появлению многих творческих идей музыканта.
Большое значение для анализа дальнейшего поведения Брамса имеет также еще одно обстоятельство из времен его юности. Из письма его матери, опубликованного только недавно, которое она отослала Иоганнесу незадолго до своей смерти, мы узнаем потрясающие подробности семейной жизни, которые могли бы дать нам кое-какие объяснения отдельных странностей характера Брамса. Ввиду важности документа приведем некоторые цитаты: