О характере и личных качествах Иэёси сохранилось очень мало сведений. Согласно семейной хронике, он был человеком способным, но молчаливым и замкнутым. Доказывать что-то и настаивать на своём не любил, стремился поддерживать с окружающими добрые отношения и в сложных вопросах часто полагался на чужое мнение, из чего большинство японских историков делают вывод об отсутствии у него лидерских качеств. Выслушав доклад советника, Иэёси обычно завершал его коротким
Судя по некоторым записям, Иэёси и сам довольно критично относился к результатам своей деятельности на высшем посту и служебным заслугам подчинённых. В 1848 году он обратился к ним с такими словами: «От начала моего правления не содеяно нисколько благородных дел. …Гибель людей в пожарах, наводнениях и землетрясениях, нынешние волнения с заморским судами – то всё моя вина пред небесами. Могу ли видеть без скорби, как гибнут мои подданные? Стоит всё и не движется, не поднимается ничто снизу вверх и не проходит, могу ли так избегнуть кары небесной? Где я не ведаю, там должностным чинам пристало старание выказывать, чтоб всякий голос снизу доверху доходил, и помыслы свои без смущения мне докладывать» (
Незадолго до смерти Иэёси в княжестве Сацума произошёл семейный конфликт, потребовавший вмешательства
За те шестнадцать лет, что Иэёси провёл в ранге сёгуна, в замке Эдо произошло три крупных пожара – в 1838, 1844 и 1852 годах. Городские кварталы в то время горели гораздо чаще, но в замке ещё со времён Ёсимунэ были введены особые меры предосторожности, поэтому в пожарном отношении он считался самым безопасным местом в городе. Тем не менее после этих пожаров двенадцатому сёгуну пришлось временно переселяться из Главной усадьбы в Западную, пока его резиденцию восстанавливали и ремонтировали.
От жён и наложниц Иэёси имел четырнадцать сыновей и тринадцать дочерей, но никто из них, за исключением сына Иэсада, не прожил дольше двадцати лет. Он и унаследовал сёгунский пост. Однако Иэсада тоже отличался слабым здоровьем и умер в молодом возрасте, не оставив детей, поэтому прямая семейная линия двенадцатого сёгуна на нём прервалась. По дошедшим до нас сведениям, Иэёси имел рост ниже среднего (сто пятьдесят четыре сантиметра, такой же как у Тоётоми Хидэёси) и непропорционально крупную голову с удлинённым черепом[34]
, что хорошо видно на гравюрах. Известно, что двенадцатый сёгун увлекался живописью и хорошо рисовал, в японских музеях можно и сегодня видеть его картины.У Иэёси были довольно сложные отношения с отцом, особенно в последние годы его правления. Среди причин называют принадлежность к разным буддийским школам, враждовавшим между собой (Иэнари придерживался учения Нитирэн, а Иэёси исповедовал Дзёдо), а также нежелание отца расставаться с властью даже в преклонном возрасте.