Первая состояла в том, чтобы реставрировать икону Знамения Божией Матери. Для Харитоненко-старшего эта задача имела первостепенное и важное значение, поскольку он считал Божию Матерь своей покровительницей и хотел таким образом возблагодарить ее за помощь и заступничество. Эту икону, по всей вероятности, подарили Спасо-Преображенскому собору Сум курские купцы в знак благодарности за успешные торговые дела на сумских ярмарках – те самые, у которых Иван Герасимович проходил свои первые «университеты» по торговой части. Павел Иванович выполнил этот завет отца, и отреставрированная и благоукрашенная икона вновь заняла свое место в Спасо-Преображенском соборе города как одна из самых почитаемых. К сожалению, сегодня ее местонахождение неизвестно.
Вторую обязанность, возложенную на него отцом, Павел Иванович выполнил только через пять лет. Она состояла в строительстве в Сумах детской больницы. В те времена далеко не в каждом губернском городе были специализированные лечебные учреждения такого типа. Детская больница была возведена в Сумах в 1896 году целиком на средства Павла Ивановича. Вскоре, после трагической смерти его малолетней дочери Зиночки, она стала именоваться больницей Святой Зинаиды. В среднем на ее содержание сахарозаводчик ежегодно выделял 30 тысяч рублей. На территории больницы была прекрасно обустроенная часовня с иконостасом из резного дуба, на котором, среди прочих, были помещены иконы Святой Зинаиды и Святого Глеба (в память об умерших детях Павла Ивановича). Это лечебное учреждение с хирургическим и инфекционным отделениями соответствовало всем требованиям европейских стандартов того времени и было рассчитано на 30 коек. Здесь работали первые в Сумах педиатры – А. И. Осташевский и С. Н. Харон. Один из них подсказал Павлу Ивановичу идею создания Детской аптеки, что и было реализовано в 1914 году. Нужно отметить, что сотрудники этой аптеки не только занимались изготовлением и продажей лекарств, но и выполняли санитарно-просветительную роль: давали советы, предлагали то или иное средство, а в сложных случаях настоятельно убеждали обратиться к врачу. И больница, и аптека стали первыми специализированными лечебными учреждениями для детей в России.
Однако Павел Иванович считал, что городу крайне необходимы и новые, оснащенные по последнему слову техники больницы для взрослых: городская и земская. По его инициативе они должны были появиться в Сумах до конца 1913 года. Но решение этого вопроса затягивалось из-за финансовых разногласий у городских властей. Благодаря посредничеству Харитоненко конфликт вскоре был разрешен. На устройство больницы сахарозаводчик выделил 100 тысяч рублей. Проект строительства уже был одобрен комиссией из представителей земства и города, но его реализации помешала внезапная смерть инициатора, а затем надвигающаяся Первая мировая война.
Наиболее трудоемким стало выполнение третьего завета Ивана Герасимовича – сооружение в Сумах здания для кадетского корпуса. Дело в том, что разрешение на открытие этого заведения Харитоненко-старший просил еще на личной аудиенции у императора Александра II. Однако в удовлетворении просьбы ему было отказано в связи с «нецелесообразностью» наличия такого заведения в уездном городке с населением 20 тысяч человек, которым были тогда Сумы. Но от замысла своего Иван Герасимович не отступился и обязал исполнить его сына, выделив на это в завещании 500 тысяч рублей. Высочайшее разрешение на учреждение кадетского корпуса было получено Павлом Ивановичем только в конце 1899 года. Помимо жертвуемого капитала в 1,5 млн рублей, он выделил под строительство здания участок земли в принадлежавшей ему усадьбе «Стенка». На эти средства и деньги, полученные от правительства, был сооружен оригинальный архитектурный ансамбль по проекту архитектора К. Иваницкого. Главное здание корпуса было построено в строго классическом стиле. В помещении было 30 классных комнат и два больших зала для строевых занятий и торжественных собраний, 4 спальни для кадетов, корпусная церковь, караульные, паровая кухня и склады. Было здесь предусмотрено и 30 жилых помещений для должностных лиц, которые находились рядом с главным корпусом. Таким образом, Сумской Михайловский кадетский корпус представлял собою целый учебный городок, по оснащенности и благоустройству не имевший аналогов в стране.