Легко понять, что именно критики могли бы поставить ему в вину, если бы захотели. Постепенно так и произошло. Последние пятнадцать лет жизни Валлоттона, с 1910-го по 1925-й, отмечены все большей изоляцией и отстраненностью; он становится все более обидчивым, впадает в депрессию — или, как тогда говорили, в неврастению; в его дневнике появляются размышления о самоубийстве. Его ужасает война, угнетает собственное бездействие; даже совсем не воинственный Вюйар при деле — охраняет мосты. Валлоттон кажется бо́льшим французом, чем все французы, вместе взятые, в своем отвращении к немцам; неменьшее отвращение у него вызывает французское гражданское население — их "развращенность", алкоголизм, ограниченность; сексуальная распущенность женщин, чьи мужья и любовники ушли на фронт. Первые послевоенные годы не приносят облегчения: французские ценности и французский дух переживают упадок; упадок переживает и мораль, что хорошо видно по "массовому онанизму вечеринок с танго". У него мало друзей, он существует в ледяном отчуждении от семьи. Его карьера забуксовала — за несколько месяцев иногда ни единой продажи; картины возвращаются из галерей и загромождают студию; их даже не распаковывают на аукционах, и это вредит его репутации. В 1916 году слух, что одну из своих картин он написал с фотографии (теперь вполне обычная практика), побудил одного швейцарского коллекционера вернуть все картины Валлоттона из опасения, что они упадут в цене.
Кроме всего прочего, мода оборачивалась против него. В 1911-м он замечает: "Кубизм — последний крик моды, те, кто с ним уже знаком, слишком гордятся собой, чтобы обращать внимание на что-то другое". К 1916 году Валлоттон, кажется, охвачен паранойей: "Мои картины выставляются в Гааге, в Христиании, в Базеле, скоро будут в Барселоне. Но из этого ничего не выйдет. Кубисты, футуристы, матиссисты и так далее прилагают невероятные усилия, действуя через представителей, торговцев, брокеров по всей Европе и в Америках. Они исподволь готовят послевоенный переворот".
И еще его картины проваливаются в неправильную ценовую нишу: "Легче продать картину за 50 000 франков, чем за 500; коллекционеры хотят либо "новых художников" по бросовым ценам, либо "ренуаров" за 50 000 франков — мой ценовой уровень никому не нужен". Валлоттон однажды дал Хеди Ханлозер мудрый совет, сказав, что "посредственная картина
В свои дневные пейзажи он привнес собственную интерпретацию идеализирующей традиции Пуссена и Рубенса. Пуссен удалял все случайное в природе, его творческое воображение перестраивало окружающий мир так, чтобы он вписался в подобающе высокий стиль. Но Рубенс, по мнению Валлоттона, превзошел даже Пуссена: "На мой взгляд, он величайший мастер пейзажа, потому что у него есть чувство универсального. Его пейзажи — скорее воплощения природы, чем изображения случайностей топографии". Вдохновляясь этими двумя мастерами, Валлоттон, начиная с 1909 года, развивал собственную идею