Спустя неделю, после появления этих слухов, старшая дочь де Зетоллей — Мари, полегла от неизвестной болезни. Ради нее, Шарль пригласил врачей из самого Вашингтона, но те оказались бессильны ей помочь. Двенадцатого марта 1805-го года Мари Эммануэль Крюшон де Зетолль безвременно ушла из жизни. Похоронили ее на том же холме, около распятия. Надгробную плиту ее отец заказал из Чикаго, на которой было выгравировано что-то на французском языке. Единственное что бы могли разобрать местные жители (при желании) это было имя девочки и года жизни и смерти: 1795–1805 гг.
После смерти Мари, по городку поползли слухи, что Шарль де Зетолль пробудил, а то и вернул к жизни «черного знахаря». Все были уверены в том, что причиной к этому стал построение особняка и возведение креста на месте сожжения пришельца. От страха за свою жизнь, жители города начали увольняться с рабочих мест, предоставленных им Шарлем. В течение двух недель ушел последний из жителей, не объясняя причин, хотя Шарль и настаивал на ответах. Но даже суленые зарплаты, выросшие в три раза, не смогли изменить ситуации. Шарлю де Зетоллю пришлось прибегнуть к помощи рабочих из других штатов. При встрече на улице с Шарлем или его женой, жители города старались не обращать на них внимания, о то и вовсе переходить на другую сторону, постепенно ускоряя шаг. Даже в продовольственных магазинах их сторонились или же пытались быстро обслужить, а взятые деньги тут же сжигались в мусорных ведрах. Многие покупатели ждали своей очереди на улице, ожидая ухода де Зетоллей.
Возможно, они бы смогли пережить неприязнь города, если бы не новое несчастье — в феврале 1808-го года младшая (и уже единственная) дочь де Зетоллей пропала без вести. Две недели поисков ничего не дали, никто из жителей ничего не видел и не мог ничего сказать. Но де Зетолли были почти уверены в том, что все жители за одно и покрывают некую тайну. Но что они могли сделать? У Шарля даже начали зарождаться мысли о злом роке или проклятие — иначе, зачем ему было приглашать священника из Спрингфилда (местный наотрез отказался), чтобы тот освятил землю, на которой они жили? По слухам, когда святой отец окроплял стены особняка, от них исходило шипение и поднимался пар, сизого и ржаво-красного цвета.