Биография графа Ф. Толстого была скандальной даже для современников, привычных к дуэльным историям с детства. В чине поручика он принимал участие в шведской войне 1808 года, однако за дуэли и скандалы был дважды разжалован в солдаты.
Служа простым ратником, за проявленную храбрость был награжден Георгиевским крестом и добился возвращения офицерского чина. Выйдя в отставку, граф Толстой поселился в Москве, страстью его были карточная игра, в которой он был всегда счастлив, и дуэли.
Была у него дуэльная история и с А. С. Пушкиным, закончившаяся, впрочем, примирением. На одном вечере приятель Толстого сообщил ему, что только что был вызван на дуэль, и просил его быть секундантом. Толстой согласился, и дуэль была назначена на другой день в 11 часов утра; приятель должен был заехать к Толстому и вместе с ним ехать на место дуэли. На другой день в условленное время приятель Толстого приехал к нему, застал его спящим и разбудил. «В чем дело?» — спросонья спросил Толстой. «Разве ты забыл, — робко спросил приятель, — что ты обещал мне быть моим секундантом?» — «Это уже не нужно, — ответил Толстой. — Я его убил». Оказалось, что накануне Толстой, не говоря ни слова своему приятелю, вызвал его обидчика, условился стреляться в 6 часов утра, убил его, вернулся домой и лег спать. Страстный картежник и ярый дуэлист, он сам насчитывал убитых им на дуэли одиннадцать человек. Все их имена он, подобно царю Ивану Грозному, записывал в своеобразный синодик. От брака с цыганкой Авдотьей Тугаевой у графа было двенадцать детей, одиннадцать из которых умерли. По мере того как у него умирали дети, он вычеркивал из своего синодика имя очередного убитого им на дуэли человека и ставил сбоку слово «квит». Так судьба жестоко отплатила тому, кто позволил в угоду собственному самолюбию и удальству поставить под сомнение понятия чести и достоинства истинного дворянина. Недаром Лев Николаевич Толстой говорил, что его дядя был столь богомолен и суеверен оттого, что его мучили угрызения совести. В старости он каялся, молился и клал земные поклоны, стараясь искупить преступления своей молодости и свои жестокие поступки.
Дуэль считается прерогативой отстаивания своей чести и достоинства мужчинами. Но такое мнение ошибочно. Женщины тоже были не прочь сразиться друг с другом; более того, дуэли между ними были не столь редки, и по большей части они были намного более кровавыми и изощренными.