Командир корабля, не выдержав несносных проказ графа, поступил с ним так, как на флоте издавна поступали с преступниками: ссадил Толстого на одном из Алеутских островов. Федор Толстой сошел на пустынный берег вместе со своей любимой обезьяной. Явление на берегу русского офицера с орангутангом потрясло туземцев настолько, что они тут же покорились ему и предложили быть их вождем. Граф задумался.
Однажды ему явился во сне святой Спиридоний, покровитель рода Толстых. Во сне святой остановил графа на краю пропасти. Любой человек решил бы, что святой Спиридоний предостерегает его от окончательного падения в пропасть порока и греха; но граф Толстой решил, что святой предостерегает его от того, чтобы быть царем алеутов, и отказался. На острове Толстой провел несколько месяцев, выиграв у местного вождя в карты весь «необитаемый» остров. Через месяц проходившее мимо острова судно подобрало графа и переправило его на Камчатку, откуда он, меняя собак на лошадей и лодки на паромы, отправился в Санкт-Петербург.
Граф Толстой принадлежал к старинному роду Толстых, одним из представителей коего при Петре I был известный Петр Андреевич Толстой. Именно ему поручил Петр вернуть в Россию сбежавшего со своей любовницей за границу царевича Алексея. Лестью, обманом, шантажом, клятвами он уговорил Алексея вернуться в Россию. Непокорный царевич был схвачен, заточен в Петропавловскую крепость и после допросов и пыток умерщвлен. По слухам, его задушили либо отравили ядом. Говорят, что именно Толстой стал фактическим исполнителем убийства. По слухам, умирая, царевич Алексей проклял обманувшего его П.А. Толстого и весь его род до 22-го колена.
Проклятие царевича периодически напоминало о себе появлением в роду Толстых либо слабоумного, либо совершенно аморального человека.
Федор Иванович Толстой. Рисунок А.С.Пушкина. Конец 1823 года
Страстью Федора Толстого были карты. Выигрывал он много, а потом кутил в своем особняке на Сивцевом Вражке. По слухам, не полагаясь на фортуну, он умело блефовал и «исправлял ошибки фортуны». Среди его друзей и карточных партнеров были Вяземский, Жуковский, Денис Давыдов и Пушкин. По мнению исследователей, Федор Толстой послужил прототипом и дуэлянта Зарецкого в «Евгении Онегине», и славного хозяина игорного дома опытного игрока Чекалинского в «Пиковой даме». Известно, что Грибоедов изобразил легендарного графа в своей знаменитой комедии «Горе от ума». Рассказывают, что на одном из рукописных списков комедии, ходивших по рукам, Федор собственноручно исправил грибоедовскую строчку «и крепко на руку не чист» на «в картишки на руку не чист». И приписал: «…чтобы не подумали, что ворует табакерки со стола». Знаменитая фраза «Только