В восстании декабристов не участвовал.
В 1838 году граф сочинил балет «Эолова арфа», написал к нему либретто и даже был постановщиком некоторых танцев.
В 1849 году Совет Академии художеств утвердил Толстого в должности профессора за заслуги в области скульптуры. Толстой также участвовал в оформлении Храма Христа В 1858 г. принимал у себя поэта Тараса Шевченко, прожившего у него один год.
Последние годы жизни нередко отдыхал в усадьбе Марковиль в окрестностях Выборга, принадлежавшей Толстым в 1850-70-х гг.
Умер Фёдор Петрович Толстой 13 (25) апреля 1873 года; похоронен на Лазаревском кладбище Александро-Невской лавры.