Алексей Константинович появился на свет 24 августа (5 сентября)1817 года в Санкт-Петербурге. Его отцом был граф Константин Петрович Толстой, старший брат художника Ф. П. Толстого, а мать – Анна Алексеевна Перовская, воспитанница (внебрачная дочь) графа А. К. Разумовского. По неизвестной причине сразу после рождения сына Анна Алексеевна ушла от мужа и переехала к брату в имение в Черниговской губернии.
Отца маленькому Алеше заменил его дядя, известный литератор Алексей Алексеевич Перовский, писавший под псевдонимом Антония Погорельского.
Для любимого племянника он написал замечательную книгу «Черная курица или Подземные жители», вошедшую в золотой фонд детской литературы.
