Все эти данные заставляют думать, что легенда о романтическом происхождении поэта в лучшем случае представляет собою плод недоразумения…»
Так или иначе, разрыв между супругами Толстыми произошёл, и шестинедельного Алексея Толстого мать перевозит на Черниговщину, в своё имение Блистава, а затем в Красный Рог Мглинского уезда – имение брата, А.А. Перовского.
Первые стихотворные опыты Толстого относятся к 1823–1824 годам, а зимой 1826 года А.А. Перовская с сыном и братом возвращаются в Петербург. Здесь происходит знакомство Алексея с наследником престола, будущим императором Александром II (он на полгода младше Толстого). В том же году становится «товарищем для игр» наследника. Осенью Алексей Перовский встречается в Москве с Пушкиным. Вероятно, с ним был и племянник.
Летом 1827 года, путешествуя по Германии, Перовский, мать Толстого и он сам знакомятся в Веймаре с Гёте. Существует свидетельство, что автор «Фауста» тепло встретил будущего поэта и подарил мальчику обломок бивня мамонта с собственным рисунком фрегата на нём.
Особая часть жизни Толстого – его дружба с наследником престола. Интересная история произошла 30 августа 1829 года, в день ангела Александра. Дед по матери, король прусский Фридрих-Вильгельм III, прислал внуку оловянных солдатиков. Дети – наследник и Толстой – разыгрались. Вошедший в комнату император Николай I увлёкся игрой и в конце концов присоединился к детям.
В 1831 году, отправившись с матерью и дядей в Италию, Толстой ведёт дневник. В Риме знакомится с К.П. Брюлловым, который делает рисунок в альбоме Толстого.
Государственную службу Толстой начал в 1834 году. Он зачислен «студентом» в Московский Главный архив Министерства иностранных дел, в котором в разное время служили многие известные деятели русской культуры – братья Веневитиновы и Киреевские, С.П. Шевырев, А.И. Кошелев… Он продолжает писать стихи, о них одобрительно отзывается В.А. Жуковский. Предполагают, что творческие опыты юного поэта поддержал и Пушкин. В начале декабря 1835 года Толстой подаёт прошение в Московский университет о допущении к сдаче университетского экзамена – «из предметов, составляющих курс словесного факультета, для получения учёного аттестата на право чиновников первого разряда», а 4 января 1936 года Совет Московского университета выдаёт Толстому аттестат на вступление в первый разряд чиновников государственной службы.
В это же время Толстой влюбился в княжну Елену Мещерскую, но обстоятельства жизни не способствовали развитию этого чувства: против выступает мать, а в июне он уезжает в Ниццу, сопровождая А.А. Перовского, больного «грудной болезнью» (очевидно, туберкулёзом). Но поездка обрывается в Варшаве: здесь 9 июля Алексей Алексеевич умирает на руках племянника… Толстой наследует всё состояние дяди, в том числе имение Погорельцы в Новозыбковском уезде Черниговской губернии.
25 ноября 1837 года после хлопот Толстого и его матери он переводится в Петербург в Департамент хозяйственных и счётных дел. Представлен к чину коллежского регистратора.
Вскоре Толстой назначен «к миссии нашей во Франкфурте-на-Майне, сверх штата». Он живёт в Германии, Италии, Франции. Пишет первые рассказы (на французском языке) – «Семья вурдалака», «Встреча через триста лет». Идёт служебный рост. В октябре 1839 года произведен в губернские секретари, 9 марта 1840 года пожалован в коллежские секретари, а в декабре того же года по Высочайшему повелению перемещён «младшим чиновником» во Второе Отделение Собственной Его Императорского Величества канцелярии.
В следующем году состоялся литературный дебют Толстого-прозаика: 15 мая 1841 года цензура дала разрешение на издание книги «Упырь. Сочинение Краснорогского» (СПб); псевдоним – от имения Толстого «Красный Рог».
26 января 1842 года Толстой пожалован в титулярные советники. В «Журнале Коннозаводства и Охоты» (№5) он публикует очерк «Два дня в Киргизской степи». Служебный и творческий рост Толстого в те годы шли наперегонки. Вообще в 1840-е годы он ведёт жизнь, обычную для светского человека той поры: частые отпуска со службы, путешествия, балы, охота, мимолётные романы… Современник описывает его как «красивого молодого человека, с белокурыми волосами и румянцем во всю щёку». Толстой славится своей силой: «свёртывал в трубку столовые ложки и вилки, вгонял пальцем в стену гвозди и разгибал подковы».
В мае 1843 года Толстой – камер-юнкер, а осенью он дебютирует как поэт – в «Листке для светских людей» (№40) без подписи опубликовано его стихотворение «Серебрянка» («Бор сосновый в стране одинокой стоит…»).
В 1845 году Толстой пожалован в коллежские ассесоры. В литературном сборнике графа В.А. Соллогуба «Вчера и сегодня» публикует рассказ «Артемий Семенович Бервенковский».
1846 год, январь: Толстой – надворный советник. Во второй книге сборника «Вчера и сегодня» появляется «Амена» – фрагмент из романа Толстого «Стебеловский». Правда, больше ничего об этом произведении не известно.
В 1847–1849 годах Толстой работает над балладами из русской истории, задумывает роман «Князь Серебряный». Бурная светская жизнь продолжается: в феврале 1848 года Толстой становится членом Петербургского Яхт-Клуба. Когда в апреле 1850 года его командируют в Калужскую губернию для участия в комиссии по её обревизованию, в одном из писем он называет эту обычную в общем для чиновника такого ранга командировку «изгнанием». Но зато в Калуге в губернаторском доме, где ведёт салон его жена А.О. Смирнова-Россет, Толстой встречается и близко знакомится с Гоголем. Более того, читает здесь свои стихотворения и отрывки из «Князя Серебряного». Одновременно решает свои имущественные дела: приобретает имение Пустынька близ Петербурга. Вскоре после возвращения Толстого в столицу, в январе 1850 года вспыхивает скандал после премьеры его пьесы «Фантазия» в Александринском театре – постановка не понравилась Николаю I и была снята с репертуара. К этому же времени относится знакомство на маскараде в Большом театре с женой конногвардейского полковника Софьей Андреевной Миллер (урождённая Бахметьева; 1825–1892). Эта женщина с завораживающим голосом, прекрасной фигурой и пышными волосами, умная, волевая, прекрасно образованная (знала 14 языков) с юности была обуреваема сильными страстями. Рассказывали, что её брат Пётр погиб на дуэли с одним из князей Вяземских, ввязавшись в запутанную историю любовных отношений сестры с князем. Писатель Дмитрий Григорович до старости вспоминал свой бурный роман с Софьей Андреевной («Она была необыкновенно страстной и всё просила нового»).
Софья Андреевна становится самым сильным сердечным увлечением и Алексея Толстого. С той поры он постоянно ищет встреч с ней.
19 мая 1851 года Толстому высочайше пожаловано звание церемониймейстера двора. В зиму 1851–1852 года он едет к дяде В.А. Перовскому в Оренбургскую губернию и посещает по дороге туда и обратно имение Смальково в Пензенской губернии, где в семье своего брата, П.А. Бахметева, живёт расставшаяся с мужем Софья Андреевна… Возвратившись весной в Петербург, Толстой хлопочет о смягчении участи И.С. Тургенева, арестованного в апреле 1852 года за статью памяти Гоголя.
В 1854 году в журнале «Современник» печатаются стихотворения Толстого и «Досуги Козьмы Пруткова», а летом Толстой предпринимает усилия по созданию партизанского отряда на балтийском побережье – идёт Восточная война. 28 марта 1855 года высочайшим приказом младший чиновник II Отделения статский советник и церемониймейстер граф Толстой определён майором в Стрелковый полк Императорской Фамилии, расквартированный в селе Медведь под Новгородом. Зачислен в списки первой роты первого батальона. В последующие месяцы Толстой довольно часто отлучается из полка по личным и литературным причинам, пока в декабре, уже в Одессе, не присоединяется к своей части. В феврале 1856 года Толстой, исполняющий обязанности батальонного командира, заболевает тифом. Александру II, недавно вступившему на престол, ежедневно докладывают телеграммами о состоянии его здоровья За ним ухаживает приехавшая в Одессу С.А. Миллер. Выздоровев, Толстой отправляется с возлюбленной в путешествие по Крыму, а в августе приезжает в Москву для участия в коронационных торжествах. Толстой вместе с штаб-офицерами полка «назначен для принятия балдахинов в день коронования». 26 августа он произведён в подполковники и назначен флигель-адъютантом к императору. К осени того же года относится сближение с А.С. Хомяковым и К.С. Аксаковым. В октябре при переформировании Стрелкового полка в б а т а л и о н по распоряжению императора оставлен в его штате с правом бессрочного отпуска в мирное время. Тогда же назначается делопроизводителем в Комитете по делам о раскольниках. 10 ноября умирает дядя, Лев Алексеевич Перовский, с которым Толстой находился в тёплых родственных отношениях. В это же время он знакомится с Л.Н. Толстым.