«На третьем году возраста начали уже меня учить читать по старинному букварю и катехизису, без всяких правил. В то время большая часть среднего дворянства таким образом начинала воспитываться. Между тем не упускали из вида учить меня делать учтивые поклоны, приучали к французской одежде, из маленьких моих волос делали большой тупей, несколько буколь, и привязывали кошелек. Но сие не долго продолжалось. Неискусные парикмахеры выдрали мне все волосы и принуждены были надеть на меня парик: притом французский кафтан, шпага и башмаки представляли из меня какую-то маленькую карикатуру и дурную копию парижского жителя века Людовика XIV».
Так же, как и все его братья, с раннего детства Сергей был записан в военную службу, унтер-офицером в артиллерию, и после долгих колебаний родителей, где воспитываться ему — в кадетском корпусе или дома, решено было последнее, и Сергей Алексеевич был отпущен домой для «прохождения наук».
«Мне отстригли начинавший отрастать тупей, причесали в малые букли, привили длинную косу сзади, надели галстук с пряжкой, узкое исподнее и сапоги — и так из французской одежды я преобразился в маленького пруссака».
Обучение Сергея проходило прежде под руководством дьячка, затем местного лютеранского пастора, который учил его немецкому языку.
В это время, в 1777 году, отец его Алексей Васильевич был начальником над крепостями по польской и турецкой границе, и вся семья Тучковых перебралась на жительство в Киев.
«…Вместо унылых русских песен, раздирающих слух, рожков и сиповатых дудок, услышал я скрипки, гусли и цимбалы, притом пение молодых людей и девок, совсем отличное от диких тонов русских песен. Эти малороссийские песни, без всякой науки во всех правилах музыки сочиненные, поразили мой слух…»
Здесь Сергей Алексеевич изучал с гувернером французский язык, географию и историю. Отец его «…фехтовальное искусство и верховую езду почитал ненужными и говорил: „Я не хочу, чтобы дети мои выходили на поединок“, или „Наши казаки не знают манежа, а крепче других народов сидят на лошади и умеют ими управлять не учась“. Словесность почитал он совершенно пустым делом, равно как и музыку… Он хотел, чтобы все дети его служили в военной службе. Впрочем, мнение сие и поныне господствует между дворянством российским».
«…Некоторые из молодых офицеров, составляющих чертежную канцелярию, занимались со мной арифметикой, геометрией, рисованием и любили стихотворство. Они приносили с собой разные сочинения и читали оныя вслух один другому. Более всего понравились мне сочинения Ломоносова… Сии сочинения родили во мне охоту к стихотворству, я начал сочинять стихи по случаю».
В это время Сергею было 12 лет. Другу их семьи, ректору Киевской духовной академии стихи понравились, и он отправил их в Московский университетский журнал для печатания. В это же время, несмотря на недовольство отца, Сергей Тучков учится игре на флейте.
Вскоре вся семья Тучковых переезжает в Москву, и Сергею приходится бросить полюбившиеся ему занятия.