Весной того же года Е. Ф. Керн получил служебное назначение в Дерпт. Жена должна была последовать за ним. Семейные отношения все более и более ухудшались. Бедная Анна Петровна томилась, скучала и тосковала. Еще в Лубнах она успела влюбиться в какого-то егерского офицера, которого в откровенных письмах к своей тетке Ф. П. Полторацкой она называла то LъEglantine [шиповник], то Immortelle. С ним она встречалась всего несколько раз, но душу его сразу узнала "по глазам" и с тех пор он часто вспоминался ей. К тому же она вновь забеременела, что приводило ее в отчаяние "Я и прежде говорила, – пишет она тетке, которая по летам годилась ей в подруги, – что не хочу иметь детей: для меня ужасна была мысль не любить их и теперь еще ужасна! Вы также знаете, что сначала я очень желала иметь дитя, и потому я имею некоторую нежность к Катеньке, хотя и упрекаю иногда себя, что она не довольно велика. Но этого [т. е. ожидаемого ребенка] все небесные силы не заставят меня любить: по несчастью, я такую чувствую ненависть ко всей этой фамилии, это такое непреодолимое чувство во мне, что я никакими силами не в состоянии от него избавиться".
В конце лета 1820 года Е. Ф. Керн был назначен начальником дивизии в Старый Быков, около Могилева. "Это будет очень близко от вас, – восклицает Анна Петровна, адресуясь к тетке, – но не знаю, почему это меня не радует… Я чувствую, что не буду истинно счастлива, как только тогда, когда я буду в состоянии законным образом отдать ему [т. е. Immortelle] мою любовь; иначе самое его присутствие не сделает меня счастливою, как только наполовину. Все поздравляют моего дорогого муженька, и он сказал мне, что мы поедем к дивизии к 1-му сентября; оттуда он отправится в Петербург, а я, если вы мне позволите, приеду к вам… Я думаю, что со мною ничего счастливого уже случиться не может, и потому сначала эта весть не принесла мне ни малейшего удовольствия, а теперь, обдумав, вижу, что в сентябре могу вас обнять и эта мысль приводит меня в трепет от восхищения".
"Что может быть горестнее моего положения? – жалуется она в одном из следующих писем, – не иметь около себя ни души, с кем бы могла излить свое сердце, поговорить и вместе поплакать. Несчастное творение я! Сам Всемогущий, кажется, не внемлет моим молитвам и слезам… К умножению моих печалей, вы ничего не отвечаете на мои письмы, и я не знаю, найду ли я подле вас отраду в удовольствии вашем меня видеть. Я уже вам сказывала, что не сомневаюсь в собственной особе вашей, но желала бы, чтобы папенька и маменька столько имели удовольствия меня видеть, сколько я почитаю блаженством быть у них, и хотя этим вознаградили меня за все претерпенные горести в разлуке с ними.
Маменька с своим чувствительным сердцем очень может судить о мучительном моём положении: пусть только вспомнит свое состояние, когда она оставляла своих родителей. С нежно любимым мужем; с милыми детьми, в цветущем состоянии, что способствовало ежеминутно делать жизнь ее спокойною и приятною. Возьмите теперь противоположность моего состояния: с таким же чувствительным сердцем, обремененным всеми возможными горестями, должна проводить дни мои, оставлена всею природою, с тем человеком, который никогда не может получить моей привязанности, ни даже уважения. Он обещал отпустить меня к вам, по усиленным просьбам моим, вскоре по приезде в Старый Быков, – теперь опять отговаривается и хочет, чтобы я пробыла там до отъезда его в Петербург, что не прежде будет, как в конце октября. Ему нужды нет, что я буду делать во время его разъездов одна, с ребенком, в этом несчастном городе, и как потом я в холод и колоть поеду в октябре; но я настою, чтобы ехать, как прежде сказано, и ежели он эгоист, то я вдвое имею право быть оной, хотя для тех, которым моя жизнь и благополучие еще дороги. Впрочем, это последнее время совсем заставило меня потерять терпение, и я бы в ад поехала, лишь бы знала, что там его не встречу. Вот состояние моего сердца".
В конце концов Анне Петровне удалось-таки вырваться от мужа и переехать к родителям и в Лубны. Она провела с Полтавской губернии несколько лет. Мы не знаем, пришлось ли ей сблизиться с ее Immortellъeм, но в 1824 г. она явно для всех уже была возлюбленной Аркадия Гавриловича Родзянко, полтавскаго помещика, эротического поэта и приятеля Пушкина.