В 1782 году родители посетили Наполеона в Бриенне. Карло мучился непонятными болями в желудке и приступами тошноты, так что причиной этого второго визита во Францию стала необходимость проконсультироваться у врачей. Железное здоровье его супруги пошатнулось от жестокого приступа послеродовой горячки, последовавшей за рождением ее одиннадцатого младенца — Марии Аннунциаты, будущей Каролины Мюрат, и поэтому она присоединилась к супругу, чтобы отправиться на воды в Бурбон ле Бен. Тем не менее хворая чета произвела в коллеже грандиозное впечатление. Карло был облачен в шелковый костюм, волосы его были напудрены, на боку — шпага, в то время как Летиция нарядилась в дорогое платье из белого шелка, украшенное модным кринолином. Хотя Наполеон вряд ли позволил бы провести себя показной родительской роскошью. За год до этого он писал отцу: «Если вы или мои крестные не способны обеспечить мне достаточных средств для поддержания мною в коллеже достойного существования, то в таком случае обратитесь с письменной просьбой о моем скором отъезде домой. Я устал представать нищим в глазах других и терпеть бесконечные насмешки высокомерных юнцов, чье превосходство надо мной заключается единственно в их богатом происхождении». Чем постоянно подвергаться подобным издевательствам, мальчик предпочел бы быть отданным в подмастерья для обучения ремеслу, расставшись тем самым со всякими претензиями на благородное происхождение. Но так как Карло находился в отъезде, на это письмо ответила Летиция, приложив свой чек на 300 франков, но одновременно давая понять, что осмелься сын написать еще одно послание в том же духе, семья не захочет даже знаться с ним. Летиция добавила также, что они с Карло не в состоянии оказывать ему материальную поддержку. Действительно, в это время семья испытывала значительные финансовые затруднения, и Карло пытался как-то спасти положение тем, что сажал тутовые деревья, наивно полагая, что корона возьмет на себя часть расходов, и держал в суде тяжбу с иезуитами за возвращение ему наследства, хотя сам орден вот уже десять лет как подвергался гонениям.
Несмотря на все тяготы и треволнения, месье де Буонапарте продолжал неустанно прилагать все усилия к тому, чтобы его дети получили достойное дворян образование. В 1783 году в Отен привезли Лючиано (Люсьена), чтобы вместе с Жозефом он изучал французский. Доставил мальчика в школу его дядя Феш, теперь уже аббат Феш, однако военное министерство отказалось выделить его племяннику стипендию для обучения в военной школе до тех пор, пока Наполеоне не закончит военное училище в Бриенне. Таковы были новые правила, запрещавшие одновременное предоставление стипендий братьям. Вот почему отцу пришлось взвалить на себя дополнительное бремя и первые полгода платить за обучение Люсьена в Бриенне, куда тот поступил в 1784 году.
В это время Жозеф сделал для себя твердый вывод, что он не годится для духовной карьеры. Поэтому, когда Карло приехал в Отен, чтобы забрать Люсьена в Бриенн, старший сын сказал ему о своем намерении оставить школу и, как другие братья, тоже продолжить учебу в военной школе.