Вскоре путешествие стало более мучительным. Между Муленом и Лионом народ показывался только из любопытства. В Лионе у Наполеона всегда было много сторонников, признательных за то, что он сделал для их города и промышленности; тем не менее немалая часть населения исповедовала совершенно противоположные чувства. Во избежание манифестаций через Лион проехали ночью. Чем дальше на Юг, тем чаще раздавались крики «Да здравствует Король!», а вскоре к ним добавились и вопли «Долой тирана! Смерть тирану!». В Авиньоне возбужденное население гневно требовало выдать ему
В Оргоне ожидались многочисленные толпы и еще более бурные сцены. Облеченные огромной ответственностью комиссары не нашли иного средства избежать опасности, как переодеть Наполеона, и заставили его надеть иностранный мундир, дабы сойти за одного из офицеров кортежа. Подобное унижение – наиболее мучительное из всех, каким он подвергался, – было необходимо. Когда добрались до Оргона, вооруженная виселицей толпа потребовала выдать ей тирана и бросилась к императорской карете, чтобы открыть ее силой. В карете находился только Бертран, который мог поплатиться жизнью за народный гнев. Шувалов, прекрасно говоривший по-французски, выскочил из кареты и попытался пробудить в разъяренных людях чувства, которые надлежит питать к пленному. Русский мундир послужил Шувалову еще более, чем его речи, и ему удалось утихомирить самых разгоряченных. Кареты тем временем ушли от опасности. На следующих этапах бурных сцен стало меньше, и они совершенно прекратились при приближении к морю.
В заливе Сен-Рафаэль Наполеона ожидал английский фрегат «Неустрашимый», приготовленный полковником Кэмпбеллом (комиссаром от Англии). Двадцать восьмого апреля он отплыл на Эльбу и 3 мая бросил якорь на рейде Портоферрайо. На следующий день, 4 мая, Наполеон сошел на берег под радостные крики жителей, гордившихся тем, что ими будет править монарх, который сошел с величайшего из тронов, привез, по слухам, огромные сокровища, и должен осыпать остров благодеяниями. Вместо всемирных почестей он получил рукоплескания нескольких тысяч островитян, рыбаков и рудокопов. Пустая и жестокая человеческая комедия! Наполеона, императора великой Империи, простиравшейся от Рима до Любека, ныне приветствовали как монарха острова Эльба!