Толстой не был практичным и трезвым в делах человеком. Его жена смогла навязать ему своих двух братьев в управляющие его имениями. Они стали обкрадывать, обманывать его, чуть не разорили, он стал думать – не начать ли ему снова служить императору ради жалованья, ждал гонорары, готов был за деньги делать переводы с иностранных языков. Супруги все более отдалялись, каждый жил своей жизнью. Толстой ощущал душевную усталость от жены, разочаровался в ней окончательно. Толстой понял, что он ошибся, оказался добычей холодной, расчетливой, некрасивой женщины. Он страдал, но изменить ничего не мог. Единственное, что он успел сделать: свои имения и земли завещал двоюродному брату и другу Николаю Жемчужникову. Жене он завещал движимое имущество: художественные вещи, книги, право на переиздание и получение доходов с его произведений. Свое завещание он от жены скрыл, потому что уже не доверял ей, жалел о жизни с этой алчной женщиной. Его душевные страдания от осознания непоправимой ошибки усугубляли его болезни. Усилились невралгия, эмфизема, астма, склероз. Удушье и боли усиливались, кто-то посоветовал Толстому использовать новое тогда средство – морфий, который действительно на время притуплял, а то и снимал боль и удушье, но он разрушал человеческий организм, о чем тогда не знали. Толстой умер от передозировки морфия; для облегчения своих мучений он ввел себе слишком большую дозу морфия; ему было 58 лет. С.А. Толстая (Миллер) после смерти мужа безжалостно сожгла его личные вещи, архив (письма, дневники, записные книжки и др.), продала право на переиздание его произведений, вывезла ценные художественные полотна и старинную библиотеку (намеревалась выгодно их продать). Она и ее братья старались утвердить память о ней, как о главной Музе и великой любви А.К. Толстого (что абсолютно не соответствует истине, но излагается во многих советских и современных изданиях). С.А. Толстая-Миллер прожила 70 лет. А.К. Толстой и Софья Андреевна общались 24 года, в том числе 12 лет были венчанными супругами.