Граф прежде всего ценил свои басни, хотя именно они давали наиболее обильную пищу многочисленным насмешникам. Его даже называли «отцом зубастых голубей» (именно такого голубя он изобразил в одной своей басне). К басням Крылова граф относился скептически, считая их мужицкими и недостаточно нравственными. Однако всегда побаивался его острого языка, поэтому мудро считал за лучшее сохранять с баснописцем дружеские отношения.
Сухонький, с острым носиком, в напудренном паричке, суетливый и в то же время преисполненный важности, Дмитрий Иванович всегда радушно встречал Крылова у себя дома, не забывая кроме роскошного обеда потчевать его своими новыми произведениями, обычно начиная чтения с новой басни.
«Щука и уда» – торжественно провозглашал Хвостов и с жаром начинал читать басню о несчастной щуке, проглотившей уду:
Иван Андреевич благосклонно кивал головой, насмешливо ухмыляясь про себя. Басня была нелепая и смешная. «Знатно написано!» – одобрял он Дмитрия Ивановича, который в порыве восторга делал выразительные жесты рукою, возвышал и приглушал голос, а затем приступал к следующей басне. Иван Андреевич, усевшись поудобнее на диван, мирно дремал.
Затем хозяин приглашал гостя в столовую, где уже был накрыт стол. Любитель покушать, Крылов всегда бывал вознагражден за терпение обилием закусок и великолепных блюд. Поросенок под хреном, свиные отбивные котлеты величиной с тарелку, заливной осетр, телятина под соусом и многие другие кушанья. Повар Хвостова славился своим мастерством. Любимый напиток Крылова – квас, был превосходен, Иван Андреевич улыбался и подкладывал себе на тарелку новые порции. Хозяину нельзя было отказать в гостеприимстве.
Справедливости ради все же следует отметить, что наряду со слабыми, явно плохими стихами, у Хвостова имелись и вполне добротные, профессионально написанные стихотворения, заслуживающие похвалы специалистов. В 1824 году H. М. Карамзин писал И. И. Дмитриеву: «Я смотрю с умилением на графа Хвостова… за его постоянную любовь к стихотворству… Вот любовь, достойная таланта! Он заслуживает иметь его, если и не имеет».
Профессор Харьковского университета В. Г. Маслович дал Хвостову такую же оценку: «…вообще в России о нем превратно судят, несмотря, что известен он от моря Охотского до моря Черного. Сколько на таком пространстве вымышлено о нем анекдотов, по большей части смешных и всегда несправедливых. Чтоб о Хвостове как о сочинителе судить беспристрастно, то необходимо его помещать не между нынешними писателями, а должно отнести ко времени, бывшем вскоре после Сумарокова, тогда начинал Хвостов свое стихотворное поприще… Да и многие из нынешних писателей, которые так охотно позволяют себе смеяться над Хвостовым, часто бывают ниже его. Одним словом, если бы граф Хвостов не был так самолюбив, не имел несчастной страсти навязывать каждому проходящему своих сочинений и когда бы Г беспрестанно не толковал о них своим знакомым, тогда бы он, правда, не был столь известен, зато не забавлял бы собой молодых шалунов и не доставлял бы им случая острить языки, а был бы помещен во втором разряде российских поэтов…». Сам Василий Григорьевич Маслович пользовался известностью как баснописец. Это обстоятельство, по-видимому, сблизило малороссийского писателя с петербургским чудаком Д. И. Хвостовым, чьи литературные опусы по числу сравнялись с эпиграммами на него. При этом большинство авторов, остривших насчет Хвостова, действительно не превосходили его дарованием. В своем очерке В. Г. Маслович дает довольно точную и правдивую характеристику этого стихотворца, бывшего забавным анахронизмом начала XIX века.
Маслович оставил нам подробный словесный портрет графа Хвостова, каким он был в 1818 году: «Граф Хвостов имеет уже 60 лет, росту среднего, несколько сутуловат, в лице и корпусе больше полон, но в ногах сух. Волосы у него зачесаны вверх. Одевается довольно неопрятно, жилет всегда замаран табаком. Фрак на нем по большей части истемна-серый, а исподнее всегда короткое немецкое, еще более жилета замаранное. Сапоги большие, длинные и сверху с заворотившимися голенищами. Походка его особенная, ноги волочатся по земле, а колени согнуты, но это, надо думать от лет, а не от худой привычки…».