В продолжение пребывания в Москве царской фамилии Ивана Алексеевича беспрестанно посещали его бывшие сослуживцы и старые знакомые. В числе их я чаще всех видела князя Петра Михайловича Волконского, графа Комаровского, князя Сапегу, двух братьев Бахметьевых, генерал-губернатора Западной Сибири Капцевича и графа Владимира Григорьевича Орлова. Иван Алексеевич принимал всех в своей спальной, в своем поношенном, местами изорванном халате на белых мерлушках, в поярковых сапогах, жалуясь на разные немощи и недуги. Мы знали, что это одна комедия, что недугами он хотел отделаться от поездки к цесаревичу, который через графа Комаровского поручал сказать Ивану Алексеевичу, что желает его видеть. Иван Алексеевич, отзываясь своими немощами, просил графа Комаровского выразить цесаревичу его преданность и благоговение, сказать, что он весь к услугам его высочества, но не встает с постели (он принимал Комаровского, случалось и других, лежа на кровати), что он развалина. На это граф Комаровский сказал, что цесаревич не принимает в уважение никаких отговорок и приказал передать ему, что если он не в состоянии встать с постели, то пускай велит привезти себя на кровати. Это подействовало. Начались сборы. С вечера, при шести свечах он брился, хладнокровно выводя из себя камердинера и делая каждому всевозможные досады и оскорбления. На другой день, после обеда, отдохнувши, надел на себя рыжеватый парик, длинный, темно-зеленого цвета, мохнатый заграничный сюртук и в четвероместной карете, в которой в 1812 году выехал из Москвы, отправился во дворец.
Он пробыл у цесаревича до вечера, возвратился домой, видимо, растроганный, молча прошел в свою комнату и лег на постель. Мы не смели его расспрашивать. Спустя несколько дней он сам сказал, что цесаревич живет очень просто, в верхнем этаже дворца, где помещаются фрейлины, и что он с трудом поднялся к нему. В другой раз, говоря о цесаревиче, он в раздумье сказал: "Да, это великий человек". С неделю Иван Алексеевич был смирен, нас как бы не замечал, не разговаривал и один ходил целые часы вдоль анфилады комнат. Что происходило в это свидание, так с Иваном Алексеевичем и умерло.