Дед по матери, Дмитрий Егорович Егоров, переменил фамилию («Егоров» от «Егорович»), когда узнал, что его усыновивший «отец» (он был незаконнорожденный) — «отец» со стороны (он был богатый аристократ); дед разорвал все с отцом; и сам стал себя воспитывать; имея художественные наклонности, он кончил театральное училище; одно время он пел в хоре Большого театра; но скоро, уступая совету хорошего знакомого, купца, стал помогать ему в его деле, бросил театр, занялся коммерцией; позднее имел и свое дело (меха); у него был достаток; был он человек очень чистый и строгий, но — замкнутый; его друг — доктор Иноземцев; другой, хороший знакомый — доктор Белоголовый; с ними он затворялся у себя; бабушка была ниже его и по уровню развития, и по интересам, ее девическая фамилия — Журавлева; где-то, через прабабушку, она была в родстве с Ремизовыми, с Лямиными и с другими купеческими фамилиями; с А. М. Ремизовым (с писателем) я нахожусь в каком-то преотдаленнейшем свойстве через прабабушку; мать помнит хорошо свою прабабушку (мою прапрабабушку); она ходила в мехах и в кокошнике; умерла же ста четырех лет; няня матери двенадцатилетней девочкой пережила двенадцатый год; я ее помню хорошо; она являлась к нам из богадельни, и мне вырезывала ворон; в доме у дедушки почему-то часто бывал молодой студент, Федор Никифорович Плевако; с Плевако были знакомы родители; но традиции знакомства шли через мать.
Любопытно: в доме дедушки (по матери) постоянно бывали какие-то Патеры; оказывается, эти Патеры отдаленные родственники моей бабушки (по отцу), кровной москвички; один из Патеров чудак-мистик, седобородый старик, изредка являлся у нас в доме; позднее, уже по смерти отца, он был потрясен моей статьей в «Новом Пути»; и расписывался во всяческом понимании меня, тогда почти никем не понятого.
Дедушка Егоров имел уязвимую пяту: боготворил свою Звездочку (так звал мою мать); и разрешал ей все, что ей ни взбредет в голову; так стала пятилетняя Звездочка тираном в доме; дедушки боялся весь дом, а дедушка боялся Звездочки; так и произошло, что Звездочка, будучи в четвертом классе гимназии, объявила, что из гимназии она выходит; дедушка не перечил: началась эпоха домашних учительниц, которые, разумеется, Звездочку ничему не научили, кроме музыки, которую она любила; наоборот: она их учила. Одна из воспитательниц стала позднее другом матери; она бывала у нас: Софья Георгиевна Надеждина, дочь Егора Ивановича Герцена, жившего слепцом на Сивцевом Вражке, впавшего в нищету, которому помогали старики Танеевы: с Сивцева Вражка и приходила Софья Георгиевна к нам, оставаясь верной насиженному месту; по Сивцеву Вражку гуляли мы; здесь же жил Григорий Аветович Джаншиев, о котором ниже.
Дедушка умер сорока пяти — сорока шести лет; бабушка в год лишилась всего, отдав деньги в руки какому-то негодяю; наступила ужасная нищета; и одновременно — заболевание матери, полюбившей одного из Абрикосовых (сыновей фабриканта), которому родители запретили жениться на матери, как нищей (Абрикосовы — хорошие знакомые дедушки); мать ряд лет любила его; у нее было множество женихов, среди которых были и богачи; но она всем отказывала, к негодованию бабушки; и терпела нищету.